現(xiàn)實(shí)生活中的關(guān)鍵信息提取（第 2 部分）：完善開(kāi)源 LLM 性能
繼續(xù)第 1 部分，本指南探討使用開(kāi)源大型語(yǔ)言模型 (LLM) – Qwen2 2B 和 LLaMA 3.1 – 進(jìn)行發(fā)票信息提取，重點(diǎn)是克服數(shù)據(jù)隱私問(wèn)題和硬件限制（具有 12GB VRAM 的 RTX 3060）。
為什么選擇 Qwen2 2B 和 LLaMA 3.1？
這些模型的選擇是由資源限制驅(qū)動(dòng)的。 Qwen2-VL-2B-Instruct 由于其高效的尺寸，優(yōu)于較大的 7B 模型。通過(guò) Ollama 訪問(wèn)的 LLaMA 3.1 (8B) 因其優(yōu)化的長(zhǎng)上下文理解而被選中。 其他模型，例如 Ollama 中的 Qwen2（缺乏圖像支持）和 LLaVA（多語(yǔ)言功能不足），被認(rèn)為不適合。
這種雙模型策略利用了 Qwen2 在一般關(guān)鍵信息提取方面的優(yōu)勢(shì)和 LLaMA 3.1 卓越的長(zhǎng)上下文處理和 JSON 輸出一致性，特別是對(duì)于多語(yǔ)言文檔。 Qwen2 最初提取原始信息，然后 LLaMA 3.1 將其細(xì)化并構(gòu)建為標(biāo)準(zhǔn)化 JSON 格式。 PaddleOCR 與第 1 部分一樣，增強(qiáng)了 Qwen2 的視覺(jué)功能。
日本發(fā)票示例
使用日本發(fā)票作為測(cè)試用例。 初始 OCR 過(guò)程（結(jié)合語(yǔ)言檢測(cè)和 PaddleOCR）生成以下識(shí)別文本：
<code>Recognized Text:
{'ori_text': '根岸 東急ストア TEL 045-752-6131 領(lǐng)収証 [TOP2C!UbO J3カード」 クレヅッ 卜でのお支払なら 200円で3ボイン卜 お得なカード! 是非こ入會(huì)下さい。 2013年09月02日(月) レジNO. 0102 NOO07さ と う 001131 スダフエウ卜チーネ 23 単198 1396 003271 オインイ年 ユウ10 4238 000805 ソマ一ク スモー一クサーモン 1298 003276 タカナン ナマクリーム35 1298 001093 ヌテラ スフレクト 1398 000335 バナサ 138 000112 アボト 2つ 単158 1316 A000191 タマネキ 429 合計(jì) 2,111 (內(nèi)消費(fèi)稅等 100 現(xiàn)金 10001 お預(yù)り合計(jì) 110 001 お釣り 7 890',
'ori_language': 'ja',
'text': 'Negishi Tokyu Store TEL 045-752-6131 Receipt [TOP2C!UbO J3 Card] If you pay with a credit card, you can get 3 points for 200 yen.A great value card!Please join us. Monday, September 2, 2013 Cashier No. 0102 NOO07 Satou 001131 Sudafue Bucine 23 Single 198 1396 003271 Oinyen Yu 10 4238 000805 Soma Iku Smo Iku Salmon 1298 003276 Takanan Nama Cream 35 1 298 001093 Nutella Sprect 1398 000335 Banasa 138 000112 Aboto 2 AA 158 1316 A000191 Eggplant 429 Total 2,111 (including consumption tax, etc. 100 Cash 10001 Total deposited 110 001 Change 7 890',
'language': 'en',}</code>
這是與 ChatGPT 基線進(jìn)行比較，證明了 ChatGPT 在此初始測(cè)試中的卓越性能。
Qwen2 2B 結(jié)果（獨(dú)立）
獨(dú)立使用Qwen2暴露了它的局限性。 JSON 輸出在多個(gè)領(lǐng)域不完整且不準(zhǔn)確，凸顯了其在一致的 JSON 格式和長(zhǎng)上下文處理方面的困難。
結(jié)合 Qwen2 和 LLaMA 3.1 方法
采用 LLaMA 3.1 作為后處理器來(lái)細(xì)化 Qwen2 的輸出，得到了改進(jìn)但仍然不完美的結(jié)果。 雖然一些關(guān)鍵字段被準(zhǔn)確提取，但詳細(xì)的項(xiàng)目信息仍然存在問(wèn)題。
未來(lái)改進(jìn)：微調(diào) Qwen2VL
下一部分將使用收據(jù)數(shù)據(jù)集詳細(xì)微調(diào) Qwen2VL 模型，旨在顯著提高這項(xiàng)專門(mén)任務(wù)的準(zhǔn)確性和處理速度。
結(jié)論
該實(shí)驗(yàn)展示了開(kāi)源法學(xué)碩士在現(xiàn)實(shí)世界關(guān)鍵信息提取方面的潛力和局限性。雖然組合方法比使用單一模型提供了改進(jìn)，但為了實(shí)現(xiàn)最佳性能，需要進(jìn)一步細(xì)化，特別是通過(guò)模型微調(diào)。 對(duì)數(shù)據(jù)隱私和高效資源利用的關(guān)注仍然是這種開(kāi)源方法的關(guān)鍵優(yōu)勢(shì)。
以上是關(guān)鍵信息提取的實(shí)用方法（第 2 部分）的詳細(xì)內(nèi)容。更多信息請(qǐng)關(guān)注PHP中文網(wǎng)其他相關(guān)文章！
熱AI工具
Undress AI Tool
免費(fèi)脫衣服圖片
Undresser.AI Undress
人工智能驅(qū)動(dòng)的應(yīng)用程序，用于創(chuàng)建逼真的裸體照片
AI Clothes Remover
用于從照片中去除衣服的在線人工智能工具。
Clothoff.io
AI脫衣機(jī)
Video Face Swap
使用我們完全免費(fèi)的人工智能換臉工具輕松在任何視頻中換臉！
熱門(mén)文章
熱工具
記事本++7.3.1
好用且免費(fèi)的代碼編輯器
SublimeText3漢化版
中文版，非常好用
禪工作室 13.0.1
功能強(qiáng)大的PHP集成開(kāi)發(fā)環(huán)境
Dreamweaver CS6
視覺(jué)化網(wǎng)頁(yè)開(kāi)發(fā)工具
SublimeText3 Mac版
神級(jí)代碼編輯軟件(SublimeText3)
熱門(mén)話題
Python的UNITDEST或PYTEST框架如何促進(jìn)自動(dòng)測(cè)試？
Jun 19, 2025 am 01:10 AM
Python的unittest和pytest是兩種廣泛使用的測(cè)試框架，它們都簡(jiǎn)化了自動(dòng)化測(cè)試的編寫(xiě)、組織和運(yùn)行。1.二者均支持自動(dòng)發(fā)現(xiàn)測(cè)試用例并提供清晰的測(cè)試結(jié)構(gòu)：unittest通過(guò)繼承TestCase類并以test\_開(kāi)頭的方法定義測(cè)試；pytest則更為簡(jiǎn)潔，只需以test\_開(kāi)頭的函數(shù)即可。2.它們都內(nèi)置斷言支持：unittest提供assertEqual、assertTrue等方法，而pytest使用增強(qiáng)版的assert語(yǔ)句，能自動(dòng)顯示失敗詳情。3.均具備處理測(cè)試準(zhǔn)備與清理的機(jī)制：un
如何將Python用于數(shù)據(jù)分析和與Numpy和Pandas等文庫(kù)進(jìn)行操作？
Jun 19, 2025 am 01:04 AM
pythonisidealfordataanalysisionduetonumpyandpandas.1）numpyExccelSatnumericalComputationswithFast，多dimensionalArraysAndRaysAndOrsAndOrsAndOffectorizedOperationsLikenp.sqrt（）
什么是動(dòng)態(tài)編程技術(shù)，如何在Python中使用它們？
Jun 20, 2025 am 12:57 AM
動(dòng)態(tài)規(guī)劃（DP）通過(guò)將復(fù)雜問(wèn)題分解為更簡(jiǎn)單的子問(wèn)題并存儲(chǔ)其結(jié)果以避免重復(fù)計(jì)算，來(lái)優(yōu)化求解過(guò)程。主要方法有兩種：1.自頂向下（記憶化）：遞歸分解問(wèn)題，使用緩存存儲(chǔ)中間結(jié)果；2.自底向上（表格化）：從基礎(chǔ)情況開(kāi)始迭代構(gòu)建解決方案。適用于需要最大/最小值、最優(yōu)解或存在重疊子問(wèn)題的場(chǎng)景，如斐波那契數(shù)列、背包問(wèn)題等。在Python中，可通過(guò)裝飾器或數(shù)組實(shí)現(xiàn)，并應(yīng)注意識(shí)別遞推關(guān)系、定義基準(zhǔn)情況及優(yōu)化空間復(fù)雜度。
如何使用__ITER__和__NEXT __在Python中實(shí)現(xiàn)自定義迭代器？
Jun 19, 2025 am 01:12 AM
要實(shí)現(xiàn)自定義迭代器，需在類中定義__iter__和__next__方法。①__iter__方法返回迭代器對(duì)象自身，通常為self，以兼容for循環(huán)等迭代環(huán)境；②__next__方法控制每次迭代的值，返回序列中的下一個(gè)元素，當(dāng)無(wú)更多項(xiàng)時(shí)應(yīng)拋出StopIteration異常；③需正確跟蹤狀態(tài)并設(shè)置終止條件，避免無(wú)限循環(huán)；④可封裝復(fù)雜邏輯如文件行過(guò)濾，同時(shí)注意資源清理與內(nèi)存管理；⑤對(duì)簡(jiǎn)單邏輯可考慮使用生成器函數(shù)yield替代，但需結(jié)合具體場(chǎng)景選擇合適方式。
Python編程語(yǔ)言及其生態(tài)系統(tǒng)的新興趨勢(shì)或未來(lái)方向是什么？
Jun 19, 2025 am 01:09 AM
Python的未來(lái)趨勢(shì)包括性能優(yōu)化、更強(qiáng)的類型提示、替代運(yùn)行時(shí)的興起及AI/ML領(lǐng)域的持續(xù)增長(zhǎng)。首先，CPython持續(xù)優(yōu)化，通過(guò)更快的啟動(dòng)時(shí)間、函數(shù)調(diào)用優(yōu)化及擬議中的整數(shù)操作改進(jìn)提升性能；其次，類型提示深度集成至語(yǔ)言與工具鏈，增強(qiáng)代碼安全性與開(kāi)發(fā)體驗(yàn)；第三，PyScript、Nuitka等替代運(yùn)行時(shí)提供新功能與性能優(yōu)勢(shì)；最后，AI與數(shù)據(jù)科學(xué)領(lǐng)域持續(xù)擴(kuò)張，新興庫(kù)推動(dòng)更高效的開(kāi)發(fā)與集成。這些趨勢(shì)表明Python正不斷適應(yīng)技術(shù)變化，保持其領(lǐng)先地位。
如何使用插座在Python中執(zhí)行網(wǎng)絡(luò)編程？
Jun 20, 2025 am 12:56 AM
Python的socket模塊是網(wǎng)絡(luò)編程的基礎(chǔ)，提供低級(jí)網(wǎng)絡(luò)通信功能，適用于構(gòu)建客戶端和服務(wù)器應(yīng)用。要設(shè)置基本TCP服務(wù)器，需使用socket.socket()創(chuàng)建對(duì)象，綁定地址和端口，調(diào)用.listen()監(jiān)聽(tīng)連接，并通過(guò).accept()接受客戶端連接。構(gòu)建TCP客戶端需創(chuàng)建socket對(duì)象后調(diào)用.connect()連接服務(wù)器，再使用.sendall()發(fā)送數(shù)據(jù)和.recv()接收響應(yīng)。處理多個(gè)客戶端可通過(guò)1.線程：每次連接啟動(dòng)新線程；2.異步I/O：如asyncio庫(kù)實(shí)現(xiàn)無(wú)阻塞通信。注意事
如何在Python中切片列表？
Jun 20, 2025 am 12:51 AM
Python列表切片的核心答案是掌握[start:end:step]語(yǔ)法并理解其行為。1.列表切片的基本格式為list[start:end:step]，其中start是起始索引（包含）、end是結(jié)束索引（不包含）、step是步長(zhǎng)；2.省略start默認(rèn)從0開(kāi)始，省略end默認(rèn)到末尾，省略step默認(rèn)為1；3.獲取前n項(xiàng)用my_list[:n]，獲取后n項(xiàng)用my_list[-n:]；4.使用step可跳過(guò)元素，如my_list[::2]取偶數(shù)位，負(fù)step值可反轉(zhuǎn)列表；5.常見(jiàn)誤區(qū)包括end索引不
Python類中的多態(tài)性
Jul 05, 2025 am 02:58 AM
多態(tài)是Python面向?qū)ο缶幊讨械暮诵母拍睿浮耙环N接口，多種實(shí)現(xiàn)”，允許統(tǒng)一處理不同類型的對(duì)象。1.多態(tài)通過(guò)方法重寫(xiě)實(shí)現(xiàn)，子類可重新定義父類方法，如Animal類的speak()方法在Dog和Cat子類中有不同實(shí)現(xiàn)。2.多態(tài)的實(shí)際用途包括簡(jiǎn)化代碼結(jié)構(gòu)、增強(qiáng)可擴(kuò)展性，例如圖形繪制程序中統(tǒng)一調(diào)用draw()方法，或游戲開(kāi)發(fā)中處理不同角色的共同行為。3.Python實(shí)現(xiàn)多態(tài)需滿足：父類定義方法，子類重寫(xiě)該方法，但不要求繼承同一父類，只要對(duì)象實(shí)現(xiàn)相同方法即可，這稱為“鴨子類型”。4.注意事項(xiàng)包括保持方
