欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

基于MinerU構(gòu)建可復(fù)現(xiàn)文檔解析評測系統(tǒng):從OCR到上下文工程

基于MinerU構(gòu)建可復(fù)現(xiàn)文檔解析評測系統(tǒng):從OCR到上下文工程 1. 項(xiàng)目概述從“識別”到“理解”的跨越在文檔智能領(lǐng)域我們早已習(xí)慣了“OCR光學(xué)字符識別”這個(gè)詞。它就像一個(gè)兢兢業(yè)業(yè)的打字員能把圖片或PDF上的文字一個(gè)不差地敲進(jìn)電腦里。但問題也隨之而來當(dāng)我們需要從一份復(fù)雜的財(cái)務(wù)報(bào)表里提取“凈利潤”數(shù)據(jù)或者從一份合同里找出“違約責(zé)任”條款時(shí)面對OCR輸出的、動(dòng)輒成千上萬字的純文本我們依然需要人工去大海撈針。這個(gè)過程費(fèi)時(shí)費(fèi)力且極易出錯(cuò)。這背后反映的是傳統(tǒng)文檔處理流程的一個(gè)核心瓶頸我們擁有了“識別”的能力但遠(yuǎn)未達(dá)到“理解”的層次?!癈ontext Engineering”上下文工程正是為了解決這個(gè)問題而生的新范式。它不再將文檔視為一個(gè)扁平的字符集合而是將其看作一個(gè)富含結(jié)構(gòu)、語義和關(guān)聯(lián)信息的復(fù)雜對象。其核心目標(biāo)是讓機(jī)器能夠像人一樣結(jié)合文檔的版面布局、邏輯結(jié)構(gòu)、領(lǐng)域知識乃至前后文語境去理解并提取出真正有價(jià)值的信息。這不僅僅是技術(shù)的升級更是思維模式的轉(zhuǎn)變——從“我看到了什么字”轉(zhuǎn)向“這些字在上下文中意味著什么”。而“MinerU”這個(gè)工具的出現(xiàn)為實(shí)踐這一范式提供了絕佳的試驗(yàn)場。它不是一個(gè)簡單的OCR引擎而是一個(gè)集成了版面分析、文本識別、信息抽取和結(jié)構(gòu)化輸出于一體的開源框架。更重要的是它強(qiáng)調(diào)“可復(fù)現(xiàn)性”。在算法評測和實(shí)際項(xiàng)目迭代中可復(fù)現(xiàn)性意味著一切它確保了不同團(tuán)隊(duì)、不同時(shí)間點(diǎn)對同一份文檔的處理結(jié)果是一致的也使得性能的對比、模型的優(yōu)化有了堅(jiān)實(shí)可靠的基礎(chǔ)。因此這個(gè)項(xiàng)目的目標(biāo)非常明確利用MinerU搭建一個(gè)從原始文檔輸入到結(jié)構(gòu)化信息輸出且全程可復(fù)現(xiàn)、可評測的完整文檔解析流水線。我們要做的不僅是展示如何調(diào)用幾個(gè)API更是要深入剖析如何設(shè)計(jì)評測指標(biāo)、如何構(gòu)建測試集、如何分析錯(cuò)誤案例從而將“上下文工程”的理念落地為一套嚴(yán)謹(jǐn)?shù)墓こ虒?shí)踐方法。無論你是希望優(yōu)化內(nèi)部文檔處理流程的開發(fā)者還是對多模態(tài)文檔理解感興趣的研究者這套方法都能為你提供一個(gè)清晰的路線圖。2. 核心思路與方案選型為什么是MinerU在決定以MinerU為核心搭建這套系統(tǒng)之前市面上其實(shí)有不少選擇。從商業(yè)化的云服務(wù)如各家大廠提供的文檔智能API到開源模型如LayoutLMv3、Donut等再到一些傳統(tǒng)的自研流水線。最終選擇MinerU是基于以下幾個(gè)核心考量這些考量也恰恰體現(xiàn)了“可復(fù)現(xiàn)評測”系統(tǒng)的設(shè)計(jì)哲學(xué)。2.1 選型對比閉源云服務(wù) vs. 開源模型 vs. MinerU閉源云服務(wù)如Azure Form Recognizer Google Document AI優(yōu)點(diǎn)開箱即用精度通常較高針對通用場景無需考慮部署和算力。缺點(diǎn)黑盒與不可復(fù)現(xiàn)你無法知曉其背后的模型版本、預(yù)處理邏輯。今天調(diào)用的服務(wù)和明天調(diào)用的內(nèi)部可能已悄然更新導(dǎo)致評測結(jié)果波動(dòng)完全違背“可復(fù)現(xiàn)”原則。成本與數(shù)據(jù)安全按次計(jì)費(fèi)在大量評測中成本不可控。敏感文檔上傳至第三方存在合規(guī)風(fēng)險(xiǎn)。定制化能力弱難以針對特定領(lǐng)域、特定版式的文檔進(jìn)行深度優(yōu)化和迭代。開源預(yù)訓(xùn)練模型如LayoutLM系列優(yōu)點(diǎn)完全開源透明可復(fù)現(xiàn)性強(qiáng)是學(xué)術(shù)研究的主流。缺點(diǎn)工程化門檻高從模型下載、環(huán)境配置、前后處理代碼編寫到部署成穩(wěn)定服務(wù)需要大量的工程工作。一個(gè)完整的文檔解析流水線遠(yuǎn)不止一個(gè)模型還包括OCR、版面分析、后處理等環(huán)節(jié)每個(gè)環(huán)節(jié)都需要自己組裝和調(diào)試。評測流水線不統(tǒng)一不同論文、不同團(tuán)隊(duì)使用的評測腳本、數(shù)據(jù)預(yù)處理方式可能不同導(dǎo)致結(jié)果難以直接橫向比較。MinerU開源框架優(yōu)點(diǎn)端到端流水線它提供了一個(gè)完整的解決方案覆蓋了從文檔加載、預(yù)處理、OCR/版面分析可集成多種后端引擎如PaddleOCR、Tesseract到基于規(guī)則或深度學(xué)習(xí)的信息抽取再到結(jié)構(gòu)化導(dǎo)出的全流程。這大大降低了工程復(fù)雜度。強(qiáng)調(diào)可復(fù)現(xiàn)性其設(shè)計(jì)理念就包含了對數(shù)據(jù)、模型、處理流程的版本化管理。你可以通過配置文件如YAML完整地定義一次解析任務(wù)的所有參數(shù)確保在任何機(jī)器、任何時(shí)間只要配置和模型文件一致輸出就一致。模塊化與可擴(kuò)展各個(gè)組件閱讀器、解析器、抽取器、輸出器是松耦合的。你可以輕松替換其中的OCR引擎或者插入自己訓(xùn)練的信息抽取模型而不影響其他部分。內(nèi)置評測工具M(jìn)inerU通常提供了對解析結(jié)果進(jìn)行評估的基礎(chǔ)工具或模式方便我們構(gòu)建自己的評測體系。注意選擇MinerU并不意味著它完美無缺。它的精度在特定場景下可能不如頂尖的商業(yè)API其活躍度和社區(qū)支持也需要評估。但對于構(gòu)建一個(gè)可控、可復(fù)現(xiàn)、可迭代的評測與研究平臺而言它的透明性和完整性是無可替代的優(yōu)勢。2.2 系統(tǒng)架構(gòu)設(shè)計(jì)思路基于MinerU我們設(shè)計(jì)的系統(tǒng)架構(gòu)遵循“配置即代碼流程可追蹤”的原則。輸入文檔 (PDF/Image) ↓ [文檔加載與預(yù)處理模塊] ↓ (標(biāo)準(zhǔn)化圖像/PDF數(shù)據(jù)) [MinerU 核心引擎] ├── 版面分析 (Layout Analysis) ├── 文本識別 (OCR) ├── 信息抽取 (Information Extraction) └── 結(jié)果組裝 (Assembly) ↓ (結(jié)構(gòu)化JSON/XML) [結(jié)果驗(yàn)證與評測模塊] ├── 與標(biāo)注真值( Ground Truth )對比 ├── 計(jì)算各項(xiàng)指標(biāo) (F1, Accuracy等) └── 生成錯(cuò)誤分析報(bào)告 ↓ [可視化與報(bào)告輸出]這個(gè)架構(gòu)的核心在于除了MinerU本身我們額外強(qiáng)化了評測模塊。MinerU負(fù)責(zé)“生產(chǎn)”結(jié)構(gòu)化數(shù)據(jù)而評測模塊則負(fù)責(zé)“質(zhì)檢”。評測模塊的輸入是MinerU的輸出和一份事先準(zhǔn)備好的、人工標(biāo)注的“標(biāo)準(zhǔn)答案”Ground Truth。通過對比我們才能量化解析的準(zhǔn)確度并定位問題所在。3. 環(huán)境搭建與MinerU核心配置詳解“工欲善其事必先利其器”。一個(gè)穩(wěn)定的、版本可控的環(huán)境是可復(fù)現(xiàn)性的基石。這里我們避免使用全局的、版本模糊的pip install而是采用更工程化的方法。3.1 基于Conda的隔離環(huán)境與精準(zhǔn)依賴管理我強(qiáng)烈建議使用Conda來管理Python環(huán)境它能更好地處理非Python依賴如某些OCR引擎需要的C庫。# 1. 創(chuàng)建并激活一個(gè)全新的Python 3.9環(huán)境版本需與MinerU要求匹配 conda create -n mineru-doc-parse python3.9 -y conda activate mineru-doc-parse # 2. 安裝PyTorch根據(jù)你的CUDA版本選擇CPU版則去掉cu118 pip install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/cu118 # 3. 克隆MinerU倉庫并安裝其核心依賴 git clone https://github.com/modelscope/mineru.git cd mineru pip install -e . # 以可編輯模式安裝方便后續(xù)查看和修改源碼 # 4. 安裝OCR后端引擎以PaddleOCR為例其精度和中文支持較好 pip install paddlepaddle paddleocr實(shí)操心得在安裝PaddleOCR時(shí)可能會(huì)遇到與現(xiàn)有PyTorch或其他庫的版本沖突。一個(gè)穩(wěn)妥的做法是在安裝Mineru核心包之前先安裝好OCR引擎。如果沖突無法解決可以考慮使用Docker容器將OCR服務(wù)獨(dú)立部署MinerU通過HTTP接口調(diào)用實(shí)現(xiàn)解耦。3.2 MinerU任務(wù)配置文件的深度解析MinerU的強(qiáng)大之處在于其聲明式的配置文件。一個(gè)典型的任務(wù)配置文件config.yaml定義了整個(gè)解析流水線。# config.yaml version: v1.0 task: document_information_extraction # 輸入配置 input: type: local_directory # 輸入源類型可以是本地文件夾、OSS等 path: ./data/raw_docs # 原始文檔存放路徑 extensions: [.pdf, .png, .jpg] # 處理流程配置 pipeline: - name: pdf_loader module: loader.PDFLoader args: dpi: 300 # 將PDF渲染為圖像時(shí)的分辨率影響OCR精度 - name: ocr_engine module: ocr.PaddleOCRNode args: use_angle_cls: true # 啟用方向分類糾正倒置文本 lang: ch # 語言中英文混合可用 ch det_db_thresh: 0.3 # 文本檢測閾值調(diào)低可檢測更模糊文字但可能引入噪聲 rec_batch_num: 8 # 識別批處理大小影響內(nèi)存和速度 - name: layout_analyzer module: layout.LayoutAnalysisNode args: model_path: ./models/layout_model.pt # 自定義版面分析模型路徑 device: cuda:0 # 指定GPU設(shè)備 - name: field_extractor module: extractor.RegexExtractor args: rules: # 基于正則表達(dá)式的抽取規(guī)則這是“上下文工程”的簡單體現(xiàn) - field_name: invoice_number pattern: 發(fā)票號碼[:]\s*(\w) context_before: 2 # 在匹配行前看2行作為上下文 context_after: 1 # 在匹配行后看1行作為上下文 - field_name: total_amount pattern: 合計(jì)[(]大寫[)]?[:]?\s*[\u4e00-\u9fa5][\s元]*[(](\d\.?\d*)[)]關(guān)鍵參數(shù)解讀與調(diào)優(yōu)經(jīng)驗(yàn)dpi(PDF加載)對于掃描版PDF300 DPI是平衡清晰度和處理速度的甜點(diǎn)。若文檔字體極小或質(zhì)量差可提升至400-500 DPI但處理時(shí)間和內(nèi)存占用會(huì)顯著增加。det_db_thresh(OCR檢測)這是文本檢測模型判斷“這是不是文本框”的置信度閾值。調(diào)參重點(diǎn)如果發(fā)現(xiàn)很多文字沒被識別出來漏檢嘗試降低此值如0.2如果發(fā)現(xiàn)很多非文字區(qū)域如圖片紋理被誤認(rèn)為是文字誤檢則需提高此值如0.4。需要結(jié)合具體文檔在驗(yàn)證集上反復(fù)調(diào)試。context_before/after(規(guī)則抽取)這是將單純正則匹配升級為“上下文感知”抽取的關(guān)鍵。例如發(fā)票中“金額”可能出現(xiàn)在多行通過限定在“合計(jì)”或“總價(jià)”等關(guān)鍵詞附近進(jìn)行匹配能極大提高準(zhǔn)確率。這里的2和1代表行數(shù)需要根據(jù)文檔的實(shí)際排版來調(diào)整。3.3 自定義信息抽取模型的集成對于更復(fù)雜的、規(guī)則難以描述的抽取任務(wù)如從技術(shù)報(bào)告中抽取“創(chuàng)新點(diǎn)”就需要集成深度學(xué)習(xí)模型。MinerU允許你插入自定義的抽取模塊。# custom_extractor.py import torch.nn as nn from mineru.framework import BaseExtractorNode class CustomBERTExtractor(BaseExtractorNode): def __init__(self, model_path, devicecpu): super().__init__() self.model load_your_bert_model(model_path) # 加載你訓(xùn)練好的模型 self.device device self.model.to(device) def process(self, data_item): # data_item 包含了OCR文本、版面位置等信息 text_blocks data_item[ocr_results] # 將文本塊按閱讀順序拼接成篇章 document_text self._reconstruct_text(text_blocks) # 使用模型進(jìn)行序列標(biāo)注或分類 extracted_entities self.model.predict(document_text) # 將結(jié)果添加到data_item中 data_item[custom_entities] extracted_entities return data_item def _reconstruct_text(self, text_blocks): # 一個(gè)簡單的按左上角坐標(biāo)排序的文本重建邏輯 sorted_blocks sorted(text_blocks, keylambda b: (b[bbox][1], b[bbox][0])) return .join([b[text] for b in sorted_blocks])然后在配置文件中引用它- name: deep_learning_extractor module: custom_extractor.CustomBERTExtractor # 指向你的類 args: model_path: ./models/my_bert_model.bin device: cuda:0注意事項(xiàng)自定義模型輸入輸出的接口必須與MinerU的BaseExtractorNode兼容。最重要的是你的模型訓(xùn)練時(shí)所使用的文本預(yù)處理方式特別是文本重建邏輯必須與評測時(shí)MinerU提供的data_item格式完全一致否則會(huì)產(chǎn)生嚴(yán)重的領(lǐng)域適配問題導(dǎo)致模型性能在測試時(shí)大幅下降。4. 構(gòu)建可復(fù)現(xiàn)的評測體系搭建好解析流水線只是第一步如何科學(xué)地衡量其好壞并確保每次評測結(jié)果可信、可比才是“可復(fù)現(xiàn)評測”的精髓。4.1 評測數(shù)據(jù)集構(gòu)建與標(biāo)注規(guī)范沒有高質(zhì)量的數(shù)據(jù)任何評測都是空中樓閣。我們針對“文檔解析”任務(wù)需要構(gòu)建一個(gè)結(jié)構(gòu)化的評測集。文檔收集收集目標(biāo)場景下的真實(shí)文檔如財(cái)務(wù)報(bào)表、技術(shù)合同、醫(yī)療報(bào)告。確保覆蓋各種典型版式、印刷質(zhì)量和內(nèi)容復(fù)雜度。建議至少準(zhǔn)備100-200份文檔作為基礎(chǔ)集。標(biāo)注工具選擇可以使用Label Studio、DocBank等支持文檔級標(biāo)注的工具。關(guān)鍵是要導(dǎo)出結(jié)構(gòu)化的標(biāo)注文件如JSON。標(biāo)注規(guī)范定義這是保證評測一致性的關(guān)鍵。必須明確定義字段Field要抽取的信息項(xiàng)如company_name,invoice_date,total_amount。邊界Span字段在文檔文本中的精確起止位置字符級別。這需要結(jié)合OCR結(jié)果進(jìn)行標(biāo)注。類型Type對于實(shí)體定義其類型如PERSON,ORG。關(guān)系Relation字段間的關(guān)系如amount_of連接invoice_item和price。真值Ground Truth文件格式建議采用與MinerU輸出格式兼容的JSON結(jié)構(gòu)便于直接對比。// ground_truth_sample.json { doc_id: invoice_001.pdf, ocr_text: 發(fā)票號碼INV20240001 開票日期2024年1月15日..., annotations: [ { field: invoice_number, value: INV20240001, span: [5, 15], // 在ocr_text中的起止索引 bbox: [[120, 250], [300, 270]] // 在頁面上的坐標(biāo)可選 }, { field: invoice_date, value: 2024-01-15, span: [20, 35], bbox: [[120, 280], [300, 300]] } ] }4.2 核心評測指標(biāo)的設(shè)計(jì)與計(jì)算評測指標(biāo)需要多維度反映解析系統(tǒng)的性能。指標(biāo)計(jì)算公式/說明側(cè)重點(diǎn)字段級準(zhǔn)確率 (Field-Level Accuracy)(正確抽取的字段數(shù)) / (總字段數(shù))最直觀的指標(biāo)但要求字段值完全匹配字符串嚴(yán)格相等對數(shù)字格式、空格等敏感。字段級F1分?jǐn)?shù) (Field-Level F1)基于字段的精確率(Precision)和召回率(Recall)計(jì)算。精確率 TP / (TP FP)召回率 TP / (TP FN)。F1 2 * P * R / (P R)綜合衡量漏抽和錯(cuò)抽的情況比單純準(zhǔn)確率更全面。TP: 正確抽取FP: 錯(cuò)誤抽取多抽FN: 未抽取漏抽。端到端準(zhǔn)確率 (End-to-End Accuracy)一份文檔中所有字段都完全正確抽取的文檔數(shù) / 總文檔數(shù)衡量系統(tǒng)輸出一份“完美”結(jié)果的難度對系統(tǒng)整體穩(wěn)定性要求高。字符錯(cuò)誤率 (Character Error Rate, CER)(替換數(shù) 刪除數(shù) 插入數(shù)) / 標(biāo)注文本總字符數(shù)主要用于評估OCR環(huán)節(jié)的文本識別質(zhì)量是下游任務(wù)的基礎(chǔ)。版面分析mAP (mean Average Precision)使用目標(biāo)檢測的評測方法評估文本框檢測的準(zhǔn)確度。評估版面分析模塊對文本區(qū)域、表格區(qū)域、圖片區(qū)域等劃分的準(zhǔn)確性。實(shí)操心得模糊匹配的重要性。在計(jì)算字段級準(zhǔn)確率時(shí)直接進(jìn)行字符串嚴(yán)格相等判斷過于嚴(yán)苛。例如日期“2024-01-15”和“2024/01/15”或“2024年1月15日”在語義上是相同的。因此必須為不同類型的字段設(shè)計(jì)模糊匹配規(guī)則數(shù)字字段去除千分位分隔符統(tǒng)一小數(shù)點(diǎn)位轉(zhuǎn)換為浮點(diǎn)數(shù)后比較容差。日期字段解析為datetime對象后再比較。文本字段去除首尾空格、換行符甚至可以進(jìn)行簡單的簡體繁體轉(zhuǎn)換、全半角轉(zhuǎn)換后再比較??蛇x字段對于可能不存在的字段需要明確標(biāo)注是否為“空”避免將未抽取的字段一律判為錯(cuò)誤。4.3 自動(dòng)化評測流水線與錯(cuò)誤分析評測不應(yīng)是一次性的而應(yīng)集成到持續(xù)集成CI流程中。我們可以編寫一個(gè)自動(dòng)化腳本# evaluate_pipeline.py import json from pathlib import Path import pandas as pd from sklearn.metrics import precision_recall_fscore_support class DocParseEvaluator: def __init__(self, ground_truth_dir, prediction_dir): self.gt_dir Path(ground_truth_dir) self.pred_dir Path(prediction_dir) def load_data(self): # 加載所有真值和預(yù)測結(jié)果 ... def calculate_metrics(self, gt_list, pred_list): all_metrics [] error_cases [] # 用于收集錯(cuò)誤案例 for gt, pred in zip(gt_list, pred_list): doc_metrics, doc_errors self._evaluate_single_doc(gt, pred) all_metrics.append(doc_metrics) error_cases.extend(doc_errors) # 聚合所有文檔的指標(biāo) df_metrics pd.DataFrame(all_metrics) summary df_metrics.mean().to_dict() return summary, error_cases def _evaluate_single_doc(self, gt, pred): # 實(shí)現(xiàn)單個(gè)文檔的字段匹配和指標(biāo)計(jì)算 # 關(guān)鍵這里要實(shí)現(xiàn)基于span或模糊匹配的字段對齊邏輯 tp, fp, fn 0, 0, 0 errors [] for gt_field in gt[annotations]: matched False for pred_field in pred[annotations]: if self._is_field_match(gt_field, pred_field): # 模糊匹配 tp 1 matched True break if not matched: fn 1 errors.append({type: FN, doc: gt[doc_id], field: gt_field}) # 計(jì)算fp預(yù)測有但真值沒有的 ... precision tp / (tp fp) if (tpfp) 0 else 0 recall tp / (tp fn) if (tpfn) 0 else 0 f1 2*precision*recall/(precisionrecall) if (precisionrecall) 0 else 0 return {precision: precision, recall: recall, f1: f1}, errors def generate_report(self, summary, error_cases): # 生成HTML或Markdown格式的評測報(bào)告 with open(evaluation_report.md, w) as f: f.write(f# 文檔解析評測報(bào)告\n\n) f.write(f**總體F1分?jǐn)?shù)**: {summary[f1]:.4f}\n) f.write(f**精確率**: {summary[precision]:.4f}\n) f.write(f**召回率**: {summary[recall]:.4f}\n\n) f.write(f## 錯(cuò)誤案例分析前10例\n) for err in error_cases[:10]: f.write(f- {err[doc]} 中的字段 {err[field][field]}: {err[type]}\n) # 同時(shí)可以將錯(cuò)誤案例對應(yīng)的文檔圖片、OCR結(jié)果、預(yù)測和真值并排保存便于視覺分析錯(cuò)誤分析是迭代的關(guān)鍵。自動(dòng)化的評測報(bào)告不僅要給出分?jǐn)?shù)更要輸出具體的錯(cuò)誤案例。例如將漏抽FN的文檔截圖、OCR文本片段、以及模型預(yù)測結(jié)果為空并排展示。通過分析這些案例你能直觀地發(fā)現(xiàn)是OCR識別錯(cuò)了是版面分析把字段切分了還是你的抽取規(guī)則或模型覆蓋不到這種表達(dá)方式。5. 從評測到優(yōu)化閉環(huán)迭代實(shí)戰(zhàn)拿到評測報(bào)告和錯(cuò)誤案例后真正的工程才剛剛開始。我們需要建立一個(gè)“分析-優(yōu)化-驗(yàn)證”的閉環(huán)。5.1 基于錯(cuò)誤模式的根因分析與對策將錯(cuò)誤案例歸類是高效優(yōu)化的前提。常見的錯(cuò)誤模式及對策如下錯(cuò)誤模式可能根因優(yōu)化策略字段完全漏抽1. OCR根本未識別出該字段文本。2. 版面分析將該區(qū)域錯(cuò)誤歸類如將文本誤判為圖片。3. 抽取規(guī)則/模型未覆蓋該字段的表達(dá)變體。1.調(diào)低OCR檢測閾值det_db_thresh或提升圖像分辨率dpi。2. 檢查版面分析模型在該類區(qū)域如蓋章處、手寫體的表現(xiàn)考慮增加訓(xùn)練數(shù)據(jù)。3.擴(kuò)充規(guī)則或增加訓(xùn)練樣本覆蓋更多同義詞、縮寫和句式。字段值部分錯(cuò)誤1. OCR識別存在字符錯(cuò)誤如“0”和“O”。2. 抽取時(shí)匹配了錯(cuò)誤上下文如匹配了上一行的日期。3. 后處理錯(cuò)誤如單位轉(zhuǎn)換、格式歸一化出錯(cuò)。1. 針對易混字符在OCR后添加糾錯(cuò)詞典。2.調(diào)整正則表達(dá)式的上下文窗口context_before/after或使用更精確的錨點(diǎn)。3. 完善后處理邏輯增加校驗(yàn)規(guī)則如金額數(shù)字合理性檢查。字段位置Span不匹配1. OCR文本框合并或分割錯(cuò)誤。2. 字段值由多個(gè)離散的OCR文本框組成。1. 優(yōu)化OCR的檢測后處理參數(shù)如文本框合并閾值。2. 在抽取邏輯中允許對多個(gè)文本框進(jìn)行智能拼接基于位置和語義。實(shí)戰(zhàn)案例在解析一批舊版掃描發(fā)票時(shí)發(fā)現(xiàn)“稅號”字段漏抽率很高。通過錯(cuò)誤分析發(fā)現(xiàn)這些發(fā)票的稅號印刷在淺色底紋上OCR檢測模塊未能有效框出該區(qū)域。解決方案不是修改規(guī)則而是對輸入圖像進(jìn)行預(yù)處理。我們在MinerU的PDF加載器后增加了一個(gè)自定義的圖像處理節(jié)點(diǎn)# preprocess_node.py import cv2 from mineru.framework import BaseNode class ImageEnhancementNode(BaseNode): def process(self, data_item): image data_item[image] # 假設(shè)上游節(jié)點(diǎn)提供了圖像 # 使用CLAHE算法增強(qiáng)對比度改善低對比度區(qū)域的文本 clahe cv2.createCLAHE(clipLimit2.0, tileGridSize(8,8)) if len(image.shape) 3: lab cv2.cvtColor(image, cv2.COLOR_BGR2LAB) l, a, b cv2.split(lab) l_clahe clahe.apply(l) enhanced_lab cv2.merge((l_clahe, a, b)) enhanced_image cv2.cvtColor(enhanced_lab, cv2.COLOR_LAB2BGR) else: enhanced_image clahe.apply(image) data_item[image] enhanced_image return data_item將這個(gè)節(jié)點(diǎn)插入到OCR引擎之前稅號字段的召回率立刻提升了30個(gè)百分點(diǎn)。這個(gè)案例說明上下文工程不僅在于理解文本語義也在于理解文檔的物理形態(tài)和成像質(zhì)量。5.2 評測集的劃分與持續(xù)集成為了可靠地評估優(yōu)化效果必須科學(xué)地劃分?jǐn)?shù)據(jù)集訓(xùn)練集用于訓(xùn)練自定義的版面分析或信息抽取模型。開發(fā)集/驗(yàn)證集用于在優(yōu)化過程中進(jìn)行快速迭代和調(diào)參如調(diào)整OCR閾值、正則表達(dá)式。嚴(yán)禁在驗(yàn)證集上反復(fù)測試并以此修改模型或規(guī)則否則會(huì)導(dǎo)致過擬合。測試集必須嚴(yán)格隔離僅在最終評估或發(fā)布前使用以反映系統(tǒng)的真實(shí)泛化能力。將評測流水線集成到CI/CD工具如GitHub Actions, GitLab CI中可以自動(dòng)化這一過程# .github/workflows/evaluate.yml name: Evaluate Document Parser on: [push] jobs: evaluate: runs-on: ubuntu-latest steps: - uses: actions/checkoutv3 - name: Set up Python MinerU run: | # ... 安裝環(huán)境依賴 - name: Run Parsing Pipeline run: | python run_pipeline.py --config config.yaml --input ./test_docs --output ./predictions - name: Run Evaluation run: | python evaluate_pipeline.py --ground-truth ./ground_truth --predictions ./predictions - name: Upload Evaluation Report uses: actions/upload-artifactv3 with: name: evaluation-report path: evaluation_report.md這樣每次代碼提交都會(huì)自動(dòng)運(yùn)行評測生成報(bào)告。你可以設(shè)定一個(gè)質(zhì)量門檻如F1分?jǐn)?shù)不低于0.95低于此門檻的合并請求Pull Request將自動(dòng)失敗從而保證主分支的代碼質(zhì)量。6. 進(jìn)階上下文工程的深度實(shí)踐當(dāng)基礎(chǔ)字段抽取穩(wěn)定后我們可以向更深的“理解”層次邁進(jìn)這才是Context Engineering的用武之地。6.1 利用版面信息進(jìn)行語義消歧純文本“2023年預(yù)算”可能指“部門2023年預(yù)算”或“項(xiàng)目2023年預(yù)算”。但如果結(jié)合版面信息發(fā)現(xiàn)該文本位于文檔左側(cè)一個(gè)標(biāo)題為“部門財(cái)務(wù)”的表格內(nèi)那么其語義就清晰了。MinerU的版面分析結(jié)果提供了每個(gè)文本框的坐標(biāo)和類型我們可以利用這些信息。def extract_with_layout_context(ocr_blocks, layout_blocks): ocr_blocks: 列表每個(gè)元素包含文本和bbox [x1, y1, x2, y2] layout_blocks: 列表每個(gè)元素包含區(qū)域類型標(biāo)題、正文、表格等和bbox extracted_data {} for ocr in ocr_blocks: ocr_center [(ocr[bbox][0] ocr[bbox][2]) / 2, (ocr[bbox][1] ocr[bbox][3]) / 2] # 尋找包含該OCR文本的版面區(qū)域 for layout in layout_blocks: if is_point_in_bbox(ocr_center, layout[bbox]): ocr[layout_type] layout[type] # 給OCR文本打上版面類型標(biāo)簽 break # 在后續(xù)的抽取規(guī)則中可以加入版面類型作為約束 if ocr[text] 2023年預(yù)算 and ocr.get(layout_type) table_header: # 更有可能是一個(gè)表格的標(biāo)題而非正文中的提及 pass return extracted_data6.2 文檔級關(guān)系抽取與知識圖譜構(gòu)建單一字段的抽取是基礎(chǔ)而字段間的關(guān)系則構(gòu)成了文檔的深層語義。例如一份采購合同中“甲方”、“乙方”、“合同金額”、“支付方式”這些字段不是孤立的。我們可以定義關(guān)系抽取任務(wù)(甲方, 簽署, 合同)(合同, 涉及金額, 合同金額)(合同金額, 支付方式, 分期支付)這可以通過在自定義模型中設(shè)計(jì)關(guān)系分類模塊或者定義基于規(guī)則的共現(xiàn)與句法模式來實(shí)現(xiàn)。MinerU的模塊化設(shè)計(jì)允許你在流水線末端添加一個(gè)“關(guān)系抽取器”接收所有已抽取的實(shí)體/字段輸出關(guān)系三元組。最終可以將多份文檔的結(jié)果匯總構(gòu)建一個(gè)領(lǐng)域知識圖譜實(shí)現(xiàn)真正的知識管理和關(guān)聯(lián)查詢。6.3 處理非結(jié)構(gòu)化與半結(jié)構(gòu)化文檔文檔解析的終極挑戰(zhàn)是那些格式自由、段落冗長的非結(jié)構(gòu)化文檔如技術(shù)報(bào)告、法律意見書。對于這類文檔單純的字段抽取可能不夠需要結(jié)合文本摘要、關(guān)鍵句抽取、主題建模等NLP技術(shù)。一種實(shí)踐思路是先利用MinerU進(jìn)行基礎(chǔ)的篇章結(jié)構(gòu)劃分如章節(jié)標(biāo)題識別然后針對每個(gè)章節(jié)或段落使用微調(diào)過的文本模型如BERT for Sentence Classification進(jìn)行內(nèi)容分類或關(guān)鍵信息打標(biāo)。例如在法律文件中自動(dòng)標(biāo)識出“爭議條款”、“免責(zé)聲明”、“管轄法院”等段落。這相當(dāng)于在文檔的物理結(jié)構(gòu)版面和邏輯結(jié)構(gòu)章節(jié)之上再疊加一層語義結(jié)構(gòu)。搭建這樣一套從OCR到Context Engineering的可復(fù)現(xiàn)文檔解析評測系統(tǒng)是一個(gè)典型的“數(shù)據(jù)驅(qū)動(dòng)、迭代優(yōu)化”的工程過程。它沒有一勞永逸的銀彈其核心價(jià)值在于提供了一套科學(xué)的方法論和工具鏈讓你能清晰地度量現(xiàn)狀、定位問題、驗(yàn)證改進(jìn)。從精準(zhǔn)的字段抽取到利用版面消歧再到關(guān)系與篇章的理解每一步的深入都意味著機(jī)器對文檔“上下文”的把握更進(jìn)一層。而這一切的起點(diǎn)就是用一個(gè)像MinerU這樣透明、可復(fù)現(xiàn)的工具扎扎實(shí)實(shí)地跑通第一個(gè)閉環(huán)。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
99国产小视频| 日韩另类| 亚洲狠狠干| 婷婷日| 99热在线精品播放| AV片在线观看| 大战熟女丰满人妻AV| 婷婷久久网| 色播播五月| 六月婷婷狠狠做| 色婷婷99| 99色综合网| 91视频久久久| 夜夜AVV| 97很鲁在线视频| 天天插天天爱| 99热最新网址| 伊人久久婷| 99爱在线观看视频| 色色欧美色色| 天天操天天操综合| www.婷婷网| 久久人人九九| 日韩av在线免费观看| 玖玖伊人网| 99国产精品白浆在线观看免费| 色婷网| 激情五月天综合| 色婷婷五月天小说网| 婷婷五月激情热播| 久久久久妻| 九九热视频99| www999日韩精品| 六月婷婷日| 超碰日韩成人| 亚洲精品V天堂中文字幕| 色中色综合| 丁香五月六月综合激情| 欧美日韩成人在线网| 99re这里只有精品视频了| 狠狠狠狠免费| 色婷婷在线视频久| 99热综合在线| 五月天色婷好好| www九九热| 五月天婷婷情色| 激情婷婷黄色五月| 天堂久久大香蕉| 九九热9| 玩熟女五十AV一二三区| www.91av.com| 伊人久久丁香狠狠婷婷综合香蕉| 婷婷丁香五月天综合在线日韩| 2018国产大陆天天弄| 开心激情网在线| 日韩成人中文字幕| 色9999日韩国产| 五月天操逼网| 婷婷激情六月综合| 婷婷五月激情欧美| 色狠狠综合| 成人国产综合| 婷婷欧美综合| 激情AV| 五月丁香啪啪激情| 久久色情| 激情综合五| 久机视频这只有精品| 婷婷五月亚洲综合| 九九99精品| 另类专区在线| 国产成人99久久亚洲综合精品| 九九五月天| 成人av中文字幕| 丁香伊人网| 91丨九色丨白浆秘| 亚洲天堂久久| 99色视频| 亚洲亚洲人成综合网络| 偷拍九九热| 99久久国产综合精品五月天喷水\| 91精品久久久久、久五月天| 98永久精品| 天天干天天干天天干| 99色五月| 伊人久久99| 国产超碰在线| 久久人妻精品| 狠狠噪| 97色五月婷婷在线| 91操黄| 激情婷婷五月社区| 婷婷色偷拍| 韩国19 主播内部福利vip免费播放| 久草丁香婷婷五月天婷| 丁香六月婷婷久久高清| 久草婷婷| 五月天丁香成人社| 久久久久9999| 五月天激情网图片 - 百度| 美女五月天婷婷| 亚色网站小视频| 天天噜天天爱| 丁香5月婷婷| www.色色色色| 综合久久高清| 亚洲国产99| 日本久久精品| 天天综合精品| 9视频在线成人网站| 日韩性爱AV| 久久91久久精品久久| 好叼操在线观看| 五月婷色丁香| 人妻激情综合| 色频玖玖五月天| 婷婷五月天xxx| 99黄色| 五月婷婷激情综合网 | www.91AV.com| 久草五月天| 综合色五月天| 人妻操逼| 丁香欧美| 欧美日韩成人高清在线| 亚洲激情五月| 极品人妻VIDEOSSS人妻| 日韩人妻白浆视频系列| 精品导航在线x不卡| 99九九玖玖| 青青.com| 婷婷综合六| 天天爽天天爽视频| 亚洲操逼网| 五月天久久久| 久热视频97AV在线观看| 91超级碰在线视频| 五月天无码视屏播放| 五月天婷婷青青草| 人人干99| 免费观看18视频网站| 草久私拍| 婷婷五月天偷拍| 亚洲午夜国产成人电影VA国产欧…| 日韩婷婷五月天| XX色综合| 日日做夜夜爱| 欧美精品中文字幕亚洲专区| 伦99热| www.激情五月天。com| 五月天精品综合在线| 激情婷婷五月天伊人在线观看| 色五月婷婷啪啪五月| 欧美色色色色色| 亚洲精品视频在线播放| 亚洲精品V天堂中文字幕| 久热9热| 日日噜噜夜夜狠狠久久丁香六月| 性生活久久朋友人妻| 99这里精品| 五月天婷婷高清无码| h在线看免费版在线看| 久热这里只有精品6| AV在线不卡播放| 操操精品| 色婷婷六月性| 亚洲日日日| 五月色网| 久久A极片| se色综合网| www,8050,午夜三级| 久久久久久久久久91| 五月激情日本在线| 六月丁香五月天| 一起草性爱不卡视频| 一本色综合色| 九九99热久久精品66中文字幕| 91丨九色丨东北熟女| www.minyis.com【JT】国内CDN落地页保证转化QQ2101460746 | 开心网五月色婷婷| 亚洲1区| 五月天堂六月丁香亚州中文字幕久久| 无码九九| 夜夜骑夜夜操| 亚洲成av人影院| 91操在线| 日本色婷婷综合| 淑女丝袜bi操逼123| 人人摸人人| 女同在线9| 激情六月丁香| 中文字幕婷婷五月天在线观看| 久99久精品| 99在线精品免费视频| 免费在线a| 婷婷五月天国产精品| 亚洲五月情| 99综合视频一体| 亚洲日本三级片| 天天肏夜夜肏| 婷婷六月激情综合| 99亚洲精品| se99热久久一本| 亚洲激情电影五月天色婷婷丁香一起草| 五月天桃色深爱网| 久久久av久av久片一区二区| 97资源碰碰| 热99re| 色色婷婷丁香| 久9综合| 色婷婷久久综合| 五月天欧美激情| 色综合色综合网| 欧美十二区| 久久草大香蕉| 婷婷激情图片| 午夜天天精品视频| 色婷婷五月影视| 九九热在线视频观看| 91操操| 97碰人人操| 五月丁香婷婷综合激情基地| 久久久久9999| 日韩精品一区二区刘| 伊人五月婷婷| 丁香花五月天激情| www.色色com| 婷婷丁香久久五月综合| 九色视频91| 97干在线免费| 狠狠干五月丁香| 另类专区在线观看| 69综合在线| 天天插天天干天天舔| 婷婷97碰碰| www.91五月| 丁香五月久久| 任你搞网站| 99久久国产综合精品五月天喷水\| 久热久色| 激情综合五月天| 五月丁香色情| 海外网站专业操老外| 婷婷成人丁香色情基地30 | 日本五月婷婷久久久六月丁香| 午夜丁香婷婷| 嫩草极品| 婷婷五月花免费视频在线| 成人AV中文字幕| 视频一区二区在线| 激情图片婷婷| 天天天天干| 激情五月天啪啪| 精品久久66| 99久视频| 狠狠色丁香| 这里有精品| 久久久久久久久18久久| 亚洲五月天天| 五月天激情婷婷| 99精品在线观看视频| 婷婷五月天开心激情网| 一级片操逼视频| 六月丁香视频网站| 六月综合婷婷开心伊人| 任你搞网站| 色婷婷成人五月| 日99网站| 六月丁香婷婷网| 极品人妻VideOssS人妻| 亚洲精品国产成人AV在线| 久久美女五月天| av网站免费在线| 五月情四婷婷| 成人精品在线| 伊人网欧美在线男人天堂五月丁香| WWW.17C亚洲精品| 色五月婷婷在线观看第一页舔| 久久久精品99亚洲综合| 日日爽日日| 台湾无码A片一区二区| 五月丁香六月情| 91聚色综合网| 狠狠狠狠狠草| 99热视精品| 韩国真做片在线观看| 成人精品在线| 五月丁香婷婷在线| 色久女| 婷婷五月天狠狠色| 九九色天堂| 午夜做爱影院| 在线播放成人| 97丁香五月| 男人先锋久久| 激情都市五月天| 国产精品久久久久久久久久| 99热这里只有精品亚洲| 欧美激情综合色综合啪啪五月| 色9999日韩国产| 五月婷婷色| 九九99九九精品视频| 极品五月天| 五月丁香本色在线观看| 丁香五月综合亚洲| 123日本不卡在线| 色色色视频免费无码| 伊人干综合| 欧美人人女女精品综合五月天| 婷婷伊人网| 182无码| 五月天激情无码高清| 青青草免费公开视频| site:jszngf.com| 婷婷丁香五月综合| 色九网| 大香蕉久久久久| 久9热视频| 偷偷操99| 啪啪丁香五月| 九九99免费视频| 日本系列_4页_777FP| 久操大| 欧美在线97| 五月婷婷综合久久| 久久久婷婷婷| 激情视频网址| 激情五月六月婷婷综合啪啪| 亚洲深喉aV| 激情都市五月天| 久久R激情| 天天干天天玩天天夜天天射天天操天天日蜜臀少妇 | 色色无码| 色色丁香五月婷婷| 丁香五月婷婷国产av| 日日射天天射| ZpRSw| 永久地址 色| 99久久国产综合精品五月天喷水\| 中文字幕色色色| 日本网站久久| 六月婷婷五月丁香| 中文字幕视频在线播放| 激情丁香五月婷婷| 五月婷婷熟女| 97一区二区| 丁香六月无码| 停停五月色宗合| 任你爽精品免费视频6| 五月丁香亭亭操逼| 五月婷婷五月天| 欧美成人热| 久久综合99综合| 天天干天天干天天干天天干天天| 色99久草在线| 色婷婷五月天视频网站| 在线网黄| 大香蕉啪啪啪| 亚洲婷婷乱乱丁香| www.com色播五月天| 婷婷五月天亚洲综合| 97碰超级人人看| 中文字幕 中文字幕明步| 一区二区中文字幕| 免费看欧美成人A片无码| 丁香婷婷久久老熟女综合网| 婷婷丁香五月基地| 色婷五月天| 97干欧美| 激情小说五月天| 日本熟女一区二区| 婷婷丁香色性爱| 99.N在线视频| 亚洲VA欧美VA| 国产干逼片| 色色色色色综合| 人妻激情在线| 天天日天天舔| 久久综合丁香激情五月| 2017人人操| 另类图片天天影视在线观看| 色天天久婷婷| 玖色色综合| 色综合色五月| 亚洲爱爱无码婷婷色五月| 午夜在线成人网站免费观看| 欧美啪啪9| 五月天日日操夜夜操 | 亚洲人妻五月丁香婷婷| 超碰在线观看9| 大香蕉五月天婷婷| 色婷婷丁香香香蕉视频| 99热综合网| 日本欧美成人片AAAA| 这里只有精品在线看| 天天色综| 91久久久久久久| 激情婷婷综合五月少妇| 久久久性爱视频| 激情五月天网| 婷香五月激情视频| 五月总合激情网| 色亭亭影园| 99久热| 久久只有精| 久久婷婷五月丁香蜜桃网| 开心婷婷五月| 婷婷综合另类小说| 激情综合色五月丁香| 五月天婷婷丁香导航| 永久思思热在线| 婷婷丁香精品视频在线观看| 日夜操B| 日日射天天射| 激情综合网激情五月天| 色偷偷AV亚洲男人的天堂| 五月天婷婷激情综合| 超碰人人操在线| 午夜大香蕉| 五月天久久丁香| 天堂色婷婷| 亚洲精品字幕| 久久丁香五月| 亚洲十月婷婷综合| 久久草中文日韩欧美| 婷婷综合久久| 免费观看大片视频 丁香婷婷 六月欧美| 996er在线观看| 日逼影音先锋AV男人资源站| 激情婷婷六月天| 久狠日av| 丁香色五月直播| 日本偷拍九九九| 色色色色网站| 五月丁香偷拍| 五月激情丁香五月宗合| 久久香蕉福利| 欧美怡红院黄站| 欧美乱码国产一级A片| 综合激情五月丁香| 婷婷人人操| 俺来也狠狠| 91热久久| 六月丁香社区| 亚洲激情免费久久| 无遮挡国产高潮视频免费观看| 五月天啪啪啪| 提提热五月天婷婷| 色播婷婷五月天| 9|人妻人人操| A久久| 日本五月天婷婷丁香| 成人做爰A片免费看网站找不到了| 九月性爱网| 99热色精品| 第四色五月天| 五月伊人视频在线看| 91碰| www.久久色.com| 99综合网| 久99久精品视频| 欧美婷| 大香蕉五月丁香| 97色综合视频| 亚洲V国产V欧美V久久久久久| 影视av久久久噜噜噜噜噜三级| 久热这里只有精品视频6| 五月大香蕉| 丁香五月婷婷亚洲天堂| 亚洲精品又粗又大又爽A片 | 91色久| 九九热视频精品| 婷婷五月丁香在线观看| 先锋五月婷婷丁香草草| 五月情涩综合婷婷| 日韩AV中文在线观看| 六月丁香啪啪| 丁香婷五月天开心六月| 五月激情综合深爱| 99r久久这里只有精品| 欧美五月婷婷| 婷婷五月天毛片| 五月美女婷婷风骚| 这里只有精品视频在线| 99热e| 色五月丁香五月天| 人人干Av| 玖玖在线资源视频| 91色色色18| 亚洲视频在线网| 免费观看全黄做爰的视频| 久久婷五月婷| 色色色色色网| 久久精品亚洲一级牲爱综合 | 亚洲成人乱码av网站| 丁香色情五月综合激情| 99综合一区| 日本久热| 五月天婷婷影院影院| 色色欧美色色| WWW.桔色成人.COM| 亚洲色婷婷五月天| 91大神操美女| 欧洲MV日韩MV国产| 丁香五月精品| 秋霞丝袜啪啪啪| 超碰免费大香蕉| 国产亚洲色婷婷久久99精品91| 丁香五月天视频| 天天操天天操| 日本情色一区二区| 26uuu国产| 婷婷激情五月视频| 五月天六月婷婷| 91丨九色丨老熟女激情| 五月色丁香国产在线视频| 久热一区| www,com,五月色色| 99性色| 色婷婷五月综合网| 襙比视频| 久一这里有精品国产| 色婷婷99| Av大香蕉| 色婷婷婷婷| 玖玖婷婷色五月| 日韩AV一区二区三区| 国产免费一区二区三州老师F1……| 最近中文字幕2019视频1| 99热这里只| 五月天综合久久| 丁香五月激情网| 丁香五月天激情视频| 丁香色综合| 色婷婷五月天综合网| 26uu| 丁香五月骚喷水视频| 色五月综合婷婷久久综合婷婷久久综合婷婷久久综合婷婷久久 | 丁香六月天婷婷在线| 日韩色色色色色| 99热人人| 91干| 啪啪啪综合网| 五月激情啪啪| 久久女婷| 天天色天天搡| 成人操呦av| 色婷婷五月天亚洲| 美女五月天婷婷| 久久五月天婷婷视频| 丁香六月婷婷综情欧美| 99五月丁香丁| 色色自拍视频网站| 色五月xxx| 五月天激日本色情在线| 99热在线里有精品| 免費亭亭成人| 亚洲色情一区二区三区四区| 婷婷五月激情片| 婷婷激情六月中文| 婷婷播播五月天| 好好干av| 五月天婷婷成人资源站| 26uuu另类| 婷婷五月深爱五月| 五月天综合在线观看| 久久免片| 色播播五月天| 成人精品人妻| 超碰99在线观看| 婷婷综合| 99超级碰免费视频| 国产精品久久久久久久久久| 激情文学综合婷婷五月天丁香花| 丁香五月天成人| 爱操天堂| 婷婷五月丁香综合桃花色网| 婷婷第一页| www,超碰| 天天久综合网永久入口17v| 欧美va视频| 91人人网| 色很很96| 丁香激情合作五月| 五月天婷婷五月| 天天综合社区| 女人被男人吃奶到高潮| 丁香五月婷婷啪| 亚洲成人在线播放| 狠狠五月天| 免费看欧美成人A片无码| 色综合色香蕉网| 懂色av粉嫩AV蜜臀AV| 激情婷婷黄色五月| 爆乳熟女一区二区三区爆乳| 超碰操网| 久久久er热| 婷婷五月天亚洲激情戏精品| 婷婷丁香色情| 超碰99资源站| 激情綜合W W W,激情五月天| 精品一二三区久久AAA片| www,奇米影视| 亚洲国产网站| 91干视频| 久月丁香爱婷婷综合| 色婷五月丁香久亚洲| 狠色色狠网| 久久人妻精品| 色爱五月天| 国产成人精品亚洲线观看| 99热午夜精品| www.97干视频| 婷婷丁香六月综合激情站| 美女100%露全身无挡网站| 五月婷婷激情综合视频| 五月婷婷草| 色婷婷亚洲精品天天综| 香蕉久久国产AV一区二区| 无码操B| 国产乱人偷精品人妻A片| 亚洲综合色婷婷文学| 丁香五月停停基地| 五月丁香综合啪啪| 婷婷网五月| 狠狠干五月天| 婷婷丁香五月激情| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | 天天插天天插天天插天天插| 色综合久久天天综合网| 五月婷婷丁香六月| www.9色色色| 五月婷六月| 日操| 五月天婷婷无码视频| 激情五月天啪啪| 99日韩| 亚洲无码性爱| 色综合久久88色综合天天99| 色小说婷婷五月天天天| 五月婷婷六月丁香色| 亚洲不卡| 大地资源色婷婷视频在线| 久久精品日| 九九激情综合| 人妻五月天激情开心网| 日韩九九| 丁香婷婷基地| 人碰人人人玩91| 色色激情五月| 五月丁香狠狠爱婷婷综合| 婷婷五月六月丁香| 91狠狠色丁香婷婷综合久久| 亚洲成人在线观看av| 播丁香五月婷婷欧美| 超碰高清在线| 色色色视频| 五月婷婷之综合激情| 人人干av| 真实熟女-91九色| 婷婷影院欧美| 欧洲99视频在线| 丁香五月综合在线观看| 99热在线精品观看| 黄色av网站在线免费播放| www.婷婷六月天| 亚洲激情五月婷婷日日| 99性爱| 天天爽天天爽| 激情丁香久久久久久| 亚洲美女婷婷五月天| 99热在线这里| 丁香五月欧美| 1024成人免费看| av在线免费播放| 婷婷免费成人视频| 日韩黄色电影| 国产毛片精品一区二区色欲黄A片| www.久久9| 视色网在线播放| 97色色色| 国产精品久久久久久久久久免费| 超碰在线中文字幕| 婷婷五月丁香五月天| 99精品在线下载| 91ncm视频| 99热网精品| 婷婷五月天网址| 色综合久久天天综合网| 国产成人av在线播放| 操B无码视频国语| 免费黄色视频网址| 九九精品网| 亚洲六月色婷婷| 一二线视频 另类| 久久多色| 五月婷婷六月丁香在线视频| 99re久久| 天天肏天天肏天天肏| 五月综合亚洲| www久| 日韩有码一区| 这里只有精品视频国产| 综合一区二区三区| 91se视频| 色五月天堂| 亚洲激情免费视频| 97操操| 67194中文字幕| 操一操插一插| 91热爆在线| 夜色综合网| 热99这里只有精品视频| 亚洲色网址| 墨西哥毛片内射精| 国产色丁香| 无码橾| 色婷婷五月综合激情中文字幕| 色婷婷久久| 天天操天天操天天操天天操天天操天天操天天操天天操天天操 | 亚洲色啪| 大香伊人婷婷| 五月天婷婷色小说| 99热8| 97碰人人操| 欧洲免费视频色| 婷婷五月天色色| 六月婷婷久久| 婷婷综合精品视频97| 三男玩一女三A片| AAA久久| 中文av网站| 亚洲三级无码| 五月婷婷与六月丁香图片激情| 夜夜骑夜夜操| AV在线不卡播放| 九九热只有这里精品| 国产精品视频免费看| 婷婷桃色网| 五月色情婷婷开心五月色情| 久久99久久99久久99人受| 久婷视频| 五月婷深深爱激情网| 色婷婷激情| 五月丁香色婷婷久久| 丁香五月综合在线观看| 乱精品一区字幕二区| 熟女色专区| 五月天婷婷网站888| 欧亚中文A V| 9这里只有精品| 日本色婷婷| 青青草原亚洲天堂| 九九婷婷五月天| 伊人大综合| 亚洲有码在线视频| 婷婷噜噜| 91九色超碰| 色九月激情综合网| 丁香五月久久| 开心婷婷中文字慕| 成人av在线电影| 91chinese 在线| 噜噜网免费视频| 热日韩欧美| 这里只有在线精品| 五月丁香狠狠爱| 色综合网址| 91婷婷色| 日本九九网| 九九热99热| 久久婷婷五月综合色丁香花| 狠狠狠狠狠狠草| 97久久视频| 婷婷五月天成人在线视频| 五月婷婷三级| 亚洲AV网站在线观看| 99热成人精品网站| 丁香婷婷婷五月综合色情| 五月婷婷开心综合| 337久久| 亚洲性色XXXXX| 香蕉久久国产AV一区二区| 激情五月天在线| 五月婷丁香| 亚洲艹网| 日日撸夜夜操| 五月香婷婷| 99热超碰| 婷婷色婷婷| 五月天久久久| 超碰人人超碰| 丁香五月婷婷av| 五月丁香婷婷综合视频| 天天干天天拍| 黑人无码一区| 久久精品系列| 99操无码视频观看| 婷婷五月综合久久中文字幕| 操日视频| 97影院一级片| 五月天操逼网| 9色在线视频| 色五月婷婷综合| 99自拍网| 日本三级韩三级99久久| 97久久草草超级碰碰碰| 91超级碰在线视频| 亚洲无码成人| 草草操操| 色情五月婷婷| 日本三级大片| 久久综合婷婷| 激情婷婷丁香五月天小说| 成人短视频在线观看| 日本三级大片| 99热这里全都是精品| 久久99这里只有精品| 色五月播五月| 99热20| 免费无码毛片一区二区A片| 久久99久久99精品免视看婷婷| 人妻AV中文系列| 俺五月| 琪琪色综合网站| 日在线V视频在线播放| 久久99热网| 另类激情五月| 超91热| 99精品小视频| 亚洲超级碰| 久久久久激情| 九九色色| 99视频在线| 九九九午夜影院成人| 8050一级网| 五月丁六月香| 九九青草热| 91丨九色丨熟女| www.久久99| 久久xxxx| 777精品成人a v久久| 亚州在线中文字幕| 精品无码99| 性爱五月婷婷| 色播播五月天| 五月综合色| 无码色| 亚洲色vA| 亚洲欧洲一二| 久久大香蕉同僚| 久热婷婷| 天天干天天插| 五月丁香狠狠地噜噜噜噜| www久久久久久久| 色婷婷亚洲婷婷| 开心五月综合激情网| 色婷婷五月天在线观看| 内射激情在线| 中文字幕综合色| 婷婷色五天| 性一交一乱一交A片久久四色| 夜夜骑夜夜操| 欧洲激情五月天婷婷| 操操综合网婷婷| 五月婷婷之综合激情| 狼人狠狠操| 开心激情站| 婷婷五月丁香成人| yw.av| 久婷久婷| 婷婷五月中文在线| 婷婷丁香日韩五月| 久热只有精品| 色婷婷狠狠18禁| 色婷婷成人做爰A片免费看网站 | 夜夜操,天天撸| 五月 激情视频| 九九亚洲| 五月激情网络| 97黑人精品区| 色综合婷婷| 丁香五月婷婷成人网| 丁香五月天天| 欧美色色色色色| 天天做天天爰天天爽天天无遮挡| 99久久婷婷综合| 99九无网码| wwxx日本| 亚洲成人综合网在线免费观看| 丁香久久综合| 99色啊| 丁香五月桃花在线激情综合| 丁香六月婷| 深爱激情网五月| a免费在线| 五月婷婷激情久久| 五月丁香好婷婷姑娘综合网| 色色六月| 中文无码婷婷| 狠狠999| 青青久久五月天丁香婷婷| 婷丁香五月天| 亚洲艹网| 婷婷激情六月中文| 婷婷综合五月天| 丁香5月综合啪啪| 四色五月视频| 思思热99热| 五月之婷婷| 亚洲最大在线| 少妇高潮呻吟A片免费看软件| 天天日天天草| 久久这里只精品66| 99情色五月天| 东京热免费视频| 99精品爱| 99热天堂| 中文字幕按摩做爰| 五月丁香婷婷AV| 五月份婷婷| 婷婷黄色网| av中文在线| 五月精品免费XXX| 久久资源网五月婷| 色婷婷性爱网| 色99在线视频| 色五月成人在线| 激情六月丁香| 五月婷婷操操| 色色激情网| 久久这里只有精品16| 久久在这里99| 激情九月婷婷九月| 久久精品视频99| 狠狠五月天婷婷激情网。| 翔田千里 50岁 无码| 极骚大香蕉伊人| 武则天精品久久| 色婷婷亚洲在线| 丁香影院五月综合| 97色色综合| 人妻久久久久久久久久久| 综合97五月| 狠狠色丁香久久综合婷婷亚洲成人福利| 丁香五月在线| 性生活久久人妻| 这里只有精品在线视频精品| www.玖玖婷婷在线| 色色丁香| 偷偷操99| 久久网思思| 综合色色网| 久久免费干| 丰满人妻一区二区三区| 婷婷五月六月丁香| 激情5月婷婷狠狠干| 97亚洲婷婷| 国产,欧美,学生妹,视频| 五月婷婷天堂| 99热99这里有免费的精品| 亚洲中文字幕AV| 教师性爱毛片| 五月天另类视频| 九九99久久| www.夜夜夜| 五月天综合激情网| 91a片爽| 人人干av| 99热首页| 操日本人妻视频| 亚洲综合九九| 99热很操老逼| 亚洲精品V天堂中文字幕| 久久综合五月天| 色J香五月天| 激情涩涩网| 久久婷婷丁香| 亚洲中文字幕翔田千里| 六月激情婷婷| wwccc久久久| 久久婷婷色综合| 色婷婷啪啪综合网| 亚洲九区| 五月天激情久久| 亚洲第一精品网站| 成人婷婷五月天| 免费亚洲婷婷中文字幕| 日韩啪图| 99热在线观看| 五月丁香五月综合欧美| 狠狠干,狠狠操| 丁香五月网在线观看| 97人人干| 亚洲乱码w在线观看| 亚洲黄网在线| 99久久国产宗和精品1上映| 五月婷婷av| 精品人妻久久久久久| 欧美va亚洲va在线播放| 色婷婷色五月另类综合| 无码区婷婷五月花开| 色婷婷另类| 激情AV网| 99自拍视频在线| 日韩三级高清无码| 人妻VideOssS人妻| 婷婷五月天成人动漫 | 五月丁香综合| 五月天久久综合婷婷丁香| 深爱激情五月天色婷婷| 色 免费网站视频| 97极品在线| 色色图五月天| 日本一級黃色一級片| 色丁香五月婷婷| 大香蕉九操| 精品久久人妻| www.夜夜騎夜夜狠| 婷婷的五月天另类视频| 99免费综合网| 超碰a女人的天堂| www.99久久久久99| 99九九这里有免费视频| 免费无码毛片一区二区A片 | 五月婷婷六月婷| 九月婷婷综合八月丁香在线观看 | 影音先锋一区| 亚洲综合99| www.成人婷婷综合| 99视频这里只有久久精品| 日本丁香五月婷婷| 婷婷五月丁香基地在线视频官网| 久久综合无| 欧美成人日韩| 性爱五月婷| 亚洲区在线| 欧美大肥婆大肥BBBBB| 九九99在线免费在线观看视频| 久久香蕉丁香| 丁香婷婷激情五月天无毒不卡蜜桃| 色色色.COM| 色射婷婷五月天| 中国AV性爱观看| 国产阿姨日皮艹逼内射视频| 99热 这里只有精品 国产 日韩| 亚洲操逼片| 性生活视频98791| 亭亭五月基地在线| 在线日韩av| 综合久久激情久久| 亚洲精品国产A久久久久久| 五月丁香网站| 91久久久久久久| 婷婷五月天成人网| 亚洲精品大片| 国产成人网| 欧美精品999| 综激情网| www999日韩精品| 婷婷五月天天爽| 五月丁香婷婷综合网| 狠狠xx| 六月合五月婷| 99热99色| www.99成人视频| 亚洲 六月 综合| 久色国产| 色婷婷五月天天天干天天操天天爽| www激情网| 婷婷激情鹿城五月天| 天天操天天操天天操| 五月的婷婷六月丁香| 天天干,噜噜色,狠狠色| 五月色无码| 激情欧美婷五月| 天干干夜夜操| 人人干天天操五月丁香| 久久久月丁香| 五月丁香六月激情综合| 婷婷久久精品| 欧美性爱一区| 日本在线视频看se99| 五月间天堂综合| 丁香五月婷婷综合精品素人| 欧美性爱中文字幕| 夜夜躁婷婷AV| 丁香五月综合激情啪啪| 人人人操| 色欲av伊人久久大香线蕉影院| 久久综合性| 久久97| 欧美久草在线日本一级特黄大片做受9在线观看韩国电影《两个女人》未删减-毛片 | 入口五月婷婷六月香| 久久色在线视频| 五月色亭丁香| 伍月激情天| 五月丁香六月婷婷综合伊人| 操你av| 五月天五月天成人网亭亭成人色网站| 亚洲天堂aaa| 色播播婷婷| 五月天婷婷AV| 九热精品| 婷婷伊人网| 99综合视频一体| 成人午夜视频精品一区| 日本欧美成人片AAAA| 国产真实乱对白精彩| 狠狠干.com| 丁香五月婷婷激情蜜桃| 五月丁香婷色| 五月天综合久久丁香91| 丁香五月香蕉| 日夜操B| 综合五月草| 五月婷婷和六月| 五月丁香色婷婷基地| 天天爽日日爽夜夜爽| 色色色色热| 欧美日韩成人在线网| 91久久| 色五月丁香五月| 婷婷丁香久久| 99热 精品在线| 丁香五月色激情| 日本情色一区二区| 丁香五月婷婷av| 亚洲成人网站在线观看| 九九人妻福利| 五月婷六月天| 99热精品中文字幕| 色女人久久| 青青草成人网| 免费观看全黄做爰的视频| 色99久草在线| 啪精品| 99在线热| 久久精品色| 丁香五月激情综合在线观看| 337午夜福利| 婷婷五月天六月丁香| 日本久久高清| 色婷婷六月| a性生活久久无| 久热久re| 九洲一级A片| 国产亚洲色婷婷99精品| 色五月激情综合| 天天干天天色综合| 久久网日本| 日本狠狠干| 免费色婷婷| 97艹| 99久久九九| 春色激情第四色| 色噜噜狠狠狠综合曰曰曰| 六月丁香网| 色综合天天综合成人网| 人与禽A片啪啪| 五月婷婷9| 99re视频在线播放| 99久久国产宗和精品1上映| 丁香婷婷色五月天| 狠狠色激情综合| 天天爽天天爽视频| 日韩欧美颜射| 俺去也五月| 99人人看| 六月丁香久久| 激情丁香五月激情婷婷| 五月丁香亭亭| 激情深爱五月天| 大香蕉AV电影在线| 色婷婷综合成人| 色波激情五月天| 中文字幕色色| 五月丁香久久网| 这里有精品| 久久久久九九九九视屏小说88| 日本色99| 欧美婷婷五月激情| www.99热这里只有精品| 色五月网址| 淫五月停停| 91热视频色网站| 五月六月丁香婷婷在线观看| 天天综合网、天天综合色| 天天狠天天狠| 人人人舔人人人操人人人摸人人人97 | 热的国产99热| 开心五月色婷婷综合开心网| 五月婷婷色播| 开心激情站| 一级无码作爱片| 女人露出p毛视频www网站| 丁香五月在线观看完整版| 色色五月天网站| 人人摸人人干| 色综合狠狠色| 99这里只有精品国产| 色婷婷综合视频| 99热97| 99精品综合在线| 9999久久久久| 天天夜夜六月丁香五月婷婷老师| 五月天婷婷综合网| JAPANRCEP老熟妇乱子伦视频| 婷婷五月精品中文| 成人五月天在线观看| 激情五月色在线播放| 天天精品视频免费观看| 黄色AAAA韩国guochansanji| 免费观看亚洲AV片| 久久香蕉婷婷五月天| 五月激情小说| 国产精产国品一二三在观看| 99久久.www| 婷婷色无码| 色婷婷丁香五月| 日产精品久久久久久久蜜臀| 九伊人网| 五月婷婷 欧美| 激情深爱五月天| 欧美人与性动交CCOO| 玖玖婷婷精品| 韩国婷婷丁香五月| 超碰在线免费| 91九色PORNY肉丝在线| 婷婷五月综激情| 日日肏天天操| 玖玖色综合| 超碰永久在线| 久久久久久天天日天天爱| 天天爱天天做天天| 欧美经典片免费观看大全| 五月丿香啪啪| 九月婷婷综合八月丁香在线观看| 婷婷五月天激情小说| 极品少妇高潮啪啪AV无码| 婷婷综合色网| 综合五月天天天天天五月| 玖玖色综合网| 久久男人网婷婷| 婷婷五月天成人导航| 婷婷伊人网| 嫩草AV久久伊人妇女超级A| 天天肏高清在线| 热久久视频99| 99热在线只有精品| 老师把我爽高潮了免费A片| 月婷婷亚洲| 天堂中文国产| 91碰碰碰久久久久| 婷婷五月丁香影院| 婷婷99热| 婷婷综合干| 狠狠久久婷五月综合色| 五月丁香久| 日韩AV在线免费| 丁香五月日本| 婷婷午夜精品久久久| 9999综合99综合人| 九九婷婷五月天影视| 色五月婷婷五月天| 91精产一区三区免费观看|