欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

逆向六款開源RAG產(chǎn)品,提煉自研RAG五層架構(gòu)與落地藍(lán)圖

逆向六款開源RAG產(chǎn)品,提煉自研RAG五層架構(gòu)與落地藍(lán)圖 做自研RAG項目最怕的不是寫代碼而是把彎路完整地走一遍。文檔解析、分塊、向量化、檢索、重排、提示詞裝配任何一環(huán)拍腦袋最后都要在問答效果上還債。我自己帶團(tuán)隊做RAG落地時踩過一輪坑之后才意識到與其閉門造車不如把市面上成熟的開源RAG產(chǎn)品當(dāng)成免費(fèi)教材一件件逆向拆解再拼出適合自己業(yè)務(wù)的自研底座。這篇內(nèi)容想做的事情很簡單從六款有代表性的開源RAG產(chǎn)品里逐層抽出值得復(fù)用的設(shè)計最終匯成一套可直接參考的自研RAG藍(lán)圖。不管你是剛接手RAG相關(guān)需求、團(tuán)隊里正在選型還是自研到一半發(fā)現(xiàn)效果不對這篇都能給你一個相對完整的參照系。1. 先回答一個核心問題為什么自研RAG要先逆向開源產(chǎn)品1.1 自研RAG最常見的三種彎路先說我在實(shí)際項目里看到的三類典型失敗路徑。第一類是重檢索、輕前處理。團(tuán)隊一上來就調(diào)Embedding模型、換向量庫、優(yōu)化召回策略但文檔根本沒處理好。拿到的PDF是掃描件OCR沒做表格被當(dāng)成普通文字切碎章節(jié)標(biāo)題和正文混在一個chunk里。結(jié)果檢索階段無論怎么調(diào)召回的內(nèi)容都是碎片LLM生成答案時自然只能瞎編。這類項目通常會在上線后一到兩周被業(yè)務(wù)方用幾個常識問題問倒。第二類是重實(shí)現(xiàn)、輕評估。代碼寫得很嗨召回接口、重排服務(wù)、知識庫管理后臺全都有但沒有一套評估集。上線之后怎么判斷效果變好還是變差全靠感覺。RAG這個系統(tǒng)鏈路長任何一環(huán)微調(diào)都可能讓另一半更差沒有指標(biāo)幾乎是盲人摸象。第三類是重功能、輕成本。把各家開源產(chǎn)品的功能全部縫合到自己系統(tǒng)里實(shí)體抽取、意圖識別、多輪改寫、圖譜構(gòu)建全都上。功能列表很漂亮但每個模塊都在增加延遲和算力成本最后用戶問一個問題要等十幾秒而且復(fù)雜模塊之間的互相干擾很難排查。這三種彎路的共同根源是缺少一個從全局視角出發(fā)的、別人已經(jīng)驗證過的參考架構(gòu)。而開源RAG產(chǎn)品恰好提供了這個參考。1.2 逆向工程在軟件領(lǐng)域為什么可行逆向工程之所以在RAG領(lǐng)域尤其有效是因為RAG本身并不是一個全新算法而是多個成熟技術(shù)的工程化組合。它涉及解析、存儲、檢索、排序、生成、評估等多個環(huán)節(jié)。每個環(huán)節(jié)單獨(dú)看都不神秘但組合起來卻有大量工程細(xì)節(jié)。這些細(xì)節(jié)論文里通常不會寫官方文檔也往往一帶而過——比如分塊時保留文檔原始層級比如查詢改寫要維護(hù)一個獨(dú)立于知識庫的提示詞體系比如重排模型的得分不能直接和相似度閾值比較。但開源產(chǎn)品的代碼里全是答案它們是開發(fā)團(tuán)隊用真實(shí)業(yè)務(wù)數(shù)據(jù)和線上反饋一點(diǎn)點(diǎn)調(diào)出來的。所以從六款開源產(chǎn)品里逆向出公共骨架本質(zhì)上是在吸收一群資深工程師踩坑后的沉淀。這比從零開始自己摸索要高效得多。2. 六款開源產(chǎn)品怎么選它們的架構(gòu)差異在哪里2.1 選樣標(biāo)準(zhǔn)覆蓋完整鏈路而不是只看名氣選這六款不是因為它們最火而是因為它們各自解決了RAG鏈路里一個關(guān)鍵卡點(diǎn)并且互相之間有明顯差異。我的篩選標(biāo)準(zhǔn)有三個完整覆蓋RAG關(guān)鍵鏈路不是只有其中一兩環(huán)技術(shù)路線有差異能從不同角度提供啟發(fā)社區(qū)活躍、有大量真實(shí)部署案例避免紙面產(chǎn)品。我選了RAGFlow、Dify、FastGPT、QAnything、MaxKB、LightRAG/GraphRAG這兩個圖譜增強(qiáng)路線其中LightRAG和GraphRAG歸為一類來講因為它們解決的問題相同思路也相近。加上它們剛好是六個維度。2.2 五條不同的技術(shù)路線這六類產(chǎn)品背后的路線差異我用一張表來總結(jié)產(chǎn)品主打定位核心差異化設(shè)計最值得自研借鑒的點(diǎn)RAGFlow深度文檔理解版面分析結(jié)構(gòu)化解析后再分塊文檔解析的完整流水線DifyLLM應(yīng)用平臺知識庫管理可視化編排API化檢索規(guī)則與知識庫生命周期治理FastGPT知識庫問答問題分類知識庫路由清晰引用讓路由環(huán)節(jié)獨(dú)立于生成QAnything兩階段檢索離線向量召回在線重排重排模型作為獨(dú)立服務(wù)層MaxKB輕量可嵌入式RAG一鍵部署、函數(shù)調(diào)用、嵌入業(yè)務(wù)系統(tǒng)輕量化交付與對話內(nèi)檢索GraphRAG/LightRAG知識圖譜增強(qiáng)LLM抽取實(shí)體關(guān)系社群社區(qū)化檢索全局性問題的圖譜方案這五條路線的本質(zhì)差別在于對文檔上下文的組織方式不同。RAGFlow和MaxKB更重視文檔進(jìn)來之后怎么處理Dify更重視知識庫和上層應(yīng)用怎么銜接QAnything更重視召回之后怎么精排圖譜方案則走了一條完全不同的路——不再依賴向量相似度而是用實(shí)體關(guān)系網(wǎng)絡(luò)來做推理。這提醒我們自研時不要一開始就鎖定某一種路線而是先想清楚自己業(yè)務(wù)里的瓶頸在哪一環(huán)再去對號入座。3. 逐款拆解每一款產(chǎn)品最值得偷師的模塊3.1 RAGFlow文檔解析的盡頭是版面理解RAGFlow給我最大的啟發(fā)是它把文檔解析從預(yù)處理步驟提升到了核心能力的高度。大多數(shù)開源產(chǎn)品對PDF的處理還停留在按頁抽文字、按字符切分而RAGFlow在進(jìn)入分塊前先做了一套完整的版面分析識別標(biāo)題層級、段落邊界、表格區(qū)域、圖片位置還原文檔的原始閱讀順序。這套設(shè)計對自研的啟發(fā)有兩層第一解析結(jié)果的粒度決定了后續(xù)檢索質(zhì)量的上限。如果文檔解析時就把表格硬拆成一行行散文本那后續(xù)分塊和向量化做得再好檢索出來的也是斷裂內(nèi)容。RAGFlow的做法是表格先以結(jié)構(gòu)化單元Markdown或HTML保存正文按語義段落保存圖片通過視覺模型生成描述文字再統(tǒng)一進(jìn)入切塊流程。第二版面分析可以大幅提升引用溯源的準(zhǔn)確性。當(dāng)用戶問這個數(shù)據(jù)來自哪個章節(jié)RAGFlow能定位到原始版面區(qū)塊而不是只拋出一段拼接文本。自研RAG如果不想一上來就做完整的版面分析可以先從保留標(biāo)題路徑開始——讓切出來的每個chunk都帶著章、節(jié)、小節(jié)的路徑信息這在召回展示時幫助很大。3.2 Dify知識庫管理和檢索編排的樣板Dify給我的感覺是平臺味最重的一個。它不只是RAG引擎更是一套圍繞知識庫的管理和編排層。它把知識庫生命周期的各個環(huán)節(jié)都做成了可配置項數(shù)據(jù)導(dǎo)入方式、分段規(guī)則、索引方式、檢索設(shè)置、召回策略、重排模型。這里有兩個點(diǎn)對自研特別有參考價值。一是檢索設(shè)置的精細(xì)化。同一套文檔不同場景對檢索的容忍度完全不同。業(yè)務(wù)問答里用戶直接要答案召回精度優(yōu)先知識庫內(nèi)部檢索管理員想盡可能多地找到相關(guān)內(nèi)容召回率優(yōu)先。Dify把這些差異做成了知識庫級別和檢索參數(shù)配置top_k大小、相似度閾值、Score閾值、召回策略等。自研時把這些參數(shù)做成系統(tǒng)可配置項而不是寫死在代碼里能省掉大量后續(xù)調(diào)優(yōu)溝通成本。二是分段Chunking規(guī)則的半自動化。Dify的系統(tǒng)默認(rèn)分段并不復(fù)雜但提供了很強(qiáng)的自定義空間包括文本分段標(biāo)識符、最大分段長度、重疊長度還支持父子分塊模式——父塊負(fù)責(zé)上下文語義子塊負(fù)責(zé)精確匹配。這讓知識庫管理員可以根據(jù)文檔類型去微調(diào)而不需要動代碼。Dify的另一個可借鑒點(diǎn)是它的知識庫隔離思路。多個知識庫之間可以設(shè)置獨(dú)立權(quán)限和獨(dú)立檢索范圍問答時可以指定檢索某一個或某幾個。這種設(shè)計在自研系統(tǒng)里很容易被忽略——往往一個庫打天下后續(xù)權(quán)限、合規(guī)問題全冒出來。3.3 FastGPT問題分類與知識庫路由FastGPT這個名字暗示了它的路線快、直接、以問答為目標(biāo)。它最打動我的功能是問題分類器和知識庫路由。RAG問答系統(tǒng)里有一種常見場景用戶的問題根本不需要走向量檢索。比如用戶問的是你們支持哪些格式這個問題的答案可能在系統(tǒng)配置里再比如用戶問的是你是誰這屬于閑聊還有一些流程類問題需要走工作流而不是查知識庫。FastGPT通過一個前置分類模塊把問題先做意圖分流再決定是否觸發(fā)知識庫檢索以及檢索哪個知識庫。這個設(shè)計解決了一個被很多人忽略的問題不是所有問題都適合向量檢索。對于一個垂直業(yè)務(wù)的自研RAG來說問題路由的價值比想象中大得多。它可以避免把閑聊問題送進(jìn)檢索鏈路省掉無效計算把不同領(lǐng)域的問題路由到對應(yīng)知識庫縮小檢索范圍提升精度為兜底回復(fù)留出空間當(dāng)所有知識庫的置信度都低時走人工轉(zhuǎn)接。自研時不必做一個獨(dú)立的模型來做路由。一個輕量分類提示詞讓LLM判斷問題類型并輸出JSON結(jié)構(gòu)就足夠覆蓋大多數(shù)場景。關(guān)鍵是把這個環(huán)節(jié)放在檢索之前并讓它可配置。3.4 QAnything把重排當(dāng)一等公民QAnything是網(wǎng)易有道開源的項目。它的核心思路是兩階段檢索第一階段同時使用向量檢索和BM25關(guān)鍵詞檢索做多路召回第二階段用一個專門的Rerank模型對召回結(jié)果統(tǒng)一打分排序。這個設(shè)計在RAG產(chǎn)品里不算稀奇但QAnything把它做到了極致?;乜礃I(yè)界實(shí)踐許多自研RAG項目把重排當(dāng)成可選項甚至上線之初完全不加重排。這會帶來一個明顯問題向量檢索的Top-K結(jié)果和用戶真正相關(guān)的尾部內(nèi)容之間經(jīng)常存在錯位。縮小chunk可以緩解但會引入更多的噪音chunk單純加大Top-K又會讓生成階段返回太多無關(guān)內(nèi)容擠占上下文窗口。QAnything把重排做成了標(biāo)準(zhǔn)服務(wù)并配套了雙向的Embedding和Rerank模型其中最值得借鑒的是召回重排的指標(biāo)分工召回階段看召回率盡量別漏重排階段看精度把最相關(guān)的內(nèi)容頂?shù)角懊妗W匝墟溌防镏嘏挪⒉灰欢ㄒ匝心P蛷腍uggingFace上選一個合適的Rerank模型比如BGE系列封裝成獨(dú)立服務(wù)就能獲得極大的效果提升。3.5 MaxKB輕量嵌入與對話內(nèi)檢索MaxKB走的是另一條路線把RAG能力做得足夠輕、足夠易嵌入讓它可以作為模塊被現(xiàn)有業(yè)務(wù)系統(tǒng)快速調(diào)用。它的默認(rèn)架構(gòu)不依賴龐大組件支持一鍵部署同時提供了函數(shù)調(diào)用能力和對話流程編排能力。對自研團(tuán)隊的啟發(fā)是邊界意識。很多自研項目容易把系統(tǒng)越做越重——為了支持某個邊緣功能拆出一個獨(dú)立服務(wù)然后這個服務(wù)又需要額外運(yùn)維。MaxKB的克制提醒我們RAG核心鏈路之外的功能能通過配置、函數(shù)、編排解決的問題盡量不要做成核心模塊。MaxKB的對話內(nèi)檢索也很有意思。它不是一次性把知識庫結(jié)果全塞進(jìn)上下文而是允許在多輪對話中動態(tài)追加檢索。這對應(yīng)了真實(shí)場景里用戶逐步明確需求的過程——第一輪問你們產(chǎn)品的定價第二輪追問那企業(yè)版呢。如果每次都是全量重檢索不僅成本高而且容易丟失對話焦點(diǎn)。3.6 GraphRAG與LightRAG讓RAG擁有全局視野圖譜方案針對的是普通向量RAG的一個硬傷局部強(qiáng)、全局弱。當(dāng)你問這幾類產(chǎn)品之間的關(guān)聯(lián)是什么或如果A不成立B和C會怎樣這類問題上純向量檢索幾乎無能為力因為答案不藏在某一段文本里而是要通過多段知識之間的連接關(guān)系推理出來。GraphRAG的路線是用LLM從文檔中抽取實(shí)體和關(guān)系構(gòu)建知識圖譜再做社區(qū)聚類和社區(qū)摘要回答問題時先在實(shí)體網(wǎng)絡(luò)上做局部搜索再結(jié)合社區(qū)摘要做全局推理。LightRAG在此基礎(chǔ)上做了簡化通過局部全局雙層檢索用更低的算力成本拿到類似的效果。從自研角度看圖譜不是用來替代向量檢索的而是用來補(bǔ)位關(guān)系密集型問題。它適合的組織結(jié)構(gòu)大致是知識庫內(nèi)容之間有強(qiáng)關(guān)聯(lián)、問題普遍涉及多實(shí)體比較、需要推理鏈。如果只是做簡單的FAQ問答圖譜帶來的額外成本和復(fù)雜性可能不值得。更務(wù)實(shí)的做法是向量為主、圖譜為輔的融合架構(gòu)先向量召回一批相關(guān)內(nèi)容再用圖譜補(bǔ)充實(shí)體關(guān)系層面的信息最后一起交給LLM生成。這樣不會為了圖譜而犧牲時效性和簡潔性。4. 六款產(chǎn)品背后的公共骨架自研RAG的五層結(jié)構(gòu)拆完六款產(chǎn)品我發(fā)現(xiàn)它們雖然形態(tài)各異但骨架高度一致。這個公共骨架可以濃縮成五層結(jié)構(gòu)這也是自研RAG時值得照抄的部分。4.1 文檔接入層解析、清洗、結(jié)構(gòu)化、分塊文檔接入層的目標(biāo)是把原始文件變成干凈的、語義完整的文本單元。它由四個步驟組成解析根據(jù)文件類型選擇不同解析器。PDF要處理掃描件識別與版面分析Word/HTML要提取正文和結(jié)構(gòu)表格要按行列結(jié)構(gòu)保存而不要拍平。清洗去掉頁眉頁腳、目錄、重復(fù)文案、無意義空白、水印文本。頁眉頁腳如果不去掉會變成每個chunk都帶一段重復(fù)噪音嚴(yán)重干擾向量相似度。結(jié)構(gòu)化保留標(biāo)題路徑、章節(jié)層級、表格Markdown表示、圖片描述。這步?jīng)Q定了后續(xù)引用溯源能力。分塊在結(jié)構(gòu)化基礎(chǔ)上按語義邊界切塊設(shè)置合適的分塊大小和重疊區(qū)間。父塊保存上下文子塊承擔(dān)精確匹配。這層的質(zhì)量基本決定了整個系統(tǒng)的上限。RAGFlow、Dify、FastGPT都在這層投入了大量工程但它們的實(shí)現(xiàn)思路可以各自借鑒。自研時可以先用成熟解析器比如Unstructured、PyMuPDF、Tika搭建流水線不要糾結(jié)于自研解析核心。4.2 索引層稠密向量稀疏關(guān)鍵詞的混合索引索引層負(fù)責(zé)把chunk變成可檢索的結(jié)構(gòu)。公共骨架里幾乎所有產(chǎn)品都在用混合索引而不是單純的向量索引。稠密向量索引chunk文本經(jīng)過Embedding模型轉(zhuǎn)成向量在向量數(shù)據(jù)庫里按相似度檢索。負(fù)責(zé)語義級召回。稀疏關(guān)鍵詞索引用BM25這類算法按詞頻檢索。負(fù)責(zé)精確關(guān)鍵詞召回尤其適用于人名、產(chǎn)品型號、特殊代碼等向量模型覆蓋不好的場景。自研時落地方案很多Elasticsearch既有BM25又有向量檢索能力Qdrant、Milvus可以搭配外置BM25服務(wù)最簡單的方案是先用SQLite一個向量庫一個倒排索引把鏈路跑通。關(guān)鍵不是選哪個庫而是兩條召回路徑必須都存在最終的召回結(jié)果要合并、去重、重排。4.3 檢索層多路召回、查詢改寫與重排檢索層是六款產(chǎn)品差異最大的地方之一但思路的一致性很高不能讓第一次向量檢索的結(jié)果直接進(jìn)入生成階段。標(biāo)準(zhǔn)做法可以總結(jié)為三步查詢改寫用戶的原始問題往往口語化、有指代、缺少上下文。LightRAG和Dify都有類似的查詢改寫機(jī)制——先把問題擴(kuò)充成多組檢索詞同時保留原始問題。比如用戶問它的性能怎么樣需要先想辦法確認(rèn)它指代哪個產(chǎn)品再展開檢索。多路召回向量檢索、BM25關(guān)鍵詞檢索、圖譜檢索并行或串聯(lián)進(jìn)行每路召回Top-N然后合并。重排用交叉編碼器模型對合并的候選重新打分。交叉編碼器的精度高于向量相似度但速度慢只適合在候選集上做精排。一個可以立刻用的查詢改寫提示詞模板我放在下面這也是我在項目里實(shí)際用過的你是檢索詞改寫助手。根據(jù)用戶問題和對話歷史生成最多三個獨(dú)立的檢索詞。 要求檢索詞面向知識庫檢索系統(tǒng)必須具體、完整、包含關(guān)鍵實(shí)體名稱。 輸出格式JSON數(shù)組如[檢索詞1,檢索詞2,檢索詞3]。 用戶問題{question} 對話歷史{history}4.4 生成層上下文窗口管理、提示詞模板與引用溯源生成層決定了檢索出來的內(nèi)容是否能被正確使用。這里有幾個常見的坑把整個檢索結(jié)果一股腦塞給LLM不顧上下文窗口。正確做法是設(shè)置檢索結(jié)果的最大字?jǐn)?shù)占比保留給LLM推理的空間。比如限制最終進(jìn)入上下文的檢索片段不超過1500字超出部分寧可截斷。提示詞模板太簡單只寫根據(jù)以下內(nèi)容回答。效果更好的模板會明確要求優(yōu)先使用檢索內(nèi)容不編造信息不足時明確回答不知道引用的序號必須與檢索片段對應(yīng)。忘記引用溯源。用戶使用RAG產(chǎn)品時最需要的東西是他能回去翻原文。在生成結(jié)果時帶上引用序號并最終映射到原文頁和具體段落這個能力是所有評測里用戶滿意度最高的一個。4.5 評估優(yōu)化層離線指標(biāo)與線上反饋閉環(huán)最后一個公共模塊是評估。Dify、FastGPT都有相對完整的調(diào)試和質(zhì)檢界面QAnything也有評測報告模塊。真正讓我把它當(dāng)成必做項的是RAG系統(tǒng)在迭代中的特征任何一次修改效果都可能朝不同方向漂移離線不能評估就完全沒法迭代。做評估可以分兩步起步第一步做一套低成本人工評估集。選50-100條真實(shí)問題標(biāo)注標(biāo)準(zhǔn)答案、支持性引用文檔、正確回答把忠實(shí)度、相關(guān)性、答案完整性三個維度做成打分表。第二步接入RAGAS這類開源評估框架讓LLM充當(dāng)裁判對回答質(zhì)量做自動化評估。RAGAS提供了Faithfulness、Answer Relevancy、Context Precision等指標(biāo)可以直接對測試集批量評估。評估不是上線前一次性的動作而是要固化在知識庫更新和檢索參數(shù)調(diào)優(yōu)的全流程里。沒有評估集后面所有優(yōu)化都像在黑夜里調(diào)音量。5. 逆向成果落地一套可復(fù)用的自研RAG藍(lán)圖5.1 分層架構(gòu)與數(shù)據(jù)流設(shè)計我基于上面五層結(jié)構(gòu)整理出一個較完整的自研RAG分層架構(gòu)。這里盡量保持簡單強(qiáng)調(diào)可落地性。接入層文件上傳 → 解析 → 清洗 → 結(jié)構(gòu)化 → 分塊 ↓ 索引層Embedding向量化 ? BM25倒排索引 → 寫入向量庫/索引庫 ↓ 檢索層查詢改寫 → 多路召回 → 合并去重 → 重排 ↓ 生成層上下文組裝 → 提示詞模板 → LLM生成 → 引用溯源 ↓ 應(yīng)用層問答接口 → 管理后臺 → 反饋收集 → 評估閉環(huán)各層之間通過標(biāo)準(zhǔn)接口連接接入層輸出統(tǒng)一的文檔單元對象包含內(nèi)容、標(biāo)題路徑、元數(shù)據(jù)和分塊關(guān)系檢索層輸出帶評分和來源的候選片段生成層只消費(fèi)候選片段和提示詞參數(shù)。這種數(shù)據(jù)流設(shè)計有兩大好處每一層可以由不同組件實(shí)現(xiàn)后續(xù)替換成本低。今天用PostgreSQL的pgvector明天換Qdrant不需要動其他層。每一層可以獨(dú)立驗證。接入層可以單獨(dú)測試某一個PDF的切塊質(zhì)量檢索層可以單獨(dú)壓測召回率生成層可以單獨(dú)評測回答忠實(shí)度。5.2 組件選型對照自研與替換的邊界組件選型是自研團(tuán)隊每天都會面臨的問題。我按踩過的坑給一份比較務(wù)實(shí)的選型對照表模塊可選方案自研邊界建議文檔解析PyMuPDF、Unstructured、Tika、RAGFlow的解析引擎優(yōu)先用現(xiàn)成庫只有在特定文檔格式合同掃描件、圖紙等時才自研專用解析器Embedding模型BGE-M3、Qwen-Embedding、OpenAI text-embedding-3先跑內(nèi)置測試集對比不要只看MTEB榜單分?jǐn)?shù)向量數(shù)據(jù)庫Qdrant、Milvus、pgvector、Chroma數(shù)據(jù)量小于百萬級時pgvector或Chroma足夠不必引入分布式數(shù)據(jù)庫稀疏檢索Elasticsearch、Typesense、自建倒排索引中小知識庫可以直接用SQLite FTS5成本極低重排模型BGE-Reranker、Cohere Rerank封裝成獨(dú)立HTTP服務(wù)方便替換模型版本LLM本地Ollama部署開源模型或調(diào)用商業(yè)API先跑通鏈路再優(yōu)化模型選擇避免一開始被模型選型拖住編排框架LangChain、LlamaIndex或純手寫純Python實(shí)現(xiàn)對鏈路把控更穩(wěn)框架只用來做膠水很多人會在選型上糾結(jié)很久。我的經(jīng)驗是選型的核心不是哪個最好而是替換成本夠不夠低。只要接口統(tǒng)一先隨便選一個跑通再根據(jù)評測結(jié)果替換才是最快路線。5.3 最小可用版本的實(shí)現(xiàn)路線如果從零開始做一個自研RAG的MVP版我會按這個順序推進(jìn)先用Python腳本接入開源解析庫實(shí)現(xiàn)PDF/Word/HTML → 清洗 → 遞歸字符分塊的流水線。分塊參數(shù)先用經(jīng)驗值500字左右重疊100字。用BGE-M3生成向量寫入pgvector或Chroma同時用SQLite FTS5存一遍原文關(guān)鍵詞索引。實(shí)現(xiàn)一個檢索接口改寫查詢 → 向量召回Top-20 → BM25召回Top-20 → 合并去重 → 用BGE-Reranker重排取Top-5。寫一個生成接口把Top-5片段按提示詞模板發(fā)給LLM輸出時以[1]-[5]標(biāo)注引用序號。用RAGAS框架搭建離線評測導(dǎo)入50-100條業(yè)務(wù)問答跑基準(zhǔn)效果。再根據(jù)評測結(jié)果回頭調(diào)分塊策略、召回數(shù)量、提示詞。按這個順序走通常兩周內(nèi)就能跑出一個效果初步可用的RAG基礎(chǔ)版。如果團(tuán)隊里有人之前完全沒接觸過RAG這個MVP過程本身就是最好的學(xué)習(xí)路徑。6. 自研落地必須跨過的四個實(shí)操坑6.1 分塊大小該定多少從RAG知識庫談起的參數(shù)調(diào)優(yōu)在看了大量開源項目的討論和實(shí)際案例后我可以說根本不存在一個適用于所有場景的分塊大小。常見建議從200到800字都有關(guān)鍵是看你的文檔類型和用戶問題的特點(diǎn)。如果文檔是產(chǎn)品說明書每段本身語義完整直接按段落分塊優(yōu)于按固定字?jǐn)?shù)硬切。chunk大小可以放寬到800字。如果文檔是合同或制度文件條款之間有強(qiáng)引用關(guān)系更適合父子分塊。父塊是整個條款段落子塊是條款內(nèi)的句子。如果用戶問題偏短、偏實(shí)體化比如型號A和型號B的區(qū)別chunk太大容易把答案淹沒在其他信息里需要更小的chunk配合重排。一個可行的經(jīng)驗法則是先用固定字?jǐn)?shù)400-500字跑一遍基線再用評測集觀察失敗case然后針對失敗類型調(diào)整策略而不是一開始就追求最優(yōu)參數(shù)。6.2 圖片和表格到底能不能存進(jìn)RAG知識庫這個問題在RAG知識庫相關(guān)討論里的出現(xiàn)頻率很高。我的回答是可以但不能用常規(guī)方式。純文本向量化對圖片天然失效。正確做法是有兩條路圖片輔助路徑用OCR或視覺語言模型比如Qwen-VL、MiniCPM-V提取圖片中的文字信息生成詳細(xì)的圖注和描述文本再把描述文本向量化。用戶后續(xù)的問句中只要涉及圖片內(nèi)容就能通過描述文本檢索到。表格結(jié)構(gòu)化路徑表格不要轉(zhuǎn)成純文本行流要保留成Markdown表格或HTML按行列關(guān)系保存。檢索時把表格對應(yīng)的文字說明作為主檢索單元表格本身作為附件隨候選片段一起返回。自研時最好設(shè)計一個多模態(tài)文檔單元一個單元可以同時包含文字塊和圖片/表格對象。這樣檢索只作用于文字描述生成時再按需攜帶圖片或表格進(jìn)上下文。6.3 知識圖譜不是銀彈kg與向量檢索的適用范圍邊界自打kg知識庫ontology rag這類熱度起來之后不少人也在問我要不要給自研RAG直接上知識圖譜方案我的判斷標(biāo)準(zhǔn)是看問題的密度。如果業(yè)務(wù)里的典型問題都是XX是什么XX和YY誰更適合我怎么做XX這類局部查詢向量RAG足夠了。但如果你經(jīng)常遇到為什么這個環(huán)節(jié)影響了那個環(huán)節(jié)哪些因素共同決定了這個結(jié)果這類跨實(shí)體推理問題知識圖譜才有必要引進(jìn)來。另外還需要考慮成本。GraphRAG構(gòu)建圖譜的算力開銷比普通向量索引高很多倍而且需要定期隨文檔更新重建。更合理的起步方式是在向量檢索召回之后疊加一個關(guān)系補(bǔ)充環(huán)節(jié)對召回片段做一次輕量實(shí)體鏈接順便抽取相鄰實(shí)體關(guān)系補(bǔ)進(jìn)上下文。先用小成本驗證圖譜對效果的增量再做完整圖譜模塊。6.4 macOS本機(jī)搭建RAG環(huán)境的可行性方案很多人習(xí)慣用自己的Mac本機(jī)先搭RAG試驗環(huán)境。這事完全可行但要提前跳過幾個坑。最穩(wěn)的本地方案是Ollama跑Embedding和LLM模型搭配Chroma或Qdrant作為向量庫再用FastGPT或MaxKB作為界面和管理層。具體到Mac上實(shí)踐時有幾個經(jīng)驗可以分享內(nèi)存是硬約束。7B量級的量化和13B量化模型在同一臺機(jī)器上同時跑Embedding和生成內(nèi)存16GB會比較吃緊。建議Embedding用輕量模型如BGE-Small生成時才切換大模型或者用遠(yuǎn)程API做生成。Python環(huán)境建議直接用虛擬環(huán)境管理工具不要直接在系統(tǒng)Python上裝依賴別問我是怎么知道的。分塊、向量化、評測這些依賴一旦沖突排查起來特別費(fèi)時間。macOS上跑PDF解析注意掃描版PDF需要額外裝OCR相關(guān)庫。如果不裝解析出來全是空文本檢索結(jié)果會非常迷惑。如果在Mac上先把這套MVP跑通了后續(xù)遷移到服務(wù)器環(huán)境基本就是換一個向量庫連接字符串的事。最后再聊一點(diǎn)個人的實(shí)際感受。逆向這六款開源產(chǎn)品時我最大的體會是自研RAG真正難的地方不是某個算法環(huán)節(jié)有多高深而是如何把解析、切塊、索引、召回、精排、生成、評估這些看起來都會的模塊以正確的順序和正確的邊界組合在一起。開源產(chǎn)品把組合方式直接擺在了代碼里這是信息密度極高的參考素材。如果你現(xiàn)在正準(zhǔn)備自研RAG我的建議很明確不要從寫第一個函數(shù)開始先從拆第一份開源代碼開始。選一款和你業(yè)務(wù)最接近的產(chǎn)品把它的數(shù)據(jù)流畫一遍再對照這篇的五層結(jié)構(gòu)和選型表決定哪些環(huán)節(jié)自研、哪些環(huán)節(jié)用現(xiàn)成組件。先跑通MVP再談優(yōu)化。這樣走至少不會把彎路完整地走一遍。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
www.婷婷亚洲基地| 久久只有18视频| 99WWW免费视频| 五月婷婷亚洲| 丁香六月久久| http:色情日本com| 五月天色婷婷综合| 五月丁香| 中文AV网站| 激情五月婷| 天天操中文字幕| 色五月六月| 99精品久久| 国产伦亲子伦亲子视频观看| 毛片色五月| 久久精品系列| 这里只有精品久久| 婷婷五月天综合久久| 97热九九| 99热99色| 操人妻视频91| 色婷婷五月影视| 欧美大片免费播放器| 丁香婷婷成人在线播放| 九九九九综合| 亚洲成人影视在线| 久草五月婷婷| 五月天在线视频尤物视频在线看| 五月丁香六月色| www.婷婷五月天.com| 九九综合精品| 婷婷玖玖五月天| 开心五月深爱五月| 婷婷香五月天| 六月婷婷狠狠| 五月婷婷|欧美| 婷婷丁香在线| 人妻久久久| 丁香五月影院| 色九综合| 双性美人被调教到喷水A片| 欧美日韩AAA| 亚洲无aV在线中文字幕 | 亚洲网综合在线| 天天干天天色综合| 六月亚洲| 色七七九九| 99∨VTV| 久久久久久久久人妻| 久久五月综合| 丁香花婷婷五月天| 国产成人精品一区二三区熟女在线| 激情五月天伊人av| 天天激情视频| 97婷婷丁香五月天激情图片| 激情文学综合婷婷五月天丁香花| 91人人操人人| 色吧五月婷婷| www.seqingwuyuetian| 亚洲色网络| 激情五月开心五月在线视频| 九月婷婷激情| 婷婷五月久久| 色综合五月| 777色色色| 青青草原中文字幕| 色呦呦美女| 久久黄色片| 激情丁香社区| 综合激情深爱| 综合在线丁香五月| 五月天狠狠网站| 九九热99在线视频| 六月丁花香啪啪激情欧美| 99综合一区| 人妻 性久久久久久| 五月婷婷丁香六月| 影音先锋91视频| 99热这里有精品| 日日色综合| 狠狠干总合| 日本久久人人| 丁香 亚洲 久久| 丁香五月天激情综合| 亚洲色五月| 婷婷六月激情丁香| 色A网| 中文字幕,综合,91| 岛国在线观看91| 色五月综合激情| 丁香六月婷婷综合欧美| 超碰在线播放免费观看| 五月天婷婷婷| 国产黄色在线| 这里只有精品视频在线| 亚洲操操操| 激情综合五月| 99精品热| 色色色色色色色色综合网| 亚洲天天免费| 欧美va亚洲va| 久操综合| 午夜爱插插| 婷婷激情五月天激情小说| 日本99久久| 久久婷婷久久| 欧美色色色色色色| 九九色色| 99热免费| 久9久成人精品视频| 欧美综合激情五月| 天天射天天射一道本日本社区 | 79色色免费| 成人五月天婷婷| 啪啪婷婷五月天激情| 婷婷五月欧美AA片免费| 国产综合A片| A片女女女女女女BBBB| 婷婷久久网| 五月天天天天天天天天天天天天天天天婷婷婷 | 超级碰碰碰碰视频| 久久99久久久| 五月天婷婷色情| 色综啪啪啪啪啪啪| 五月婷中文娱乐综合| 人妻AV中文系列| 精品人妻一区二区三区四区不卡在| 99在线资源| 婷婷成年人免费视频| 丁香五月冃欧美| 五月丁香激情综合网官网| 淫荡家庭AV| 99色在线观看| 5月激情天| 香蕉婷婷| WWW色综合| 久久只有这里精品免费| 久热这里这里有精品| 精品五月视频婷婷在线观看| 美女亚洲五月丁香| 婷婷五月天直播| www。88热在线视频免费观看| 免费成人va| 色色色激情| 99啪啪视频| 久久婷婷五月天懂色| 99re视频在线播放| 色五月婷婷五月丁香五月激情五月视频| 久天综合| 五月丁了香蕉综合| 操逼123网| 九九九九九九九热| 婷婷五月综激情| 婷婷激情综合色五月久久图片| 97操碰在线97| 六月婷婷色色色| 色婷婷88| 狠狠艹狠狠艹| 五月综合激情视频| 丁香五月天视频| 91九色视频在线观看| 婷婷综合色图| 婷婷五月天AV| 天天色中文字幕女优AV| 婷婷综合久久综合| 久久婷婷东京热| 婷婷五月丁香花综合| 97色在线视频| 四色 爱 婷婷 精品 亚洲 五月天| 婷婷五月免费观看| 五月天婷婷在线AN| 五月婷婷视频在线观看| 99热亚洲精品| 99燥99日| 久久婷婷丁香视频网| 狼人狠狠操| 日本一级一片免费视频| 婷婷丁香五月天哟啪| 色之综合网| 深爱开心五月天| 狠狠色丁香久久婷婷综合五月| 五月丁香六月激情欧美综合| 五月丁香婷婷色色| 亚洲乱码日产精品BD| 五月停视频天堂| 色色色色色五月| 97艹| 综合天天综合| 亚洲激情免费视频| 欧美三级欧美一级| 久久精品国产精品| 婷婷五月天亚洲综合| 久久停停超碰| 婷婷娱乐丁香综合网| 99这里有精品视频视频| 91人人操人人| 五月丁香六月激情网站| 大香蕉99热| wwW天天干| 五月婷婷天天色| 天天精品视频在线观看视频| 99ri在线观看视频| 激情五月丁香五月色| 日韩在线成人电影| 婷五月天在线草| 久久激情五月天| 丁香六月啪啪啪| 久久久久久久人妻| 天堂综合久| 亚洲综合激情五月天婷婷| 五月婷婷干| 激情五月天色播| 六月丁香激情网| 日韩在线看AV| 五月天婷婷av| 亚洲激情精品| 人妻久久久久久久| 婷婷性爱综合| \\五月天婷婷激情| 思思热久久艹| 色婷婷丁香AV综合| 97色干| 五月丁香六月婷婷网站| 99精彩视频| av操B网站| 九月丁香| 97丁香五月| 开心激情综合| 婷婷色色欧美| 亚洲色欲AAAAAA| 在线成人网址| 综合九色| 5月色亭亭视频| 激情五月开心五月丁香五月| 99热在线观看| 婷婷久久五月| 婷婷五月天国产在线播放| 狠狠操狠狠| 色婷婷亚洲综合网站| 六月丁香婷婷五月天| 26uuu91| 色婷婷亚洲| 婷婷婷婷婷婷婷婷婷婷丁香| 激情五月激情综合俺也去婷婷小说| 婷婷五月激情视频在线| 香蕉久久国产AV一区二区| 色欲九区| 中文AV网站| 欧美性生交XXXXX无码小说| 色欲五月婷婷| 久久婷婷成人综合色怡春院| 性av| 国产成人+综合亚洲+天堂| 激情婷婷丁香色五月| 婷婷五月天成人| 99九九精品视频推荐| 丁香婷婷六月激情文学| 久久五月激情综合| 天堂久热| 丁香婷婷啪啪啪| 青青草成人网| 天天搡日日搡aaaaⅩ| 丁香六月色婷婷| 麻豆WWWCOM内射软件| 亚洲天堂爱爱| 另类视在线| 色色色宗合网| 天天天天天天天操| 亚洲激情在线| www。五月天激情| 久久99综合网| 婷婷色偷拍| 色婷婷影音| 99久在线精品99re8热| 99视频91| 99热这里是精品| 大香蕉伊人丁香五月| 国产色丁香| 五月婷婷激情中文字幕| 亚洲成片在线观看| 91午夜激情| 91919191919久久成人视频| av 一区三区四区| 五月婷婷丁香六月| www.99久久久久99| 五月婷婷之综合激情| 黄网在线免费观| 天天爽天天爽天天爽天天爽天天爽天天爽天天| 五月婷婷色综图片| 九热视频在线精品15| 五月婷婷中文字幕| 久久亭亭电影| 丁香婷婷久久综合在线| 五月丁香六月片| 五月丁香婷婷激情在线视频| 激情av| 99精品视频在线观看免费| 久久久久久久久99精品| 综合另类视频| 91综合国免费久入| 99热最新| 丁香色婷婷| 秋霞性爱AV| 91丨九色丨熟女丰满| 午夜九九九九九九| 婷婷九月在线| 色综合久久88| 91丁香五月| 超碰中文字幕在线| 五月婷婷啪啪综合网| 99久久婷婷国产综合亚洲| 久久 视频这里只有精总| 久久黄色片| 五月婷六月丁香| 风流少妇A片一区二区蜜桃| 九九综合精品| 99久久精品免费精品国产_国产精品久久久久久_国产在线|日韩_久久国产精品电影 | 99久久九九| 激情综合婷婷| 婷婷激情五月综合| 婷婷五月丁香伊人网| 大香蕉综合视频在线| 婷色成人| 荫道BBWBBB高潮潮喷| 《》【无码】想被搞到爽AV应募而来的超M素人 西纯子 10musume-011723-01 | 99自拍网| 99综合视频一体| 欧洲亚洲免费视频9| 九九九九综合| 日本一级黄色电影| 婷婷五月天成人动漫| 香蕉AV福利精品导航| 婷婷五月天影视网址| 丁香五月性| 这里只有精品99视频| a久久| 欧美激情xxxXX| 激情第四色| www,8050,午夜三级| 五月婷婷色| 东北婷婷五月天| 色婷婷中文| 亚洲av骚货| 97婷婷五月丁香| 丁香六月激情| 婷婷色婷婷亚洲成人| 99色在线| 五月天久久综合婷婷丁香| 九九综合88| 91肏| 免费三级黄色| 伊人啪啪网| XX久久| 91操人视频| 亚洲日韩人妻操逼| 69人人操人人爽| 精品99在线| 99热色无码| 色五月激情五月| 开心激情播播五月天| 吊色AV男人的天堂| 五月丁香亭亭| 韩国激情五月天综合网| 色五月首页| 亚洲中文字幕在线观看| 色99在线| 99区视频| 免费成人网在线观看| 婷婷视频网| 婷婷成人综合| 色婷婷av综合网| 亭亭五月丁香五月天激情| 99热免费精品| 99久久精品免费精品国产_国产精品久久久久久_国产在线|日韩_久久国产精品电影 | 中文字幕永久免费| 丁香六月爱综合| 99热只有精品在线| 激情五月天丁香| 婷婷五月天综合小说网| 九九亚洲视频| 激情操逼婷婷| 久9久9久9久9久9久9| 玖玖99福利| 青青久久91| 日本啪啪网| 婷婷成人综合免费视频| 色爱99| 综合色图区| 无码色色| 激情久久四色| 日韩视频女神99| 丁香五月色情| 99在线免费视频| 综合婷婷六月| 99九九热视频| 国产性爱在线| 五月天激情四射| 欧美综合五月丁香六月婷| 991精品在线视频| 嫩草AV久久伊人妇女超级A| 久热这里| 色婷五月天网站| 香蕉久久国产av一区二区| 无码激情AAAAA片-区区| 丁香六月婷婷综合激情欧美| 五月婷婷网五月在线| 99久久九九| 爱iii做iiii日日| 亚洲五月天激情| 亚洲第一第二网站| 丁香五月成人论坛| 99综合久久| 日本激情综合| 99在线免费视频| 丁香六月激情网C0W| 五月六月播婷婷| 99ri国产精品| 亚洲在线免费成人| 五月激情在线| 综合网啪| 色色综合网络| 99热这里有精品24| 久久综合这里只有精品1| 五月婷婷丁香大香蕉| 婷婷六月色| 色色五月天网站| 韩国久久少妇视屏| 婷婷五月丁香狠狠| 思思热这里只有精品视频666| 日本在线观看91| 99色在线视频| 99久久久久| www.色婷婷.com| 天天成人综合视频| 最新激情五月天| 久久久久久综合88| 99九九中文字幕视频| 亚洲愉拍99热成人精品| 99re热视频这里只精品| 色域五月婷婷丁香| 激情小说在线视频| 五月天激情av| 9999热这里只有精品| 国产亚洲99| 99精品久久久久久久| 色五月天婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷 | 亚洲综合色网| 五月成人天| 婷婷五月激情欧美大胆视频| 丁香五月自拍| 久久综合婷婷| 欧洲综合视频| AV色婷婷| 人妻五月天激情开心网| 天天干天天日蜜臀av| 97碰| 99毛片| 停婷丁五月在线| 五月天色婷婷伊人网| 丁香五月狠狠综合欧美| 婷丁香五月天| 色色综合日韩| 丁香丁香激情网| 67194国产| 天天色图| 玖玖色综合网| 97久久人人| w婷婷五月婷婷w| 激情宗合 激情宗合| 墨西哥毛片内射精| 欧美A片在线视频免费观看| 国产乱妇无乱码大黄AA片| 激情五月综合网| 99精品免费视频| 亚洲六月婷婷| 91婷婷在线| 久热 91| 91人人操人人爱| 五月天婷综合| 人人干99| 操久久网| 色五月网址| 依人大香蕉| WWW,五月| 欧美一级色| 深爱五月天| 婷婷丁香成人| 强壮的公次次弄得我高潮A片日本 | 五月婷婷色色| 国产精品久久久久9999小说| 一区二区三区四日本| 熟惀91九色在线| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | 亚洲综合婷婷五月天| 欧美色色色| 99er6热在线观看精品6| 欧美va| 色综合综合网| 久久这里只| 亚洲人成人五月天| 亚洲婷婷免费| 日本丁香五月| 大香线蕉伊人| 五月丁香| 中文字幕人妻熟女在线| 激情五月婷婷综合秋霞| 欧洲综合一区| 色色综合五月| 久久精品天| 狠狠爱五月婷婷| 久碰久操| 激情深愛五月視頻| 色五月婷婷在线视频| 激情狠狠丁香月| 午夜色丁香| 五月天啪啪啪| 在线观看免费狠狠色丁香香综合| 久久九色| 99成人| www.色色色com| 亚洲啪| 98永久精品| 日韩无码专区| 六月香五月婷| 丁香五月亚综合图片| 激情五月天婷婷| 涩五月婷婷| 久操人妻| 色伦专区97中文字幕| 激情五月四色| 午夜爱爱网站| 激情婷婷五六月天| 人人超碰99| 99自拍视频网站| 一起草Av| 初夜av| 国产成人亚洲综合A∨婷婷| 久久婷婷综合基地| 亚洲亚洲人成综合网络| 久草 tingting| 狠狠爱婷婷| 99re66热这里只有精品| 婷婷激情5月| 天天综合精品| 欧美激情综合色综合啪啪五月| 波多野结衣不卡AV| 97在线刺激| 欧美99热| 天天干天天操天天拍| 色婷| 久久人妻熟女一区二区| 国产激情在线观看| 99热国产在| 五月久久丁香| 色色操| 丁香六月天婷婷色| 久久99久久99精品免观看粉嫩| 女性自慰系列第五页| 9久热这里只有精品| 激情五月色婷婷| 26UUU精品一区二区| 射满了还射免费在线观看 -午夜版全集-新视觉影院 | 五月丁香婷婷综合网| 69er小视频| 成人版视频在线观看| 日日日日日| 五月婷婷精品| 狠狠狠狠免费| 久久精品系列| 亚洲网站观看视频| 国产免费AV网站| 99精品在线下载| 26.uuu丁香五月婷婷| 国产成人精品亚洲线观看| 亚洲无码猫咪| 香蕉婷婷色五月| 青青草原精品久久| 丁香五月天之婷婷影院| 东北黄色一级| 色婷婷色五月色丁香| 五月丁香六月情| 色情五月婷婷| 91丨九色丨熟女丰满| 99热这里只有精品86| 人妻操逼视频。| 亚洲成人乱码av网站| 日日噜噜夜夜狠狠久久丁香六月| 六月婷色| 国产免费性爱| 九九色影院| 日韩aⅴ视频| 久久精品爱爱| 丁香六月婷婷色XXXXX| 九月色婷婷综合亚洲| 亚洲 五月 婷婷 成人| 久久日婷婷| www.minyis.com【JT】实力收量可预付QQ2101460746 | 1024在线观看免费视频| 亚洲婷婷欧美婷婷| 91精品婷婷国产综合久久| 强伦轩人妻一区二区电影| 狠狠做六月爱婷婷综合aⅴ| 久久亚洲婷婷| 狠狠草综合网| 狠狠综合区| 亚洲色图五月丁香| 深爱激情中文五月天av| 国产精品激情AV久久久青桔| 天天日日夜夜爽。| 99综合熟女| 婷婷五月无码| 天天插轮理| 人人操婷婷| 超碰人人干| 任你草| 香蕉AV福利精品导航| 九九这里精品| 伊人久久大香天蕉亚洲特级| 99热欧美| 狠狠操天天日| 色色影院黄大片| 亚洲中文字幕av| 草美女在线观看视频在线播放| 亚洲成人影视在线| 99热成人精品网站| 人妻爽爽爽久久久久久久久| 五月天婷婷婷| 婷婷五月天小说| 99久久婷婷国产综合精品青桔| 高清无码网址| 思思热久久爱| 色久影院| 99成人在线观看| 天天干天天操天天干天天操天天干天天操 | 怡红院视频| 99精品久久久| 99热免费| 综合九九| 99操视频| 亚洲无码影音| 丁香婷婷九月| 五月天成人伊人| 免费在线a| 天天操人人干| 丁香婷婷成人在线播放| 91视频一起草| 俺去也五月| 俺去也综合| 九九综合视频在线观看| 丁香影院五月综合| 97色碰| 五月婷婷丁香五月婷婷| 伊人色综合影院视频| 曰韩少妇内射免费播放| 五月婷婷啪啪| 亚洲激情图文小说| 亚洲在线成人| 五月丁香久久| www.天天日| 开心激情色婷婷五月天| 99内射视频| 国产FREESEXVIDEOS性中国| 5月婷婷6月六月丁香| 99这里有精品视频3| 九月色婷婷婷| 久久激情综合| 亚洲激情精品| 色综合99| 五月伊人婷婷999| 国产成人+综合亚洲+天堂| 99热官网精品在线| 丁香 婷婷五月| 色色色色色色五月婷婷| 久草热8精品视频在线观看| 久久综合激情| 日本婷婷色| 99色精品| 99亚洲视频| 五月天激情网图片 - 百度| 99人人操| 婷婷D区| 色色色色色色色色五月先| 婷婷五月丁香久久| 五月丁香六月久久| 99热九九在线| 激情都市另类| 99热官网精品在线| 精品人妻一区二区三区四区不卡在| 国产五月丁香在线| 亚洲成人中心| 欧美色五月| 超碰成人av| 五月综合777| 91人人操人人| 五月丁香趴趴| 香蕉久操| 99热99色| 欧美97色| 婷香五月激情视频| 人妻操在线看| 色99亚洲| 深夜男女福利刺激影院一区完整| 婷婷五月天性爱视频| 国产成人精品123区免费视频| 操逼六区| 国产精品色婷婷AV综合色色| 秋霞电影理论| 爱性综合网| 玖玖99精品视频| 五月久久综合| 能看的AV| 五月激情婷婷在线| 综合色影| 蜘蛛女侠2003满天星免费观看| 九九爱看亚洲| 婷婷丁香五月激情综合站_久久五月丁香激情综合_开心五月综合激情综合五月_婷 | 婷婷基地爱| 五月天伊人久久久久| 都市激情五月婷婷亚洲| 怕怕av| 五月色婷| 26uuu丁香婷婷五月| 丁香伊人五月色婷婷五十路| 狠狠爱深色婷婷综合| www久| 99啪啪视频| 欧美成人日韩| 亚洲色情在线| 五月天激情.com| 最新激情五月天| 五六月婷婷| 991精品在线视频| 亚洲在线成人| 9热在线| 熟女人妻视频| 激情五月综合亚洲另类| 天天色综网| 97碰碰视频在线观看免费| 五月婷婷六月丁香综合| 色五婷婷| 99re最新地址| 天天爽天天摸| 亚洲色色香蕉| 婷婷色av| 深爱激情丁香五月| 黄色AAAAA| 99性爱精品| 丁香五月天五码婷婷| www.99热最新视频8| 嫩草AV久久伊人妇女超级A| 亚洲五月婷| 超碰免费人妻| 9l视频自拍九色9l视频自拍九色9l社区 | 影音先锋91| www.日日夜夜.com| 超碰1999| 色五月天成人| 婷婷五月丁香综合激情| 五月天天爽| 骚。com| 亚洲另类噜噜| 五月情婷婷| 天天天天天日| 婷婷天天日婷婷| 激情五月婷婷五月丁香五月开心五月| 超碰1999| 日日干天天| 免费观看的婷婷五月视频在线| 综合五月网| 四色五月婷婷| 激情五月丁香亭亭| 日日干日日| 色五月婷婷综合在线| 五月婷婷色播| 五月丁香999| 色99热| 婷婷五月天久久| 激情五月婷婷综合| 99热只有| 久久精品99国产精品日本| 无码AV久久久久久久久| 日韩成人精品中文字幕电影| 婷婷五月天综合亚洲| 国产乱轮一区二区三区| 色综合99色| 色情五月| 超碰日日操| 婷婷色九月| 97色色色色| 久久只有精| 人人爱天天摸摸天天爱| 五月天成人在线精品| 人妻熟妇六区| 久久综合天天综合| 天天日天天爽夜夜爽| 日韩黄色电影| 日韩视频99| 91啪啪| 亚洲AV影片在线观看| 久婷婷视平| 99精彩视频在线观看| 免费AV在线网址| 中文字幕,综合,91| 五月天色图| 天天做天天爱天天日| 九九草热在线观看| 开心色五月天久久久久久久| 久久hd| 九九热只有精品| 国产做A爰片毛片A片美国| 色九四色| 99国产欧美视频| 丁香五月激情综合婷综| 六月色色| 色五月婷婷开心| 五月丁香六月婷婷综合网站| 女同激情久久av久久| 九九激情| 亚洲综合五月天婷婷| 色原狠狠综合| 超碰在线看| 日日干日日s| 五月丁香六月婷婷久久| 丁香五月婷婷色情综合| 色色色欧美| 久久久日韩特色特黄AAAA| 色爽九九| 婷婷久久免费看| 婷婷六月久久综合导航| 六月丁香婷| 性欧美大战久久久久久久83| 综合网啪| 亚洲思思热久| 人妻久久久久久久久久| 人妻AV在线观看| 国产精品99久久久久久久女警 | 99热这里只有精品22| 第四色在线观看| 亚洲AV无码影院| 欧美婷婷| 五月天俺去也| 一起草性爱不卡视频| 深夜婷婷 丁香| 99 re视频一区| 白天AV月月| 91视频精品99| 国产AV一区二区三区日韩| 久久99大全| 成人羞羞啪啪 全 视频| 亭亭玉月丁香| 色色亚洲| 蜜臀99久久精品久久久久| 六月丁香激情综合网| 久久婷婷六月综合| 一本色道久久综合狠狠躁小说| 五月丁香狠狠爱婷婷综合| 日本一道久久| 六月丁香成人网| 97色色色色色| 激情五月瑟瑟| 天天日天天狠狠操| 天天综合精品| 婷婷五月天福利| 欧美日韩成人高清在线| 色婷五月丁香久亚洲| 五月婷婷深深爱| 逼特逼在线免费播放| 五月婷在线影院| 亚洲人人操BD| 五月丁香六月激情欧美综合| 五月婷婷精品视频| 日日干日日色| 丁香五月色五月| 一级操逼大片| 色综合久| 激情欧美丁香五月| 国产美女无遮挡裸体毛片A片| 亚洲色图啪啪| 丁香五月婷婷六月婷| 欧美五月婷婷| 爱穴久久| 久久黄色免费视频| 欧美色色色色色色色色色色| 五月婷婷久久大片| 91操熟女| 99久久网站| 这里只有精品96| 妇激情基地| 狠狠干婷婷| 成人.在线日韩| 五月婷婷免费在线| 99热这里只有精品青草| 久久婷婷午夜| 青青草性爱视频| 超碰人人操| 久久九九激情五月天 | 午夜少妇在线观看视频| 亚洲AV日韩无码| WWW.婷婷| 亚洲午夜成人av电影网| 18av天堂| 一级精品999WWW| 激情五月婷婷色色| 亚洲欧洲自拍图片专区五月天| 日本色道视频网站| 婷婷五月天久久综合88| 五月综合六月婷婷| 亚洲精品又粗又大又爽A片 | 天天干天天操天天拍| 一区三区视频有限公司| 婷婷六月色播| 99热在线观看| site:hcxsz888.com| 狠狠狠狠狠狠狠狠| 婷婷欠久少妇| 狠狠五月丁香色婷| 欧美日韩成人| 97色色婷婷五月天| 婷婷五月激情视频在线| 久久看九九90| 婷婷六月网| 日日干夜夜干| 大香蕉婷婷五月天| 九九热婷婷| 日韩情色在线观看| 婷婷五亚洲| 色五月天婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷 | 99热 在线播放| 婷婷亚洲色| 老美AA片| 狠狠操天天操综合| 天天日天天色| 久久五月婷| 婷婷五月天亚洲五码| 色五月美女| www国产亚洲色婷婷com| 风流少妇A片一区二区蜜桃| 综合欧美五月婷婷| 中文字幕成人| 丁香九月久久| 欧美日比视频| 丁香密臀AV激情网| 五日激情综合| 99资源人人| 亚洲婷婷免费| 婷婷色色色| 常久最新免费的色吊丝| 香蕉久操| 99热这里只有精品热| 国产精品第一国产精品| 人妻乱码久久久| 丁香五月天啪啪| 丁香五月天欧洲在线| 亚洲天堂色色| 99热r| 九九激情| 激情网五夜婷婷| 五月天色区| 丁香五月天激情网址| 777色色色| 色情五月天小说| 99精品在这里| 五月天婷婷色五月天| 丁香六月婷婷综合| 五月综合视频在线| 人妻久久久| 婷婷日| 精品亚洲国产成AV人片传媒| 伊人丁香花综合影院| 日本二级毛片二级毛片| 蜜桃五月天色| 亚洲精品无码A片一区二区| 色欲AV导航| 夜色爱爱亚洲| 99精品视频网| 在线观看996精品| 五月激情婷婷综合| 九九亚洲视频| 丁香六月婷婷色XXXXX| 婷婷久久欧美| 丁香婷婷色五月| 日日夜夜狠狠婷婷色| 精品夜夜澡人妻无码AV| 天天日夜夜草进麻麻的子宫| 激情涩播| 天天爽综合网| 71在线精品视频一区| 色色五月天网站| 婷婷久热| 大香蕉手机视频| 丁香开心深爱| www,99热在线观看| 26uuu亚洲| www.综合久久.com| 五月丁香婷婷综合网| 六月丁香激情综合网| 国产精品99久久久久久久女警| 天天摸天天高潮天天爽| 婷婷五月丁香色色| 五月天成人在线视频网站| 久久精品综合色| 色婷婷丁香五月天| 精品久久99码| 成人综合网站| 五月丁香婷婷开心| 伊人久久大香线蕉综合网站| 丁香五月影视| 婷婷六月激情小说网| 婷婷六月丁香欧美视频在线| 色五月婷婷操逼| 久久一热| 亚洲五月综合色播| 日本玖玖在线| 综合激情在线视频| 五月婷六月综合在线观看| 青青草国产亚洲精品久久| 久久人妻人人槡| 久久婷婷综合色丁香| 超碰大香蕉网| 激情五月婷婷欧美极品 | 婷婷五月久久| 久久婷婷五月综合| 久久综合五月天| 少妇性按摩无码中文A片| 五月丁香婷婷伊人| 五月丁香婷婷成人版| 久久99网| 操逼在线视频| 激情九九六月激情免费视频| 91碰碰碰| 天天射天天射一道本日本社区| 色婷婷AⅤ| 91五月天| 久热视频这里只有精品68| 五月丁香六月停停停| 9999三级片| 婷婷丁香五月天欧美| 久久日婷婷| 午夜亚洲国产精品av一区二区| 99'无码| 婷婷五月综合丁香久久| 婷婷四色五月| 激情五月综亚网| 超碰伊人碰婷婷五月| 五月婷婷综合视频| 亭亭社区五月天| 日韩操逼大片| 99只有精品| 五月六月婷| 久久婷婷六月| 中文婷婷狠狠| 啪啪啪综合网| 天天插天天| 夜夜躁婷婷AV| 国外亚洲成AV人片在线观看| 99re视频精品| 亚洲AV成人片无码网站| 久久婷婷综合五月| 色五月婷婷综合在线| 激情图片婷婷| 99伊人性爱在线影院| a网站免费观看| 五月天播播| 五月丁香色婷婷伊人| 色拍九九九| 99热这里有精品| 丁香五月婷婷色播艳门照| 97人人超| 果冻传媒A片一二三区| 9|无码久久久久久| 国产另类综合| 色情婷婷| 91美女啪啪| 久久久人妻| 丁香五月婷综合网| 久久五月婷婷电影| 色婷大香蕉| 狠狠操天天干| 久久激情五月| 天天综合天天做天天综合| 影音先锋偷偷色男人站| 亚洲成av人影院| 亚洲在线操| 婷婷丁香五月欧美人| 婷婷亚洲天堂| 天天艹| 婷婷九月| 激情久久久久久久久久久| 亚州视频九九99| 久久多色| 国内久久婷婷| 无码99| 激情六月天| 丁香五月激情澎湃一区| 一二线视频 另类| 天天爽免费视频| 五月丁色AV| 99热网址| www,setingting| 婷婷五月激情丁香| 丁香六月婷婷综合| 亚洲性色XXXXX| 日韩九九视频| 天堂综合久| 中文字幕丰满孑伦无码专区| 91九色国产| 婷婷色情六月| 久久99最新| 五月色网| 高清国产AV| 不卡在线超碰| 99热亚洲| 任你搞网站| 五月婷婷亞洲中文| 五月婷婷开心爱| 五月丁香六月婷综合成人综合| 色色色色色色色色色色色色色色,网站| 九九av| 久久九九爽| 丁香六月成人| 五月婷婷综合色啪首页| site:xiongshengzz.com| 婷婷丁香成人五月天| 国产激情一区| 中文字幕丰满孑伦无码专区| 狠狠色综合网| 高清无码网址| 天天日日夜夜爽。| 狠狠操天天操综合| 亚洲色色色色色色色色色| 激情视频91| 丁香五月天亚洲综合| 亚洲色就是色色色| 五月丁香网站| 激情五月天色色| 久久Xx| 日本色视| 激情九九综合网| 六月米奇色综合| 久久五月视频| 久9久9热久热| 九九色色色| 久草九九| 精品AV无码超碰| 亚洲色图欧美色图日本视频| 天天日天天插| 色噜噜狠狠一区二区三区| 亚洲99综合| 欧美啪啪9| 色婷婷亚洲五月天| 99热在线成人网站| 五月丁香婷婷激激激综合网色播| 欧美激情 日韩无码 婷婷 五月天| 久9久9久9久9久9久9| 国产日韩av片| 亚洲xx网| 9久热在线精品| 97超级免费无码| 欧美A片在线视频免费观看| 国产精品久久久久久久久久免费| 日韩中文欧美| 丁香六月激情综合| 激情五月天在线视频| 亚洲天堂久久| 99热日本| 97在线综合| 九月丁香婷婷综合| 999婷婷综合| 久久婷婷亚洲| 亚洲va成人va成人va在线观看| 色五月婷婷一二| 亚洲最大视频| 五月激情六月宗合| 五月天天天色| 婷婷五月另类网站| 婷婷五月天日本无码| 在热视频精品| 亚洲亚洲永久无码777777| 中文不卡一二区| 这里只有精彩亚洲视频推荐| 99思思热只有在这里看| 人妻在线中文字幕久久| 这里只有精品99www| 激情五月com| 99er6热在线观看精品6| 色情一区二区播放| av人人操| 狠狠干综合网| 激情五月,婷婷五月,丁香五月| 五月丁香啪啪伦理电影| 久久六月综合| 人妻久久久久久久| 五月激情综合网| 97视频.干com| 色婷丁香| 大香蕉啪啪啪| 婷婷五月天激情网| 五月天社区| 丰满少妇猛烈A片免费看观看 | 激情四射婷婷色色色| 97色永久免费视频| 九九aV| 丁香六月啪啪| 激情的五月婷婷蜜桃| \\五月天婷婷激情| 婷婷娱乐丁香综合网| 快色t v在线入口| 亚洲综合激情五月| 五月婷婷六月激情| 超碰人人91| 99综合在线| 日本三级韩三级99久久| 日本熟妇乱妇熟色A片蜜桃| 日日鲁鲁鲁夜夜爽爽狠狠视频97| 新激情婷婷| 婷婷五月六月丁香| 九九十99视频| 日韩啪啪网| 99热九九这里只有精品10| 婷婷五月激情欧美大胆视频| 婷婷五月噜噜| 天天影视天天爽天天草| 久久网日本| 亚洲操操| 九九Av| 九九爱激情| 色色婷婷婷丁香五月天| 五月婷婷色啪| 综合色色婷婷| oumeisesewang| 人人视频色| 成人va在线播放| 男女99免费视频| 亚洲人妻av伦理| 狠狠久久婷五月综合色| 日韩美女在线视频19| 大香蕉啪啪| 成人五月天在线视频在线观看 | 五月婷婷黄网站大全| 影音先锋 一区| 91精品婷婷国产综合久久| 久久99热这里| 蜜乳中文字| 欧美日韩成人高清在线| 亚洲成人网站在线观看| 国产精品色色| 强奸幻女毛片| 黄色片区子| 五月婷丁香久久久| 婷婷丁香激情综合色情| 九九色色网| 国产99久久久国产精品免费看| 欧美人人草草| 超碰电影在线播放| 欧美亚洲999| 五月第四色| 婷婷综合五月| 四LLL少妇BBBB槡BBBB| 日本天堂久久| 婷婷色五月激情| 人妻尝试久久久久久久久久久久| 婷婷激情小说| 婷婷五月成人| 久久久久久婷| 色婷久久| 丁香五月天av|