欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

基于RAG與GLM大模型的計算機考研408智能問答系統(tǒng)構(gòu)建實戰(zhàn)

基于RAG與GLM大模型的計算機考研408智能問答系統(tǒng)構(gòu)建實戰(zhàn) 簡介檢索增強生成RAG技術通過結(jié)合外部知識庫與大語言模型有效解決了模型的知識幻覺與信息過時問題提升了問答系統(tǒng)的準確性與可信度。其核心原理是將文檔向量化存儲并在回答時進行語義檢索確保生成內(nèi)容有據(jù)可依。在工程實踐中該技術特別適用于知識體系明確、答案要求嚴謹?shù)拇怪鳖I域如教育、客服與專業(yè)咨詢。本文以計算機考研408科目為例詳細闡述了如何利用智譜清言GLM大模型與Chroma向量數(shù)據(jù)庫從知識庫構(gòu)建、語義檢索到提示工程一步步實現(xiàn)一個能精準解答專業(yè)問題的智能助手為開發(fā)者提供了RAG技術落地的完整范例與調(diào)優(yōu)經(jīng)驗。1. 項目概述與核心價值最近在折騰一個挺有意思的東西一個專門給計算機考研408統(tǒng)考科目用的智能問答系統(tǒng)。起因很簡單身邊幾個學弟學妹在備考天天被數(shù)據(jù)結(jié)構(gòu)、操作系統(tǒng)、計算機組成原理、計算機網(wǎng)絡這四座大山折磨得夠嗆。他們最常抱怨的就是知識點太散題目一綜合就懵網(wǎng)上搜答案要么不精準要么解釋得云里霧里。市面上通用的AI助手比如直接問ChatGPT對于408這種有固定考綱、答案要求嚴謹?shù)念I域經(jīng)常會出現(xiàn)“一本正經(jīng)地胡說八道”的情況或者給出的解答過于寬泛不夠“應試”。所以我就想能不能用現(xiàn)在比較火的RAG檢索增強生成技術結(jié)合一個靠譜的大模型做一個垂直領域的“學霸助手”核心思路就是把海量的、高質(zhì)量的408考研資料教材、真題、權(quán)威講義、筆記先“喂”給系統(tǒng)讓它建立起一個專屬的知識庫。當用戶提問時系統(tǒng)不是讓大模型憑空想象而是先從這個知識庫里去精準地找到最相關的資料片段然后結(jié)合這些“證據(jù)”來生成答案。這樣既能保證答案的專業(yè)性和準確性又能針對具體問題給出緊扣考點的解答。我選擇了智譜清言的GLM大模型作為生成引擎主要是看中它在中文理解和推理上的穩(wěn)定表現(xiàn)以及API調(diào)用的便捷性。整個系統(tǒng)的骨架就是“RAG檢索增強生成”前端接收問題后端通過語義檢索從向量數(shù)據(jù)庫中撈取相關文檔拼接到提示詞里再調(diào)用GLM API生成最終答案。這聽起來可能有點技術化但說白了就是給大模型配了一個“超級參考書庫”和一位“精準的圖書管理員”確保它每次答題都有據(jù)可依。這個項目非常適合有一定Python基礎對AI應用開發(fā)感興趣的朋友特別是想深入理解RAG技術如何落地到具體場景的同學。它不只是一個玩具而是一個能真實解決痛點的工具原型。接下來我會把從零搭建這個系統(tǒng)的完整過程、踩過的坑、以及如何讓它真正“好用”的經(jīng)驗毫無保留地分享出來。2. 系統(tǒng)整體架構(gòu)與核心組件選型2.1 為什么選擇RAG架構(gòu)在決定做這個系統(tǒng)時我首先排除了兩種方案一是直接用大模型做“裸奔”問答二是訓練一個專門的微調(diào)模型。前者準確率無法保證后者則成本高昂且不靈活。RAG成了最理想的折中方案。RAG的核心優(yōu)勢在于“開卷考試”。對于408考研這種知識體系龐大但邊界相對清晰、答案有標準參考的領域讓模型擁有一個實時、可更新的“外部記憶”至關重要。它解決了大模型的幾個固有難題知識幻覺模型可能會編造不存在的概念或定理。RAG通過提供檢索到的真實文本來約束生成。知識過時大模型的訓練數(shù)據(jù)有截止日期而考研大綱和熱點每年可能有微調(diào)。RAG的知識庫可以隨時更新。長尾細節(jié)遺忘模型可能記不住某些冷門但重要的知識點比如某個特定年份真題的某個選項解析。RAG可以精準檢索出這些細節(jié)。我的系統(tǒng)架構(gòu)遵循經(jīng)典的RAG流水線主要包括四個核心環(huán)節(jié)文檔處理與向量化 - 向量存儲與檢索 - 提示工程與答案合成 - 前端交互。2.2 核心組件深度解析2.2.1 大模型API為什么是智譜清言GLM在眾多國產(chǎn)大模型API中我最終選擇了智譜清言主要基于以下幾點實戰(zhàn)考量中文優(yōu)化與邏輯推理能力GLM系列模型在中文文本處理、邏輯推理和代碼生成方面表現(xiàn)均衡且穩(wěn)定。對于408的題目尤其是涉及算法步驟、系統(tǒng)流程描述時需要模型有清晰的邏輯鏈條GLM在這方面滿足要求。API穩(wěn)定與成本可控智譜的API平臺文檔清晰提供了多種規(guī)格的模型如GLM-4、GLM-3-Turbo并且有明確的計費方式。對于個人項目或小規(guī)模應用其免費額度和性價比是重要的考慮因素。相比一些開源模型自建服務的運維復雜度使用成熟的API能讓我更專注于應用邏輯本身。上下文長度與函數(shù)調(diào)用GLM-4等模型支持足夠長的上下文如128K這對于RAG至關重要因為我們需要將檢索到的多個文檔片段可能很長連同問題一起送入模型。雖然本項目暫未用到但其函數(shù)調(diào)用能力也為未來擴展如連接計算器、畫圖工具留下了空間。注意API調(diào)用中的常見坑。在開發(fā)過程中我頻繁遇到幾種API錯誤這里提前預警api error: 400 the thinking_budget parameter must be a positive integer and...這是調(diào)用GLM-4等具備“思考”功能模型時可能出現(xiàn)的錯誤。thinking_budget參數(shù)控制模型的思考深度必須設置為正整數(shù)。如果不需要深度思考可以將其設為0或一個較小的值如128。在代碼中務必檢查這個參數(shù)的類型和值。api error: 400 this models maximum context length is...這是最常遇到的錯誤之一當你的提示詞系統(tǒng)指令用戶問題檢索到的文檔總長度超過了模型的最大上下文限制就會報此錯。解決方案1. 在檢索后對返回的文檔片段進行長度裁剪或智能摘要2. 選擇上下文更長的模型版本3. 優(yōu)化提示詞減少冗余。api error: 402 insufficient balance賬戶余額不足。智譜API需要充值記得在平臺查看用量和余額。transport failure for /api/...: http 403通常是API Key錯誤、沒有權(quán)限或請求頻率超限。檢查API Key是否正確以及是否有調(diào)用該接口的權(quán)限。2.2.2 向量數(shù)據(jù)庫Chroma的輕量之選向量數(shù)據(jù)庫是RAG的“記憶中樞”負責存儲文檔的向量嵌入Embedding并實現(xiàn)高速的相似性檢索。我選擇了ChromaDB一個開源且易用的向量數(shù)據(jù)庫。選型理由簡單易用Python原生Chroma的API設計非常Pythonic幾行代碼就能完成客戶端初始化、集合創(chuàng)建、數(shù)據(jù)插入和查詢非常適合快速原型開發(fā)。內(nèi)存/持久化模式靈活開發(fā)階段可以用persist_directory參數(shù)將數(shù)據(jù)持久化到磁盤避免每次重啟都要重新構(gòu)建向量庫。生產(chǎn)環(huán)境也可以部署為獨立的服務。與流行Embedding模型集成好它天然支持OpenAI、Sentence-Transformers等主流嵌入模型切換起來很方便。與Milvus、Pinecone等的對比Milvus功能更強大適合超大規(guī)模向量檢索但部署和運維相對復雜。Pinecone是完全托管的云服務省心但可能有成本。對于我這個“408知識庫”項目數(shù)據(jù)量在十萬級文檔塊以內(nèi)Chroma在性能和易用性上取得了最佳平衡。網(wǎng)上搜索“windows安裝向量數(shù)據(jù)庫milvus standalone安裝”也側(cè)面說明Milvus的安裝對新手有一定門檻。實操心得數(shù)據(jù)持久化。一定要在創(chuàng)建Chroma客戶端時指定persist_directory例如Chroma(persist_directory./chroma_db, embedding_functionembedding_function)。這樣當你添加新文檔后調(diào)用collection.persist()方法數(shù)據(jù)才會真正保存到磁盤。我一開始沒注意結(jié)果每次腳本跑完數(shù)據(jù)就丟了排查了好久。2.2.3 嵌入模型文本轉(zhuǎn)化為向量的關鍵嵌入模型負責將文本轉(zhuǎn)換為計算機可以理解的數(shù)值向量一組高維數(shù)字。檢索的本質(zhì)就是計算問題向量與知識庫中所有文檔向量之間的“距離”通常用余弦相似度找到最“近”的幾段。我選用的模型text-embedding-ada-002或Sentence-Transformers庫中的paraphrase-multilingual-MiniLM-L12-v2。初期/快速驗證可以使用OpenAI的嵌入模型效果穩(wěn)定但需付費且有速率限制。本地化/免費方案強烈推薦Sentence-Transformers。它提供了大量高質(zhì)量的開源嵌入模型特別是paraphrase-multilingual-MiniLM-L12-v2這個模型對多語言包括中文支持很好且完全免費可以離線運行。這對于處理中文為主的408資料至關重要。嵌入維度不同的模型產(chǎn)出不同維度的向量如384維、768維、1536維。這會影響向量數(shù)據(jù)庫的存儲和檢索效率但通常不需要我們深究只需確保構(gòu)建索引和查詢時使用同一個模型即可。3. 知識庫構(gòu)建從原始資料到向量數(shù)據(jù)庫這是整個系統(tǒng)最耗時但也最奠定基礎的一步。質(zhì)量不高的知識庫會導致后續(xù)檢索垃圾進、垃圾出。3.1 資料收集與預處理我的資料主要來源于王道、天勤等權(quán)威輔導書的電子版合法獲取、歷年408統(tǒng)考真題與解析PDF、各大高校的精品課程PPT、以及我自己整理的高頻考點筆記。預處理流程如下格式統(tǒng)一使用pdfplumber或PyMuPDF解析PDF使用python-docx處理Word將所有資料轉(zhuǎn)換為純文本。這一步會遇到格式混亂、分欄文本錯序等問題。避坑技巧對于掃描版PDF需要先用OCR工具如Tesseract或調(diào)用百度/騰訊的OCR API進行文字識別。對于解析后文本順序錯亂的問題可以嘗試不同的PDF解析庫或者根據(jù)坐標信息對文本塊進行排序。文本清洗去除無關的頁眉、頁腳、水印、網(wǎng)址。將全角字符轉(zhuǎn)換為半角如逗號、括號。規(guī)范化換行符將多個連續(xù)空白字符替換為單個空格??蛇x使用正則表達式移除特定的廣告或無關信息。文本分割Chunking這是至關重要的一步直接決定檢索精度。不能簡單按固定字符數(shù)切割那樣會割裂完整的知識點。策略采用遞歸分割法。優(yōu)先按自然段落\n\n分割。如果某個段落過長如超過500字再按句子分割符。等進行二次分割。同時要保證每個塊有適當?shù)拇笮∥以O定在200-500字之間太小則信息不完整太大則檢索會引入噪聲。重疊在塊與塊之間設置一個小的重疊區(qū)如50字。這能確保當一個知識點恰好被分割在兩個塊的邊界時檢索時仍有較大概率被覆蓋到避免信息丟失。元數(shù)據(jù)附加為每個文本塊附加元數(shù)據(jù)方便后續(xù)追溯和篩選。我附加的元數(shù)據(jù)包括source來源文件名、chapter章節(jié)名如果解析得出、page頁碼如果解析得出、type題型如“概念”、“真題”、“解析”。3.2 向量化與入庫預處理后我們得到了一系列干凈的文本塊列表。接下來就是將它們轉(zhuǎn)化為向量并存入ChromaDB。# 示例代碼使用Sentence-Transformers構(gòu)建向量庫 from sentence_transformers import SentenceTransformer import chromadb from chromadb.config import Settings # 1. 加載嵌入模型 embed_model SentenceTransformer(paraphrase-multilingual-MiniLM-L12-v2) # 2. 初始化Chroma客戶端并指定持久化目錄 chroma_client chromadb.PersistentClient(path./chroma_408_db) # 3. 創(chuàng)建或獲取一個集合collection類似于數(shù)據(jù)庫的表 collection chroma_client.get_or_create_collection( name408_knowledge_base, metadata{description: 計算機考研408知識向量庫} ) # 假設我們已經(jīng)有了清洗和分割好的文本塊列表 text_chunks 和對應的元數(shù)據(jù)列表 metadatas texts [chunk[text] for chunk in text_chunks] metadatas [chunk[metadata] for chunk in text_chunks] ids [fchunk_{i} for i in range(len(texts))] # 為每個塊生成唯一ID # 4. 生成嵌入向量 # 注意Chroma可以在add時自動調(diào)用嵌入函數(shù)但為了演示清晰這里先批量生成。 # 在實際大批量處理時建議使用Chroma的自動嵌入功能避免內(nèi)存溢出。 embeddings embed_model.encode(texts, show_progress_barTrue) # 5. 將數(shù)據(jù)添加到集合 collection.add( embeddingsembeddings.tolist(), # 轉(zhuǎn)換為list documentstexts, metadatasmetadatas, idsids ) print(f成功入庫 {len(texts)} 個文本塊。)關鍵參數(shù)與操作意圖path./chroma_408_db指定數(shù)據(jù)庫本地存儲路徑。之后重啟程序只需用同樣的路徑初始化客戶端就能加載已有數(shù)據(jù)。collection.add這是核心操作。我們一次性傳入了embeddings向量、documents原始文本、metadatas元數(shù)據(jù)、idsID。Chroma會建立索引支持快速檢索。批量處理與內(nèi)存如果資料庫非常大幾十萬個塊一次性生成所有向量并add可能會導致內(nèi)存不足。需要實現(xiàn)分批處理讀取一批文本 - 生成嵌入 - 入庫 - 清空內(nèi)存循環(huán)進行。4. 智能問答鏈路的實現(xiàn)細節(jié)知識庫準備好后就進入了系統(tǒng)的核心邏輯問答鏈路。當用戶提出一個問題系統(tǒng)如何運作4.1 檢索器如何找到最相關的資料檢索不是簡單的關鍵詞匹配而是語義搜索。我們計算用戶問題的向量然后在向量數(shù)據(jù)庫中尋找最相似的文本塊向量。def retrieve_relevant_docs(query, collection, embed_model, top_k5): 檢索與問題最相關的文檔。 :param query: 用戶問題 :param collection: ChromaDB集合對象 :param embed_model: 嵌入模型 :param top_k: 返回最相關的K個結(jié)果 :return: 相關文檔的列表 # 1. 將用戶問題轉(zhuǎn)化為向量 query_embedding embed_model.encode([query]).tolist()[0] # 2. 查詢向量數(shù)據(jù)庫 results collection.query( query_embeddings[query_embedding], n_resultstop_k, include[documents, metadatas, distances] # 指定返回的內(nèi)容 ) # 3. 整理結(jié)果 relevant_docs [] if results[documents]: for i, doc in enumerate(results[documents][0]): relevant_docs.append({ content: doc, metadata: results[metadatas][0][i], score: 1 - results[distances][0][i] # 將距離轉(zhuǎn)換為相似度分數(shù)假設使用余弦相似度 }) return relevant_docs檢索優(yōu)化技巧Top-K與分數(shù)閾值top_k不宜過大通常3-7個足夠??梢栽O置一個相似度分數(shù)閾值如0.7低于此閾值的文檔認為不相關不傳遞給大模型避免引入干擾信息。元數(shù)據(jù)過濾Chroma支持在查詢時進行元數(shù)據(jù)過濾。例如如果用戶明確問“關于2019年408真題第33題”我們可以在查詢中加入where{type: 真題解析}來縮小范圍提升精度和速度?;旌蠙z索除了語義檢索也可以結(jié)合關鍵詞檢索如BM25。例如先用關鍵詞快速篩選出一批候選文檔再對這批文檔進行語義相似度排序。這能更好地處理一些包含特定術語、縮寫的問題。4.2 提示工程如何讓大模型“好好說話”檢索到的文檔只是原材料如何組織成提示詞Prompt交給大模型決定了答案的質(zhì)量。這是RAG系統(tǒng)的“靈魂”。我的提示詞模板經(jīng)過多次迭代最終形成了一個比較穩(wěn)定的結(jié)構(gòu)你是一個專業(yè)的計算機考研408科目輔導專家。請嚴格根據(jù)以下提供的相關參考資料來回答問題。如果資料中沒有明確答案請如實告知“根據(jù)現(xiàn)有資料無法回答”不要編造信息。 用戶問題{user_question} 相關參考資料 {formatted_context} 請基于以上資料用清晰、準確、專業(yè)的中文回答用戶的問題。答案應緊扣408考綱邏輯嚴謹。如果是概念題請先給出定義再解釋如果是計算或算法題請分步驟解答。關鍵設計點角色設定明確告訴模型“你是什么”引導其輸出風格。指令清晰“嚴格根據(jù)以下提供的相關參考資料”是核心指令強制模型以檢索到的內(nèi)容為基準抑制幻覺。格式化上下文{formatted_context}需要將檢索到的多個文檔塊清晰、無重復地組織起來。我通常用分隔符---隔開每個塊并在開頭注明來源例如[來源《操作系統(tǒng)概念》第7章 頁碼205] 進程是正在執(zhí)行的程序?qū)嵗?。它包括程序代碼、當前活動通過程序計數(shù)器和寄存器的內(nèi)容表示以及相關資源... --- [來源2018年408真題解析] 題目下列關于進程和線程的描述中錯誤的是... 解析線程是CPU調(diào)度的基本單位進程是資源分配的基本單位...這樣有助于模型區(qū)分不同來源的信息并在答案中需要時進行引用雖然當前提示詞未要求引用但結(jié)構(gòu)清晰有利于模型理解。安全兜底“如果資料中沒有明確答案請如實告知...” 這句話非常重要是防止模型胡編亂造的最后一道防線。輸出格式引導最后一句對答案格式做了引導使答案更符合“應試輔導”的預期。4.3 生成與后處理調(diào)用API與答案優(yōu)化有了精心構(gòu)造的提示詞就可以調(diào)用智譜清言的API了。import zhipuai # 需要先安裝zhipuai庫并配置API Key from zhipuai import ZhipuAI def generate_answer_with_glm(prompt, modelglm-4): 調(diào)用智譜GLM API生成答案。 client ZhipuAI(api_keyyour_api_key_here) # 替換為你的API Key try: response client.chat.completions.create( modelmodel, messages[ {role: user, content: prompt} ], temperature0.1, # 溫度設低保證答案確定性高 top_p0.7, # 如果使用GLM-4且需要思考鏈可以設置 thinking_budget例如 # thinking_budget512, max_tokens2000 # 根據(jù)答案長度預期設置 ) return response.choices[0].message.content except Exception as e: # 這里需要處理前面提到的各種API錯誤 if maximum context length in str(e): return 錯誤輸入內(nèi)容過長請嘗試簡化您的問題。 elif thinking_budget in str(e): return 錯誤思考預算參數(shù)設置不正確。 elif insufficient balance in str(e): return 錯誤API余額不足。 else: return f調(diào)用模型API時發(fā)生錯誤{e}參數(shù)調(diào)優(yōu)心得temperature強烈建議設置為0.1-0.3之間。對于知識問答我們需要的是準確、確定的答案而不是創(chuàng)造性。低溫度值能減少模型“瞎編”的概率。max_tokens根據(jù)你的提示詞長度和預期答案長度來設置。408的答案通常不會特別長2000一般足夠。設置太小會導致答案被截斷。錯誤處理必須對API調(diào)用進行完善的異常捕獲和用戶友好的錯誤提示。將技術性錯誤如上下文過長、余額不足轉(zhuǎn)化為用戶能理解的信息。后處理生成的答案有時會包含一些多余的禮貌用語或格式標記。可以寫一個簡單的后處理函數(shù)去除答案開頭結(jié)尾的“根據(jù)資料...”、“綜上所述...”等套話讓答案更精煉。但要注意不要破壞答案的核心內(nèi)容。5. 系統(tǒng)集成與前端交互后端邏輯完成后需要提供一個界面給用戶使用。為了快速驗證我選擇了用Gradio構(gòu)建一個簡單的Web界面。Gradio非常適合機器學習項目的演示幾行代碼就能生成一個交互式UI。import gradio as gr from retrieval import retrieve_relevant_docs # 假設檢索函數(shù)在此模塊 from generation import generate_answer_with_glm # 假設生成函數(shù)在此模塊 from embedding import get_embed_model_and_collection # 假設加載模型和數(shù)據(jù)庫的函數(shù) # 初始化組件在實際應用中應考慮單例模式避免重復加載 embed_model, collection get_embed_model_and_collection() def answer_question(question, history): Gradio聊天接口的回調(diào)函數(shù)。 # 1. 檢索 relevant_docs retrieve_relevant_docs(question, collection, embed_model, top_k4) if not relevant_docs: return 未在知識庫中找到相關信息。請嘗試換一種問法或確認問題是否在408考綱內(nèi)。 # 2. 構(gòu)建上下文 context_parts [] for doc in relevant_docs: source_info doc[metadata].get(source, 未知來源) context_parts.append(f[來源{source_info}]\n{doc[content]}) formatted_context \n---\n.join(context_parts) # 3. 構(gòu)建提示詞 prompt f你是一個專業(yè)的計算機考研408科目輔導專家。請嚴格根據(jù)以下提供的相關參考資料來回答問題。如果資料中沒有明確答案請如實告知“根據(jù)現(xiàn)有資料無法回答”不要編造信息。 用戶問題{question} 相關參考資料 {formatted_context} 請基于以上資料用清晰、準確、專業(yè)的中文回答用戶的問題。答案應緊扣408考綱邏輯嚴謹。 # 4. 生成 answer generate_answer_with_glm(prompt) # 5. 返回Gradio ChatInterface期望返回 (question, answer) 對 return answer # 構(gòu)建Gradio界面 demo gr.ChatInterface( fnanswer_question, title408考研智能問答助手, description請輸入關于計算機專業(yè)考研408科目數(shù)據(jù)結(jié)構(gòu)、操作系統(tǒng)、計算機組成原理、計算機網(wǎng)絡的問題。, examples[什么是虛擬內(nèi)存, 簡述TCP三次握手的過程。, 2019年408真題第33題的答案是什么], cache_examplesFalse # 對于實時檢索不建議緩存例子 ) if __name__ __main__: demo.launch(shareFalse, server_name0.0.0.0, server_port7860)這個界面提供了一個聊天框用戶可以直接提問。examples參數(shù)提供了一些示例問題方便用戶快速了解系統(tǒng)能力。啟動后在瀏覽器打開http://localhost:7860即可使用。部署考慮對于個人使用或小范圍分享Gradio的launch(shareTrue)可以生成一個臨時公網(wǎng)鏈接。如需長期服務可以考慮將后端封裝為FastAPI接口前端用更成熟的框架如Vue/React重寫并部署到云服務器。6. 效果評估、迭代與常見問題排查系統(tǒng)跑起來只是第一步更重要的是讓它“跑得好”。我設計了一套評估和迭代的方法。6.1 如何評估問答效果不能只靠感覺需要有一些可量化的評估方式人工評測黃金標準構(gòu)建一個測試集包含50-100個覆蓋不同知識點和題型的問題并準備好標準答案或參考答案。讓系統(tǒng)回答然后從以下幾個維度人工評分1-5分相關性答案是否直接針對問題準確性答案中的事實、概念、數(shù)據(jù)是否正確完整性是否涵蓋了問題的所有要點清晰度表述是否清晰易懂邏輯是否通順檢索質(zhì)量評估在人工評測時同時觀察系統(tǒng)檢索到的文檔。評估檢索到的文檔是否真的與問題相關是否是回答問題的關鍵依據(jù)?!盎糜X”率統(tǒng)計記錄系統(tǒng)在測試集中“編造”信息即答案中的關鍵點無法在提供的參考資料中找到依據(jù)的次數(shù)。6.2 迭代優(yōu)化方向根據(jù)評估結(jié)果可以從以下幾個環(huán)節(jié)進行優(yōu)化知識庫層面擴充資料增加缺失知識點的資料。優(yōu)化分割如果發(fā)現(xiàn)檢索到的文檔總是首尾不全調(diào)整分割策略如增大塊大小或重疊區(qū)。清洗增強對質(zhì)量不高的原始文本如OCR錯誤多的進行二次校對和清洗。檢索層面調(diào)整檢索數(shù)量top_k值。嘗試重排序在初步檢索出Top N個文檔后使用一個更精細的模型如交叉編碼器對它們進行重排序?qū)⒆钕嚓P的一兩個放在前面提升上下文質(zhì)量。引入元數(shù)據(jù)過濾讓用戶在前端可以選擇問題類型概念、真題、計算后端根據(jù)類型過濾提升精度。提示工程層面迭代提示詞這是成本最低的優(yōu)化方式。嘗試不同的角色設定、指令措辭、上下文格式觀察對答案質(zhì)量的影響。例如加入“請分點論述”、“請對比兩者的區(qū)別”等具體指令。少樣本提示在提示詞中提供一兩個高質(zhì)量的問答示例引導模型模仿格式和風格。6.3 常見問題與排查清單在實際開發(fā)和測試中我遇到了不少問題這里總結(jié)一個排查清單問題現(xiàn)象可能原因解決方案答案完全胡編亂造與資料無關1. 檢索失敗返回空或完全不相關的文檔。2. 提示詞未強制要求“根據(jù)資料”。3. 模型溫度(temperature)設置過高。1. 檢查檢索函數(shù)打印出檢索到的文檔內(nèi)容看是否相關。檢查嵌入模型是否匹配。2. 強化提示詞中的指令如“必須嚴格依據(jù)以下資料”。3. 將temperature降至0.2以下。答案部分正確部分“幻覺”1. 檢索到的資料不完整或包含錯誤信息。2. 上下文過長模型未能有效關注全部關鍵信息。3. 不同資料片段之間存在矛盾模型混淆。1. 優(yōu)化知識庫質(zhì)量清理錯誤資料。2. 減少top_k或?qū)z索到的文檔進行摘要濃縮后再輸入。3. 在提示詞中要求模型“如果資料間有沖突以[某權(quán)威來源]為準”。答案總是說“資料中未找到”1. 檢索閾值設置過高相關文檔被過濾。2. 知識庫確實缺乏該問題對應的資料。3. 用戶問題表述與資料表述差異太大語義鴻溝。1. 降低相似度分數(shù)閾值或增加top_k。2. 擴充知識庫。3. 嘗試對用戶問題進行查詢擴展如提取關鍵詞的同義詞、相關術語一并搜索。響應速度很慢1. 向量數(shù)據(jù)庫檢索慢數(shù)據(jù)量大時。2. 大模型API調(diào)用網(wǎng)絡延遲高。3. 嵌入模型在CPU上運行慢。1. 為ChromaDB創(chuàng)建索引如果支持或考慮升級硬件/使用云服務。2. 檢查網(wǎng)絡或考慮使用API的流式響應以提升感知速度。3. 如果有GPU將Sentence-Transformers模型加載到GPU上。遇到api error: 400 maximum context length提示詞系統(tǒng)指令用戶問題檢索文檔總長度超過模型限制。1. 減少top_k減少輸入文檔數(shù)量。2. 對檢索到的文檔進行摘要或截斷如只取前N個字符。3. 換用上下文更長的模型。一個高級技巧查詢理解與重寫。用戶的問題可能很口語化如“學不動了頁表是干啥的”而知識庫中的文檔是書面語??梢栽跈z索前先用大模型對用戶問題進行一輪“重寫”將其改寫成更規(guī)范、更利于檢索的學術性問題如“請解釋頁表的概念及其在虛擬內(nèi)存管理中的作用”再將重寫后的問題用于向量檢索能顯著提升檢索命中率。這相當于增加了一個“問題理解”的預處理層。7. 項目總結(jié)與未來展望構(gòu)建這個系統(tǒng)的過程是一個典型的將前沿AI技術RAG大模型應用于垂直領域解決實際問題的工程實踐。它不是一個炫技的demo而是一個真正能產(chǎn)生價值的工具。通過它我深刻體會到在AI應用開發(fā)中數(shù)據(jù)和流程的工程優(yōu)化其重要性往往不亞于模型本身。一個精心構(gòu)建的知識庫和一條設計合理的RAG流水線比單純追求更龐大的模型更能帶來質(zhì)的提升。這個系統(tǒng)目前已經(jīng)能相當可靠地回答大多數(shù)408的概念性、原理性和真題解析類問題。但它還有很大的進化空間多模態(tài)擴展408中有很多圖比如數(shù)據(jù)結(jié)構(gòu)中的樹、圖組成原理中的CPU流水線。未來可以考慮接入多模態(tài)大模型支持用戶上傳圖表提問或者讓系統(tǒng)在答案中生成示意圖。復雜推理與解題對于復雜的算法設計題或綜合應用題當前系統(tǒng)可能只能提供思路或知識點提示??梢蕴剿鞲鼜碗s的Agent框架讓模型能夠調(diào)用代碼執(zhí)行器進行模擬計算或者進行多步驟的推理鏈Chain-of-Thought。個性化學習路徑記錄用戶的提問歷史和知識盲點利用向量數(shù)據(jù)庫存儲用戶畫像從而推薦個性化的復習重點和習題向一個真正的“AI導師”邁進。開源與社區(qū)共建最理想的狀態(tài)是將這個系統(tǒng)開源并設計一個貢獻機制讓廣大考研學子可以共同維護和豐富這個408知識庫使其成為一個持續(xù)更新的、活的社區(qū)知識資產(chǎn)。技術永遠是為需求服務的。這個項目的起點是一個具體的學業(yè)痛點而RAG技術提供了恰到好處的解決方案。對于想要入門AI應用開發(fā)的朋友我強烈建議從這樣一個有明確邊界、有真實數(shù)據(jù)、有檢驗標準的垂直場景項目開始。你會遇到無數(shù)細節(jié)上的挑戰(zhàn)但每解決一個你對整個技術棧的理解就會加深一層。這個過程遠比單純調(diào)參跑分要有趣和充實得多。本文還有配套的精品資源點擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
99人人看| 九月婷婷人人操人人舔人人爱| 激情综合在线观看| 五月婷婷|欧美| 玖玖热视频| 婷婷色基地| 天天摸夜夜爽天天做| 99在线69| xxx综合在线| 99久在线精品| 99热精品在线播放观看| 色青五月天| 久久一热| www.av视频xx999.com| 日本激情五月| 亚洲天堂色色| 亚洲愉拍99热成人精品| 综合色播| 538在线| 好吊操这里只有精品| www超碰| 香蕉久久国产AV一区二区| 日韩一级片| 亚洲色久| 色情五月天首页| 99精在线| 噜噜噜噜噜日本视频| 99热精地址| 中文字幕不卡网站| 97人妻碰碰中文无码久热丝袜| 99热大全在线观看| 日本精品人妻无码77777| 99riav 亚洲| 中文在线视频久9| 色婷婷香蕉| 丁香五月婷婷在线视频| 九九视频在线观看| 久久久五月天网站| 五月丁香六月激情综合在线| 久久久18| 99在线爽| 色七七九九| 久久久久久五月天| 五月停停色色丁香| 天天干天天做| 久久sp免费视频| 亚洲综合婷婷| 夜色.cnm| 久久ab| 操人久久| 99热这里只有精品9| 丁香婷婷基地| 综合激情五月天六月婷免费视频| 国产这里只有精品| 五月丁香婷婷啪啪网| 丁香六月天婷婷色| 午夜不卡久久精品无码免费| 色婷五月| 丁香五月婷婷社区| 女力报到正好爱上你| 亚洲电影在线观看| 小视频在线亚洲| 六月丁香婷| 久久婷婷东京热大香樵| 成人av免费观看| 色碰碰| 99ri在线观看视频| 亚洲综合婷婷| 成人婷婷| 嫩草极品| 色五月婷婷五月天| 色播五月| 久久er免费视频| 乱精品一区字幕二区| 丁香五月自拍| 99综合色色色| 狠狠草在线观看| 久久久久9| av在线资源| 婷婷五月丁香色情| 人人干人人干骚美女| 九九综合网色全集| 亚洲视频在线网站| 国产亚洲99久久精品| 亚洲综合字幕色色| 少妇婷婷五月天| 色色色综合| 丁香五月婷婷天| 99男人天堂| 五月婷婷五月天| 婷婷久久草| 人妻操操色| 大香蕉婷婷丁香天堂AV| 中文字幕性爱视频| 一本到不卡高清DVD| 色婷婷电影网| 丁香五月性爱| 精品人妻伦九区久久AAA片| 影音 五月 婷婷 久久| 丁香激情五月| 中国女人做爰A片| 人人九色| 激情丁香五月婷婷| 激情久久久| 日本WWW九九九| 亚洲开心激情网| 亚洲色色色色| 婷婷久久18| 无码激情AAAAA片-区区| 五月天成人综合| 九九热在线精品视频| 久久丁香| 99年操人人爽| 色伊人啪| 久热这里只有精品在线观看 | 99re26视频| 超碰在线观看9| 天天日夜夜高潮| 91AV视频| 91919191919久久成人视频| 天天爽天天| 亚洲色涩视频| 久久伊人9| 欧美成人AAA片一区国产精品 | 精品无码人妻一区| 婷婷在线观看五月天在线视频| 久久精品99久久久久久久久| 亚洲色图五月丁香五月婷婷| 人人草成人视频| 色无婷婷| 天天爱天天天射AV| 亚洲午夜国产成人电影VA国产欧…| 久久综合影院 | 玖玖色资源站| 天天艹天天综合网| 五月丁香成人日| 婷婷色丁香五月| 婷婷综合97| 色五月97| 国产精品大香蕉| 九色视频91疯狂| 91亚洲天堂| 97人人操| 日本色色图| 97色婷婷成人综合在线观看| 综合玖玖性爱免费视频| 91操碰| 操九色| 六月丁香综合| 久热99| 激情五月综合网丁| 人妻激情视频| 激情五月天黄色小说| 色综合网上班开心婷婷久久| 亚洲美女婷婷五月天| 成人五月天在线视频在线观看| 五月丁香婷婷色| 狠狠操天天操天天操| 激情五月六月婷婷综合啪啪| 啪到高潮激情丁香五月| 任你爽精品免费视频6| www,com,五月色色| 99ri视频| 亚洲综合网激情五月天| 久久精品这里只有精品免费首页| 五月婷性爱| 91无码高清| 久久五月婷婷电影| www夜夜操com| 性生生活大片又黄又| 久久久亚洲精品一区二区三区浴池| 天天干天干| 97在线观视频免费观看| www.91在线观看| 天天综合情| 丁香网五月天激情| A久久| 亚洲精品网址| 丁香五月六月婷婷怡红院| 超碰人人色| 综合久久十三| av在线观看免费| 91一起操| 欧美日韩五月婷婷| 十一月婷婷激情四射| 九月婷婷综合| 4399在线观看免费高清黄色视频| 五月天激情国产综合AV| 99热在线观看精品| 视频一区二区在线| 天干天天干天天天天天| 激情五月久久| 日本系列_4页_777FP| 五月丁香六月婷婷亚洲综合| 538在线精品| 激情五月丁香色色去久久| 26uu| 色色色网站| 丁香九月婷婷| va中文资源在线观看| 五月婷婷激情综合| 九九九午夜视频| 99色热视频| 五月婷婷六月丁香综合在线| 国产操碰| 五月丁香激情综合啪啪| 丁香激情综合| 婷婷五月天com| 欧美日韩一区二区三区四区| WWW、日本色丁香、co m| 五月丁香六月激情综合| 色99无码| 丁香九月综合激情| 久久东京热婷婷五月| 久久婷婷五月丁香网| 综合网啪| 亚洲色啪| 激情网战码亚洲A| 五月激情网五月综合网| 啪啪啪丁香五月| 久草xx性爱视频| 久久R激情| 久久99这里只有精品| 亚洲av骚货| 深爱婷婷基地| 视频一区二区在线| 色播六月| 天天碰天天插天天操| 狠狠婷婷综合| 精品色色| 99精品视频在线| 31色区视频免费看| 五月天开心网| 五月婷婷这里都是精品| 操碰久| 婷婷激情社区| 丁香五月成人自拍| 丁香六月啪啪| 97综合在线| 亚洲综合色丁香婷婷六月| 99热黄| 五月 成人 婷婷| 日本欧特黄色刺激一区影视久精品无码| 激情文学五月丁香六月婷婷| 五月婷婷色影院| 91viP在线看| 99re热精品在线视频| AA片在线观看视频在线播放| 任你爽精品免费视频6| 六月色婷婷色| 91丁香| 国产精品国产成人国产三级| 99riAV国产精品视频| 91碰碰| 婷婷99狠狠躁天天久久久九九九| 激情色色色| 狠狠大香婷婷爱| 九月av| 欧美婷婷色| 91色色色| 五月综合婷婷五月| 天天色天天爱天天爱天天爱y| 久久99综合| 丁香五月婷婷激情中文| 在线18av | www99热| 欧美人人操| 久久美女五月天| 五月婷婷之综合激情| 伊人婷婷色激情丁香| 玖玖精品资源| 五月天影院| 五月丁香六月情婷婷久久| 2014天天爽| 九热视频在线精品15| 婷婷五月骚厕所| 婷婷欧美色| 欧美大香蕉视频| 操逼视频网址| 99爱在线| 91精品91久久久中77777久久玖玖九九 | 激情深爱五月天| 怡红院视频| 亚洲亚洲永久无码777777| 亚洲精品乱码久久久久久按摩观| 99热日| 亚洲av免费在线| 五月婷婷色综图片| 婷婷五月天堂| 思思热再线视频| 五月天婷婷乱论小说| 婷婷久久五月天丁香| 丁香av网| 五月香蕉婷婷| 开心 五月 综合| 五月天婷五月天综合网在线观| 天天插天天狠| 午夜成人天堂久久无码日韩久久| 香蕉久久国产AV一区二区| 欧洲亚洲精品| 9久9久9久女女女九九九一九| 九色在线观看91av| 开心深爱五月天| 深爱五月最新网址| 久久婷婷丁香| 欧美婷婷丁香社区在线播放| 婷婷五月香蕉| 激情五月天激情五月天| 人人爱操| 久热精品9999| 九九色情网五月天| 99久热| 天天草比天天爽| 噜噜五月天综合| 五月婷婷色| 婷婷 伊人 久久| 五月丁香婷婷婷婷综合网| 五月天婷婷爱| www.色婷婷| 偷拍91九色| 国产婷婷五月天| 久久久噜噜噜久久人妻| 免费在线观看av网站| 99九九在线精品热动漫| 五月色综合网| 综合网精品99| 天天色综合色色色色色。| 色99网| 色婷婷网大全在线| 69堂午夜视频最新地址| www热久久yy9| 久久人妻少妇嫩草AV| 91九色中文| 国产精品久久久丁香五月八戒视频| 五月婷婷丁香六月| 超碰伊人碰婷婷五月| 五月丁香六月婷婷手机无线| 97碰碰叉| 激情美女五月天激情在线| 99激情视频| 久大香蕉| 99久在线观看| 99热99在线| 天天综合网站| 激情黄色小说色五月| 五月丁香六月婷婷网| 色碰97| 九九视频在线观看| 天天操五月天| 丁香六月在线| 五月婷婷天天色| 这里只有精品视频看看| 色五月婷婷五月天激情综合| 久久综合爱| 久久综合网免费视频| 日本操碰碰| site:hcxsz888.com| 色约约视频一区二区三区四区五区| 亚洲午夜AV| 伊人午夜综合色啪| 五月丁香怕怕综合| 青青草tp| 超碰爱爱爱| 亚洲V国产V欧美V久久久久久| 综合网啪| 久久婷婷五月综合伊人| 91综合在线| ww超碰在线| 久草热8精品视频在线观看| 婷婷五月天基地| 五月婷婷成人w| 狠狠人妻色综合| 久久99激情五月天| 国产精产国品一二三在观看 | 国产精品色色色色| 噜一噜免费视频| 婷婷成人在线| 97成人在线视频| 激情五月天网站| 亚洲天堂爱爱| 殴美综合激情五月天免费视频| 天天摸日日舔狠狠添婷婷婷| 日本三级大片| 色五月超碰| 久久五月天丁香花| 国产99久9在线+|+传媒| 国产亚洲精品久久久久苍井松 | www.夜夜| 天天操婷婷| 激情爱爱网站| 99爱视频| 丁香婷婷激情| 操一操干一干| 五月天激情电影| 五月丁香婷婷激情| 桃色激情婷婷伊人网| 婷婷五月天AV| 99综合视频| 精品99在线看| 一本久道综合99| 黄色AAAAAAA| 婷婷综合性爱网| 九九色色| 啪啪啪综合网| 九九热免费视频| 久热这里只有精品6| 99久在线观看| 六月婷婷av| 在线观看亚洲AV| 亚洲国产99| 天天爽天天摸天天爱| 五月综合六月婷婷| cc精品国产性传播| 亚洲成人婷婷| 五月丁香成人小说| 操逼三区| 9久精品| 九月婷婷久久久| 超碰成人在线观看| 泰州成人视频| 日韩欧美一级大黄网站| 婷婷激情在线| 91久久婷婷| 少妇高潮一区二区三区99欧美| 日本在线视频www色| 五月停亭六月,六月停亭的英语| 99九九综合久久九九| 婷婷五月大香蕉| 久久多色| 夜夜 操无码| 影音先锋色色色资源色资源色| 五月丁香婷婷综合| 色五月婷婷天天干| 激情网开心网| 看久久性爱视频| 欧美丁香婷婷五月天| 五月天啪啪啪| 九色视频91| 丁香五月婷婷网| 黄桃AV无码免费一区二区三区| 疯狂做受XXXX高潮A片动画| 少妇被下春药玩弄A片| 婷色五月天| 日日鲁鲁鲁夜夜爽爽狠狠视频97| 丁香色色五月| 91色九| 91超碰在线观看| 久久这里只有精彩| 五月综合精品| 热99在线精品| 丁香婷婷色五月激情综合| 爱射综合| 开心五月深爱五月丁香五月激情五月| 99在线观看精品视频| 伊人婷婷大香蕉| 婷婷六月色| 超碰碰碰碰| 日本eVa一区=区视频| 超碰99热在线观看| 综合亚洲六月婷婷在线| 狠狠干 狠狠操| 十一月婷婷激情四射| 色欲av伊人久久大香线蕉影院| 色婷五月| www.婷婷激情网.com| 99久在线精品99re5热视频| 国产 亚洲 在线| peg 2区三区四区的| 99热国产在线| 狠狠操狠狠爱| 超碰操日| 日本操片| 丁香五月狠狠综合欧美| 丁香 久久| 天天操婷婷| 丁香婷婷AV| 99人人操人人爱久久久| 日日色五月天| 97精品自拍视频| 色婷婷视频| 五月色丁香婷婷综合| 九九AV在线| 五月天婷婷色播在线网| 激情综合啪啪| 97操碰免费视频| 超碰免费成人| 婷婷开心激情五月激情网| 91人妻人人做人碰人人爽九色| 天天插综合在线| 狠狠色综合久久久久| 久久综合性| 九九爱激情| 成人Av在线大片| 玩熟女五十AV一二三区| 久久婷网| 五月色导航| 久色| 成人做爰高潮A片免费视频| 中文字幕性爱视频| 提提热五月天婷婷| 91丨九色丨国产打屁股| 婷婷综合干| 99热无码精品| 99热国产精品| 亚洲乱啪| 五月婷婷在线网站| 99视频在线精品| 五月丁香九九| 婷婷激情五月天小说| www.婷婷| 婷婷丁香六月| 狠狠噪| 天天爽夜夜爽夜夜爽精品| 久久ab| 性做久久久久久久免费看| 婷婷中文无码| 五月丁香啪啪| avh片在线观看| 五月天婷婷久久日| 婷婷五月天中文字幕| 亚洲A片成人无码久久精品青桔| 超碰成人在线观看| 99精彩视频| av婷婷六月丁香社区在线观看| 性爱先锋AV| 久久最新色| 99精品视频播放| 欧美婷婷五月无砖| 日本狠狠色| 色婷婷9| 五月婷婷自拍视频| 国外亚洲成AV人片在线观看| 九九国产精视频| 亚洲AV网址| 国精产品一区二区三区| 婷婷噜噜| 婷婷五月天亚洲综合网| 678五月丁香亚洲综合| 丁香桃色网| 五月婷婷九| 色色色色色色色色色色色色色色,网站| 三人荫蒂添的好舒服A片| 99视频内射三四| 综合激情在线| 午夜成人综合| 中文AV在线播放| 丁香五月黄色| 九九无码| 日韩AV在线免费| 婷婷六月色播| 久9草在线观看视频| 婷婷色爱| 99久久終合| 久久日曰| 久久色五月天激情小说| 另类亚洲电影| 俺去啦综合网| 五月天影院婷婷在线观看| 激情五月天com| 99热免费| 人人爽在线视频综合网| 国产67194| 日本久久网| 99热精品中文字幕| 欧美日韩AAAAA| 天天爽天天爽| 亚洲av综合网| 99爱在线精品视频免费观看| 成人精品人妻| 亚洲色五月| wWwCom夜操wwW| 五月婷婷综合在线| 丁香五月亚洲无码| 亚洲黄网在线| 中文字幕 中文字幕明步| 九色激情网| 九九综合色| 五月天婷婷综合久久| 激情婷婷| 五月综合激情视频| 99热久久日本| 超碰在线精品| 久婷婷五月丁香在线观看| 色婷婷综合视频| 丁香五月天欧美| 久久婷婷午夜| 噜一噜在线| 久久久99久久| 精品无码久久久久久久久| 91啪级电影| 九九爱精品网站| 欧美25p| 亚洲天99| AV中文在线| 婷婷狠狠五月综合| 99久久精彩视频| 成人网在线视频| 欧美在线操| 婷婷五月中文在线| 婷久久久| 色99在线视频| 狠狠色婷婷丁香六月| 久久丁香综合精品综合| 91婷婷丁香五月| AV在线观看网站| 99热这里只有精品2| 天天激情夜夜干| 中文字幕在线人妻| 国产 码在线成人网站| 五月婷婷香蕉| 色婷成人狠干| 国产这里只有精品| 2025色婷婷| 九九99在线免费在线观看视频| 麻豆AV一区二区三区| 裸体美女丁香五月天。| 日韩中文欧美| 九 九九九AV| 香蕉综合网| 天天精品视频在线观看视频| 99久久婷| 久久九九Com| 九色91视频| 这里只有精品热| 99小视频在线观看| 激情五月天婷婷| 五月丁香六月婷婷欧美综合| 伦乱美欧| 噜噜色五月| 熟妇内谢69XXXXXA片| 婷婷开心久久| 六月丁香视频网站| 99热九九在线| 老师高潮流白浆喷水的A片| 久久东京热婷婷五月| 另类婷婷丁香| 97精品欧美91久久久久久久| 91a片爽| 热99在线| 婷婷五月天色播| 婷婷伊在线| 99热很操老逼| 精品香蕉99久久久久网站| 无码动漫av| 亚洲性图一区二区| 亚洲九区| 色色日本欧美| 日本波多野结衣视频| 婷婷五月激情小说| 五月天婷综合| 狠狠操狠狠操| 伊人深爱综合| 免费日韩99| 99毛片| 二区成人视频| 97在线99| 丁香九月激情| 俺也去婷婷五月天第五色| 99色日本| 五月色婷婷夜色| 色五月激情五月| 这里只有精品2| 五月婷婷五月色| 丁香六月婷婷姐网| 五月天色婷婷视频| 思思热闹这里只有精品| 九九九九综合| 色五月婷婷1| 91女人18毛片水多国产| 99免费超碰在线| 五月开心久久| 久机视频这只有精品| 色五月婷婷影院| 色色网五月激情| 五月天激情偷拍| 色呦呦免费观看| 182TV大香蕉| 综合久久综合综合| 97婷婷久久丁香| 色五月色综合| 大香蕉 婷婷| 无遮挡国产高潮视频免费观看| 丁香色婷婷五月天| 五月天久久婷婷| 中文字幕激情综合| 色爽九九| 天天综合 99久久婷婷| 九九视频在线观看| 99视频精品在线| 开心网五月色婷婷| 五月丁香六月色| 丁香五月播播| 色五月婷婷小说亚洲中文字幕组| 婷婷天天日婷婷| 成人超碰Av| 丁香综合网| 欧洲免费视频色| 激情啪啪五月天| 六月婷婷俺也去| 成人必爱视| WWW色综合| 狠狠香婷婷五月| 再次出发二| 婷婷丁香成人在线视频| 久草五月天电影网| 丁香五月天天高清在线| 99日这里只有精品| 婷婷基地爱| 九九久久网| 狠狠色成人影片| 日韩在线视频中文字幕| 色婷婷狠| AV成人在线播放| 激情久久久久久| 婷婷五月天丁香| 色情五月丁香婷婷网| 天天激情视频| 九九精品视频在线6| 五月亭亭六月天| 九九性爱网| 123草逼网| 色色色色五月| 精品一二三区久久AAA片| 电影91久久久| 久久天堂色| 久久伦乱| 少妇日麻屄| 婷婷深爱五月天在线| 天天做天天爱天天要| av在线免费网站| 婷婷亚洲天堂| 农村熟妇高潮精品A片| www.99色在线| 人人性久久| 五月天丁香久久| 五月开心婷婷中文字幕| 久久只这里有精品| 综合色五月| 在线观看中文字幕亚洲| 六月色婷婷| 99在线精品免费视频| 五月天小说激情| 色碰碰| 天天色爽| 激情六月综合| 激情五月天婷婷| 婷婷激情五月| 欧美日本高清视频99| 99操中文视频| 亚洲射激情| 99热这里只有精品99| 99re这里只有| 97超级啪啪在线观看| 色玖玖导航| 天天干,噜噜色,狠狠色| 天天爽,夜夜爽| 人人摸人人摸| av五月天婷婷丁香| 91ncom.色| WWW.99热| 婷婷婷婷婷婷婷五月丁香| 色五月情| 五月丁香久久网| www.com操| 色综合网址| 五月丁香欧美综合免费视频| 97在线/亚洲| 亚洲精品V天堂中文字幕| 色噜婷婷| 狠狠艹狠狠艹| 亚洲精品永久久久久久| 极品少妇高潮啪啪AV无码| 97人妻碰碰碰久久| 丁香五月婷婷88在线| 狼人婷婷综合| 国产成人精品123区免费视频| 精品九九网| 天天色伊人| 人人人操| 国产原创视频91九色| 丁香婷婷人妻| 激情婷婷综合五月少妇| 91超级碰| 日韩AV在线免费观看| 午夜无码精品色综合久久| 亚洲激情网| 99在线综合视频| 可以免费看av网站| 亚洲在线操| 国内9l视频自拍老熟女九色| 99色最新在线视频| 9精品在线| 啪啪视频99| 色天天久婷婷| 97狠狠色| 亚洲有码在线视频| 五月丁香AV在线| 日本色色网| 1024国产| 日日夜夜干| 成人综合网站| 五月婷婷另类| 中文字幕,综合,91| 操b视频在线观看一区二区| 五月熟妇婷婷久久| 综合激情视频| 五月天三级久久| 99热这里只有精品青草| 影音先锋男士资源网一区| 99色在线视频| 亚洲成人AV在线观看| 超碰在线播放免费观看| 伊人婷婷五月天av| 99精品国产乱码久久久人妻| 欧美天天爽| 中文AV在线播放| 高清成人综合| 野战毛片三一3| 久超免费视频| 丁香五月中文字幕久色| 亚洲亚洲人成综合网络| 婷婷91| 婷婷九月激情| 五月婷婷色激情| 少妇大叫太大太粗太爽了A片| 久久婷婷五月综合精品蜜芽| 丁香 亚洲 久久| 五月婷综合激情| www、色色色| www.玖玖九| 99热这里只有精品1998| 精品日本视频444| 激情五月视频| 色综合久久久无码中文字幕999| 色欲丁香久久| 中文字幕免费高清电视剧| 久久只有这里精品免费| 欧美性做爰大片免费看办公室| 激情五月天婷婷免费观看| 涩涩涩五月天| 五月天另类小说亚洲| 亚洲色网址| 99色在线视频观看| 激情丁香五月| 丁香五月综合久久八| 五月丁香影院| 开心深爱五月天| 五月婷婷婷婷| 色五月丁香五月五月婷婷| 亚洲精品视频在线播放| 丁香月五月天婷婷久久| 亚洲精品国产A久久久久久| 五月丁香婷婷人体| 99ri6在线视频| 丁香五月成人社区| 六月激情婷婷综合| 99久久久久久| av中文在线| 99久久婷婷国产综合精品草原| 操操操av| 三年高清大片免费观看国语| 五月婷婷干| 久久丁香综合精品综合| 色天五月天在线观看视频| 亚洲五月激情| 99ri视频| aaa丁香五月天| 麻豆WWWCOM内射软件| 99精品无码视频| 丁香五月98| 五月色丁香| 妇激情基地| 超碰在线人妻| 亚洲免费成人电影AV| 亚洲十月婷婷综合| 2015在线中文字幕| 丁香五月婷婷在线| 色情综合| 99精品视频在线观看| 婷婷五月天无码视频| 日韩AV免费电影在线播放| 日本激情综合| 色综合丁香婷婷| a在线观看| 丁香婷婷色五月天| 久草五月天| 狠狠色婷婷777| 久久婷出差欧美色两性综合网| 日产精品一线二线三线芒果| AV五月婷婷露脸| 久久婷网| 99爱在线视频| 人人摸人人搞| 99色婷婷视频| 婷婷丁香激情五月天色色色| 五月激情婷婷在线| 午夜大香蕉| 中文字幕网伦射乱中文| 深爱激情五月网| 日本精品在线噜噜噜| 婷婷五月天99综合网站| www.五月丁香| 天天射影院| 激情内射p| www色色色com| 五月 婷 久| 婷婷五月天色色| 色九月婷婷综合| 欧美成人猛片AAAAAAA| 激情综合一| 狠狠操狠狠爱| www.激情五月天.con| 精品乱码久久久久| 亚洲va欧洲va国产va不卡| 五月色丁香| 色五月情| 亚洲婷婷丁香| 国产在线另类五月婷婷| 婷婷伊人久久| aaaa久久| 婷婷五月天AV| 婷婷五月激情五月激情| 伊人婷婷综合| 久操乱| 丁香五月欧美成人| 日韩在线五月天婷婷| 一起草AV| 东北黄色一级| 国产成人精品一区二区三区视频| 婷婷欧美激情综合| 五月婷婷六月丁香激情| 五月开心婷婷中文字幕| 色婷婷丁香社综合| 97夫妻超碰| 人人综合久| 五月丁香六月情亚洲| 婷婷五月天AV| 亚洲人人艹| 极品少妇XXXX精品少妇偷拍| 五月丁香婷婷综合久久| 六月婷婷久久大全| 国产在线6| 91婷色| 久久无意婷婷| 亚洲乱码日产精品BD| 日韩 中文 欧美| 日日艹思思热| 激情久久久| 丁香六月激情四射| 亚洲国产成人综合| 国产亚洲色婷婷久久99精品91| 饮料下药迷倒漂亮女同事强干| 婷婷五月天视频小说| 欧美日韩91| 久久久久久久久久久97| 国产精品成人网址| 内射人妻视频国内| 天天日,天天插| 9九色首页| 99热在线观看精品免费| 激情丰满熟妇五月| 国产欧美婷婷| 精品婷婷丁香五| 国产69久久久欧美黑人A片| 任你草| 天天综合色| 天天摸色吧天天摸色吧| 77799热| 五月婷婷色色| 91黄址| 91精品又长又大又粗又爽又猛| 婷婷狠狠综合网入口| 精品人妻伦九区久久AAA片| 色噜噜婷婷| 色婷婷中文在线| 97色色色色色| 激情久久综合网| 这里只有精品99www| 国产夫妻操逼内射视频| 色婷婷综合亚洲| 久人操| 日本三级网址| 丁香成人五月天| 婷婷丁香五月综合激情视频| 甈你aaaaa| 丁香五月激情六月| 丁香5月综合啪啪| 婷婷成人综合免费视频| 99小视频在线| 久久之人妻| 婷婷中文字幕| 成人精品在线| 人伦30P| 亚洲午夜电影| 成人五月天丁香婷| 六月色播| 色色色色色色色色五月先| 思思热天天看| 婷婷五月天受日本法律保护| 六月婷婷深深爱| 操人91| 色色色五月婷| 欧洲一区二区| 97碰啪啪| 99综合视频在线| 激情五月综合视频| 婷婷久久五月天亚洲欧美国产日韩在线观看 | AA片在线观看视频在线播放| 久热伊人| 丁香六月激情综合| 鲁鲁色五月| 色www99| 亚洲视频另类| 99久久五月天| 精品在线网站| 亚洲一个色| 婷婷五月丁香综合激情小说| 久久五月婷婷开心网| 五月丁香激情六月| 亚洲色色色色| 六月丁香婷婷六月激情综合| 亚州色色色| 涩综合婷婷| 超碰人人操人人干| 中文字幕在线免费观看视频| 国产毛片精品一区二区色欲黄A片| 国产av天天插天天操天天爽| 免费成片在线观看| 婷婷射图| 亚洲综合激情五月天婷婷| 五月婷俺去也| 五月色 亚洲| 超碰狠狠色| 婷婷另类小说| 久久精品这里只有精品免费首页| 97色婷婷| 午夜成人av在线| 精品九九九久| 超碰精品国产首页| 五月丁香综合啪啪| 激情伍月 欧美| 五月激情婷婷六月| 中文av网| 丁香六月婷| 丁香五月激情五月| 五月丁香激情怕怕| 啪啪综合| 亚洲狠狠狠色婷婷综合激情久久久| 99r这里| 婷婷激情性爱| 深爱激情网婷婷| 五月婷婷在线免费| 激情九月婷婷| 刘玥av在线| 97干在线看| 欧美va亚洲va| 79色色色色| 五月天婷婷免费| 无码免费人妻A片AAA毛片西瓜| 婷婷免费视频| 九九国产视频| 五月天中文字幕在线婷婷| 婷婷激情视频| 免费无码毛片一区二区A片| 色婷婷另类| 色婷婷五月在线| 婷婷五月天色网久| www.maotanji.com| 91超级碰碰碰| 五月丁香综合网| 九九国产视频| 99精吕视频在线观看了| 亚洲色婷婷五月天| 91在线操逼视频| 九九人人看| 丁香六月av| 人人干女人| 欧美日韩精品人妻狠狠躁免费视频| 热热99爱爱| A√天堂网在线| 开心五月激情网| 精品夜夜澡人妻无码AV| 超级黄色片| 激情狠狠丁香月| 色五月婷婷色| 丁香深五月婷婷| 久久这里这里有精品免费视频| 思思热在线播放| 色碰碰视频| 色五月婷婷丁香凹凸| 婷五月丁香俺| 日本天天操| 超碰免费成人网站| 色天使色婷婷| 五月综合六月婷婷| 91性高潮久久久久久久久| 99网址在线观看| 琪琪理论片| 国产 亚洲 在线| 丁香五月婷婷激情中文| 五月天色色激情综合| www激情| 五月综合婷婷五月| AA片在线观看视频在线播放| A片一曲| 色色AV色色色东莞| 九色在线五月婷婷网址| 亚洲小视频免费看| 99ri精品在线| 牛牛色av| 欧美综合五月丁香五月天| 国产美女无遮挡裸体毛片A片| 九九热啪啪| 免费视频99| www.色色com| 99色看| 99热这里只有精| 99热费观看| 天天碰夜夜爽| 婷婷五月天av小说| 婷婷综合成人五月天| 免费视频99| 五月天婷婷网站888| 天天日夜夜曹| www免费在线视频| 婷婷激情综合网| 国产真人做爰视频免费| 欧美五月丁香啪啪响视频| 人妻aV在线| 亚洲成人AV在线| www.深爱激情| 超碰人妻公开在线| 久久视频这里都是精品| 人妻av在线| 亚洲精品乱码久久久久久按摩观| 小视频久久久aaa| 九九热自拍| 成人综合视频在线| 日韩aaa| 丁香久久九九99| 欧美成人A片AAA片在线播放| 五月深情久久| 思思热99在线| 97干干干丁香| 国产精品激情五月天色婷婷| 影音先锋91在线资源站| 日韩婷婷五月天| 欧州婷婷五月天综合| 亚洲人人干| 国产又色又爽又黄又免费| 久久这里只有精品视频26| 五月激情小说| 久久色五月天| 国自产拍偷拍精品啪啪一区二区| 99高级会所久久| 久久性爱视频| 五月丁香网中文字幕| 国产99久久久国产精品免费看| 久久久精品人妻| 国产精品久久久久久亚洲毛片| 五月婷六月综合在线观看| 成人一级片| 国产99久| 天天婷婷综合亚洲亚洲| 中文字幕第四色.999| www.99热视频| www.婷婷,com| 91大神操美女| 97干97色| 99久视频| 99热精品在线播放观看| 96精品成人无码A片观看金桔| 91视屏在线观看com.wwwvv| 五月激情在线| 色综合xx| 激情性爱五月天网页| 久久视频这里99| 五月亭久久无码视频| 婷婷成人AV| 色情久久久| 亚洲色网络| 色五月丁香一区在线| 天天日夜夜| 婷婷五月天免费| 热久久这里只有三级视频| 免费观看的AV| 色色色五月天激情资源| 黄网在线观看免费| sS丁香五月婷婷| 91精品激情9| 五月伊人婷婷| 在线视频另类| 99久re热视频精品98| 五月天伊人av| 91人人妻人人操人人爽| 婷婷丁香五月综合免费视频百花| 九九99九九99九九99视频网| www.久热| 婷婷五月天激情综合深爱| 色色色天堂网| 91色噜噜狠狠狠狠色综合| 激情五月综合网| 四季8848精品成人免费网站| 亚洲六月色| www一起操| 激情99| 五月婷婷啪啪网| 久久综合丁香| 六月婷婷中文字幕| 噜噜噜精品欧美成人在线观看| 五月婷婷久久爱| 五月丁香好婷婷A片网| 激情深爱综合| 丁香五月婷婷激情中文| 九月丁香亭亭| 丁香六月婷婷综合麻豆| 国产亚洲色婷婷久久99精品9j| 婷婷天堂综合| 激情五月天之五月婷婷| 9精品国产在热久久| 天天干夜晚夜操| 天天射影| 婷婷桃色网| 婷婷五月电影院| 国产美女最新VA在线免费观看| 色99视| 综合网色| 五月激情综| 综合亚洲六月婷婷在线| 99ri网站在线观看| 久久婷婷五月综合色丁香| 五月婷免费视频久久久| 色五月自偷自拍婷婷婷婷| 国外亚洲成AV人片在线观看| 日日操日日撸| 久久9视频| 久热A片| 日韩成人精品中文字幕| 婷婷色激情五月天| 婷婷成人综合| 99人人操| 欧美日本免费一道免费视频 | 777久久久| 国产99久久久国产精品免费看| 日本成人噜噜噜| 国产精品噜噜在线视频| 黄久久久| 少妇人妻偷人精品无码视频新浪 | 久久66精品| 色欲天天综合网| 玖玖99精品视频| 国产精品国产成人国产三级| 六月丁香五月天| 69er小视频| 九热视频| 毛v一区二区视频| 日本欧美成人片AAAA| 欧美色五月| 五月激情六月综合| 欧美色六月婷婷| 色婷五月天| 久久一级免费黄色片| 色一情一乱一乱一区91Av| 思思99热| 五月天激情中文字幕| 色亚洲无码|