欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

生產(chǎn)級Agent Harness實(shí)戰(zhàn):基于PI構(gòu)建穩(wěn)定可控的任務(wù)執(zhí)行框架

生產(chǎn)級Agent Harness實(shí)戰(zhàn):基于PI構(gòu)建穩(wěn)定可控的任務(wù)執(zhí)行框架 “把 Agent 框架拆開”這句話我在不同場合說了不下十次。做 agent 項(xiàng)目做得越久越清楚真正難的不是讓模型跑起來而是讓 agent 在線上沒人盯著的時(shí)候也能穩(wěn)定、安全、可控地完成一整套任務(wù)。我最近把線上跑了半年多的 agent 服務(wù)做了一次大重構(gòu)核心工作就是把這層“包殼”單獨(dú)抽出來用 PI 重新做成了一套生產(chǎn)級 Harness。先說結(jié)論免得你繞彎路框架解決的是“讓 agent 能想”Harness 解決的是“讓它能在生產(chǎn)環(huán)境里安全、穩(wěn)定、可控地跑”。PI 在這里是一個(gè)輕量級 agent 運(yùn)行時(shí)社區(qū)里有人叫它 Personal Intelligence也有人干脆叫 PI runtime它把會話、事件流、工具調(diào)用這些基礎(chǔ)能力收斂得很干凈特別適合在上面自己包一層工程外殼。這篇文章適合正在做 agent 落地的讀者也適合那些想擺脫對全家桶框架依賴、自己做執(zhí)行控制的團(tuán)隊(duì)。下面直接講我對 PI 的拆解以及生產(chǎn)級 Harness 的完整搭建過程。1. 為什么框架之外還要有 Harness很多人第一次接觸 agent 開發(fā)都是從跑通一個(gè) Demo 開始的。模型能回答、工具能調(diào)用、上下文能記住就覺得差不多了。但把這些東西放到生產(chǎn)環(huán)境你會發(fā)現(xiàn)框架給不了你三樣?xùn)|西任務(wù)生命周期管理、異?;謴?fù)機(jī)制、管控與審計(jì)能力。這三樣恰恰是生產(chǎn)級系統(tǒng)的及格線也正是 Harness 要補(bǔ)上的。1.1 Agent 框架通常不給你的三樣?xùn)|西你可以把大模型框架理解成一臺發(fā)動機(jī)它負(fù)責(zé)把“意圖”轉(zhuǎn)成“行動”負(fù)責(zé)對話、推理、調(diào)用工具。但一輛能上路的車除了發(fā)動機(jī)還需要底盤、剎車、儀表盤和安全帶。Harness 就是這輛車的外殼和控制系統(tǒng)。第一框架通常不幫你管“這個(gè)任務(wù)現(xiàn)在到底處于什么階段”。Demo 里一次對話結(jié)束就完了但生產(chǎn)環(huán)境里一個(gè)任務(wù)可能要執(zhí)行幾分鐘甚至幾十分鐘中間要調(diào)多個(gè)工具、可能還要等人審批。如果沒有顯式的狀態(tài)機(jī)任務(wù)一旦卡住你根本不知道它卡在哪個(gè)環(huán)節(jié)。第二框架通常不具備故障恢復(fù)能力。模型調(diào)用超時(shí)、工具返回異常、進(jìn)程崩潰這些都是生產(chǎn)環(huán)境的常態(tài)??蚣軙佉粋€(gè)異常給你但不會幫你自動重試、把失敗任務(wù)轉(zhuǎn)入死信隊(duì)列、或者從檢查點(diǎn)恢復(fù)。這些邏輯必須由 Harness 來實(shí)現(xiàn)。第三框架缺乏管控面。誰在什么時(shí)間調(diào)用了哪個(gè)工具、消耗了多少 token、執(zhí)行了幾次重試這些數(shù)據(jù)如果沒有統(tǒng)一收口出問題的時(shí)候你只能對著日志猜。Harness 的作用就是用統(tǒng)一的事件流把這些信息全部沉淀下來。1.2 生產(chǎn)級這個(gè)詞的及格線我在評審一個(gè) agent 項(xiàng)目能不能上線時(shí)只看四件事不丟任務(wù)任務(wù)進(jìn)來之后無論進(jìn)程怎么崩任務(wù)本身不能丟。要么完成要么明確失敗并進(jìn)入可處理隊(duì)列絕不能不明不白消失。能恢復(fù)單次模型調(diào)用失敗不意味著整個(gè)任務(wù)失敗。要有重試策略要有退避算法還要有上下文保留機(jī)制??捎^測任何一個(gè)環(huán)節(jié)出問題都能通過結(jié)構(gòu)化日志和鏈路追蹤快速定位。不能等到用戶投訴了才發(fā)現(xiàn)任務(wù)掛了。可干預(yù)涉及高風(fēng)險(xiǎn)操作下單、刪除、轉(zhuǎn)賬時(shí)系統(tǒng)能把任務(wù)掛起等待人工審批后再繼續(xù)。這四條就是“生產(chǎn)級”的底線。很多團(tuán)隊(duì) Demo 跑得飛起上了生產(chǎn)就出事基本都是在這些地方欠了債。1.3 為什么選 PI 而不是自研引擎做 Harness 之前我認(rèn)真考慮過兩個(gè)方案一個(gè)是直接用 LangChain、LlamaIndex 這類全家桶框架在上面做二次封裝另一個(gè)是自己寫一個(gè)運(yùn)行時(shí)。最后選了 PI原因是它在兩者之間找到了一個(gè)比較舒服的位置。PI 給我的核心價(jià)值是 session 管理和事件流抽象。它把一次完整的 agent 執(zhí)行過程建模成 session、turn、event 三個(gè)層次session 是完整任務(wù)turn 是一次模型交互event 是流式輸出過程中的每一個(gè)事件。這個(gè)模型足夠簡單但也有足夠的表現(xiàn)力——我可以基于它去構(gòu)建狀態(tài)機(jī)、鉤子函數(shù)和事件訂閱而不用被框架內(nèi)部的重型抽象綁架。換句話說PI 給我的是“可控的零件”引擎內(nèi)部的組裝工作留給我自己這樣我就有空間去建一套真正貼合業(yè)務(wù)的 Harness。2. PI Harness 整體設(shè)計(jì)與分層思路Harness 不是某一個(gè)單獨(dú)的模塊它是一整套分層結(jié)構(gòu)。我設(shè)計(jì)時(shí)的原則是上層不直接碰模型下層不直接對業(yè)務(wù)暴露接口所有交互都通過統(tǒng)一事件流來驅(qū)動。這樣每一層都可以獨(dú)立替換、獨(dú)立測試。2.1 先拆 PI 運(yùn)行時(shí)的工作模型要理解 Harness得先理解 PI 是怎么跑起來的。PI 的工作模型可以概括為三個(gè)層次Session會話代表一個(gè)完整的任務(wù)實(shí)例。它持有上下文、狀態(tài)、元數(shù)據(jù)是 Harness 生命周期管理的最小單位。Turn輪次一次完整的“用戶輸入 → 模型推理 → 可能的工具調(diào)用 → 模型輸出”循環(huán)。一個(gè) Session 里可以有多個(gè) Turn。Event事件PI 在執(zhí)行過程中持續(xù)產(chǎn)生的事件流比如 token 增量、工具調(diào)用開始、工具調(diào)用結(jié)束、錯(cuò)誤發(fā)生等。對 Harness 來說最關(guān)鍵的是事件流。我不需要侵入 PI 內(nèi)部去改邏輯只需要訂閱它的事件然后驅(qū)動我自己的狀態(tài)機(jī)。這種設(shè)計(jì)讓 Harness 和運(yùn)行時(shí)之間形成了一種松耦合升級 PI 版本的時(shí)候我的業(yè)務(wù)邏輯基本不用動。2.2 Harness 四層結(jié)構(gòu)我這里把 Harness 整體分成四層從上到下依次是接入層負(fù)責(zé)接收外部請求做鑒權(quán)和限流把請求包裝成標(biāo)準(zhǔn)任務(wù)放入隊(duì)列。這一層可以是 HTTP API也可以直接消費(fèi)消息隊(duì)列。編排層這是 Harness 的核心負(fù)責(zé)狀態(tài)機(jī)流轉(zhuǎn)、重試策略、審批流程、配額控制。它不關(guān)心模型細(xì)節(jié)只關(guān)心“這個(gè)任務(wù)現(xiàn)在應(yīng)該做什么”。執(zhí)行層持有 PI 運(yùn)行時(shí)實(shí)例負(fù)責(zé)實(shí)際驅(qū)動模型會話、執(zhí)行工具調(diào)用。工具在這里被包裝成標(biāo)準(zhǔn)接口由編排層統(tǒng)一調(diào)度。底座層提供存儲任務(wù)狀態(tài)、事件日志、緩存分布式鎖、冪等、可觀測性指標(biāo)、日志、鏈路追蹤。這個(gè)分層最直接的好處是我可以單獨(dú)擴(kuò)容執(zhí)行層也可以單獨(dú)升級編排策略互不影響。有一次我調(diào)整重試參數(shù)只是改了編排層的一個(gè)配置項(xiàng)執(zhí)行層完全沒動就完成了上線。2.3 三個(gè)核心數(shù)據(jù)結(jié)構(gòu)Harness 的數(shù)據(jù)結(jié)構(gòu)不需要很復(fù)雜但一定要穩(wěn)定。我最核心的三個(gè)數(shù)據(jù)結(jié)構(gòu)是結(jié)構(gòu)關(guān)鍵字段作用HarnessConfigworker_concurrency, retry_policy, quota_policy, tool_timeoutHarness 的總配置運(yùn)行時(shí)不可變變更走配置中心灰度TaskEnvelopetask_id, session_id, payload, priority, created_at, state統(tǒng)一任務(wù)包裝無論任務(wù)來源是 HTTP 還是隊(duì)列都轉(zhuǎn)成這個(gè)結(jié)構(gòu)AgentContextsession_ref, state, turn_count, token_usage, tool_call_logs任務(wù)執(zhí)行過程中的全量上下文持久化存儲支持恢復(fù)這三個(gè)結(jié)構(gòu)基本覆蓋了我的全部需求。TaskEnvelope 保證任務(wù)在系統(tǒng)里的流轉(zhuǎn)是統(tǒng)一的AgentContext 保證任何時(shí)刻進(jìn)程崩潰都能重建現(xiàn)場HarnessConfig 保證行為可控可灰度。做生產(chǎn)級 Harness先把這三個(gè)東西定死后面寫代碼輕松一半。3. 生產(chǎn)級 Harness 的核心實(shí)現(xiàn)細(xì)節(jié)設(shè)計(jì)定完之后真正花時(shí)間的是實(shí)現(xiàn)細(xì)節(jié)。下面這幾個(gè)點(diǎn)每一個(gè)都是我在生產(chǎn)環(huán)境踩過坑之后才定下來的方案直接給你可復(fù)制的寫法。3.1 生命周期狀態(tài)機(jī)怎么落地任務(wù)生命周期是 Harness 的骨架。我用的是顯式狀態(tài)機(jī)而不是散落的 if/else 判斷。狀態(tài)機(jī)的好處是非法流轉(zhuǎn)在進(jìn)入狀態(tài)之前就能被發(fā)現(xiàn)。# harness/state.py import enum class HarnessState(str, enum.Enum): PENDING PENDING RUNNING RUNNING WAITING_INPUT WAITING_INPUT WAITING_APPROVAL WAITING_APPROVAL COMPLETED COMPLETED FAILED FAILED CANCELLED CANCELLED # 合法的狀態(tài)流轉(zhuǎn)表 TRANSITIONS { HarnessState.PENDING: { HarnessState.RUNNING, HarnessState.CANCELLED, }, HarnessState.RUNNING: { HarnessState.WAITING_INPUT, HarnessState.WAITING_APPROVAL, HarnessState.COMPLETED, HarnessState.FAILED, }, HarnessState.WAITING_INPUT: { HarnessState.RUNNING, HarnessState.CANCELLED, }, HarnessState.WAITING_APPROVAL: { HarnessState.RUNNING, HarnessState.CANCELLED, }, HarnessState.FAILED: { HarnessState.RUNNING, # 允許人工介入后重跑 }, } def validate_transition(current: HarnessState, target: HarnessState) - bool: return target in TRANSITIONS[current]你可能會問為什么 WAITING_APPROVAL 要單獨(dú)做一個(gè)狀態(tài)而不是掛在 RUNNING 下面因?yàn)檫@兩個(gè)狀態(tài)在運(yùn)維語義上完全不同RUNNING 是正在花錢的階段模型在調(diào)用、工具在執(zhí)行WAITING_APPROVAL 是已經(jīng)暫停的階段不產(chǎn)生成本需要人介入。我一開始把審批狀態(tài)掛在 RUNNING 里結(jié)果超時(shí)策略和計(jì)費(fèi)統(tǒng)計(jì)全亂套了。拆開之后超時(shí)策略可以分別配置RUNNING 階段嚴(yán)格執(zhí)行調(diào)用超時(shí)WAITING_APPROVAL 階段則允許長期掛起。3.2 超時(shí)、重試和熔斷的參數(shù)怎么定大模型場景的重試比普通 RPC 復(fù)雜因?yàn)樗恢皇恰爸卦囈淮握埱蟆边€關(guān)系到上下文污染、token 浪費(fèi)、上游限流。我使用的重試策略參數(shù)如下參數(shù)推薦值說明首 token 超時(shí)15s超過直接重試多半是上游排隊(duì)總響應(yīng)超時(shí)120s流式場景也必須有總時(shí)長上限最大重試次數(shù)3 次超過后進(jìn)入死信隊(duì)列不無限重試基礎(chǔ)退避1s指數(shù)退避的初始值最大退避60s防止退避過長拖死任務(wù)重試的代碼實(shí)現(xiàn)可以很簡單但有一個(gè)關(guān)鍵點(diǎn)重試不能改變上下文。同一輪 Turn 的重試必須使用完全相同的輸入并且要保證冪等——工具調(diào)用如果有副作用重試前要確認(rèn)上一次調(diào)用真的沒生效。# harness/retry.py import random def next_backoff(retry_count: int, base: float 1.0, cap: float 60.0) - float: backoff min(base * (2 ** retry_count), cap) jitter random.uniform(0, backoff * 0.1) return backoff jitter def should_retry(retry_count: int, max_retries: int 3) - bool: return retry_count max_retriesjitter 一定要加。不加 jitter 的話一旦上游模型服務(wù)出問題所有 worker 會同時(shí)重試形成重試風(fēng)暴直接把上游打掛。加了隨機(jī)抖動之后重試請求會自然散開實(shí)測效果明顯。熔斷方面我比較粗暴單 worker 在 5 分鐘內(nèi)如果連續(xù) 10 次模型調(diào)用超時(shí)就觸發(fā)熔斷暫停從隊(duì)列拉取新任務(wù) 30 秒。這個(gè)閾值不復(fù)雜但配合退避算法之后整個(gè)系統(tǒng)的穩(wěn)定性提升了一個(gè)級別。3.3 Human-in-the-loop 怎么插入執(zhí)行流生產(chǎn)級的 agent 系統(tǒng)基本都繞不開人工審批。比如自動生成內(nèi)容后要發(fā)布、自動下單、自動刪除數(shù)據(jù)這些高風(fēng)險(xiǎn)操作不能完全交給模型決定。我的方案是讓 Harness 在工具調(diào)用前檢查策略命中高風(fēng)險(xiǎn)策略就掛起任務(wù)等人審批。流程是這樣的編排層解析 PI 發(fā)來的工具調(diào)用事件先走權(quán)限校驗(yàn)和策略判斷。如果該工具被標(biāo)記為“需要審批”Harness 將任務(wù)從 RUNNING 狀態(tài)轉(zhuǎn)到 WAITING_APPROVAL 狀態(tài)同時(shí)持久化當(dāng)前 AgentContext。系統(tǒng)發(fā)送審批通知企業(yè)微信、釘釘、郵件都可以看你公司用什么。審批人通過內(nèi)部管理后臺查看待審批任務(wù)可以看到即將執(zhí)行的工具、參數(shù)、上下文摘要。審批通過后Harness 恢復(fù) AgentContext從原 checkpoint 繼續(xù)執(zhí)行審批拒絕則任務(wù)轉(zhuǎn)入 CANCELLED。這里有一個(gè)非常容易踩的坑審批中的上下文一定要持久化到數(shù)據(jù)庫不能只放在進(jìn)程內(nèi)存里。你想一下任務(wù)掛起后如果 worker 剛好發(fā)布重啟內(nèi)存里的上下文就全沒了審批通過之后根本沒法恢復(fù)。我一開始就是這個(gè)坑后來把所有 WAITING_APPROVAL 狀態(tài)的任務(wù)上下文都寫進(jìn)了數(shù)據(jù)庫才徹底解決。3.4 可觀測性、配額與成本控制Agent 系統(tǒng)的成本控制是生產(chǎn)中很現(xiàn)實(shí)的問題。模型調(diào)用是收錢的一個(gè)失控的 agent 循環(huán)調(diào)用工具可能幾分鐘就燒掉上千塊。我的做法是所有 token 消耗和工具調(diào)用都統(tǒng)計(jì)到任務(wù)級別并且設(shè)置硬性配額。每個(gè)任務(wù)配額固定為配額項(xiàng)默認(rèn)值超過后行為max_turns30強(qiáng)制終止任務(wù)max_prompt_tokens10000觸發(fā)上下文壓縮max_tool_calls50后續(xù)工具調(diào)用直接拒絕max_total_cost_usd2.0強(qiáng)制終止并通知管理員日志方面我采用 JSON lines 格式每個(gè)事件一行。標(biāo)準(zhǔn)字段包括task_id、session_id、turn_id、event_type、model、prompt_tokens、completion_tokens、tool_name、tool_latency_ms、state_from、state_to。這樣可以直接喂給日志采集系統(tǒng)做監(jiān)控和告警也可以拿來做審計(jì)回溯??捎^測性做得好的標(biāo)志是一個(gè)任務(wù)出問題你在監(jiān)控面板上從 task_id 進(jìn)去能看到它整個(gè)生命周期的完整時(shí)間線——什么時(shí)候進(jìn)的隊(duì)列、模型調(diào)用花了多久、哪個(gè)工具超時(shí)了、重試了幾次、最終落在哪個(gè)狀態(tài)。到了這個(gè)程度排障基本上就不是靠猜了。4. 從 Demo 到線上部署形態(tài)與穩(wěn)定化Harness 寫完之后怎么部署同樣有講究。我見過不少團(tuán)隊(duì)把 agent 服務(wù)寫成單體進(jìn)程一個(gè)進(jìn)程既接收 HTTP 請求又跑模型調(diào)用出問題連是入流量打爆還是模型調(diào)用卡死都分不清。4.1 最小可行部署拓?fù)湮业牟渴鹦螒B(tài)是“worker 模型”任務(wù)先進(jìn)入隊(duì)列worker 進(jìn)程從隊(duì)列里取任務(wù)執(zhí)行執(zhí)行結(jié)果再寫回存儲。它帶來的直接好處是隊(duì)列天然提供了削峰填谷能力模型服務(wù)變慢時(shí)任務(wù)會在隊(duì)列里積壓而不會把 HTTP 入口拖死。一個(gè)最少可行的拓?fù)涫墙尤雽覰ginx 對外提供 API做鑒權(quán)和基礎(chǔ)限流。隊(duì)列Redis Stream 做任務(wù)隊(duì)列。選擇 Redis Stream 而不是普通 List是因?yàn)樗С窒M(fèi)者組、消息確認(rèn)和 Pending Entries List這些特性天然契合任務(wù)系統(tǒng)的可靠性要求。執(zhí)行層3 到 5 個(gè) worker 進(jìn)程橫向部署每個(gè) worker 同時(shí)跑 2 到 4 個(gè) session。存儲PostgreSQL 存任務(wù)狀態(tài)和審批上下文Redis 同時(shí)承擔(dān)分布式鎖角色。這里要特別注意不要用“長連接直連模型服務(wù)”的形態(tài)。也就是每個(gè) worker 進(jìn)程在啟動時(shí)建立一個(gè)到模型服務(wù)的長連接然后所有 session 共用。這樣一旦網(wǎng)絡(luò)抖動所有 session 會同時(shí)斷連整個(gè) worker 直接進(jìn)入重試風(fēng)暴。我現(xiàn)在的做法是每次 Turn 都從連接池里取連接用完歸還池大小 10 到 20。這樣單次連接異常只會影響一個(gè) Turn而不是整個(gè)進(jìn)程。4.2 Tool 與 Skill 的注冊管理Tool 和 Skill 是 agent 系統(tǒng)里很容易混淆的兩個(gè)概念。我用一句話區(qū)分Tool 是原子能力Skill 是帶流程編排的可復(fù)用技能包。Tool 的例子是“查詢訂單狀態(tài)”“獲取天氣”“發(fā)送 HTTP 請求”。Skill 的例子是“寫周報(bào)”——它內(nèi)部會先讀取本周工作記錄再調(diào)用總結(jié)模型生成內(nèi)容最后按模板格式化這是多個(gè)步驟的編排。在 Harness 里Tool 和 Skill 都通過 manifest 文件注冊。每個(gè) Tool 聲明自己的名字、描述、權(quán)限范圍、超時(shí)時(shí)間和輸入輸出格式# tools/order_query.yaml name: order_query version: v1 description: 根據(jù)訂單ID查詢訂單狀態(tài) permissions: scope: order:read rate_limit: 20/min timeout: 8s input_schema: type: object properties: order_id: type: string required: - order_idHarness 加載 manifest 時(shí)做三層校驗(yàn)格式合法性、權(quán)限范圍是否超出當(dāng)前租戶所授權(quán)限、輸入 schema 是否完整。校驗(yàn)通過之后才注冊到執(zhí)行環(huán)境。這樣做的好處是工具接入變成了寫配置文件不需要改代碼而且權(quán)限邊界在接入那一刻就確定了。4.3 灰度發(fā)布與版本回滾Harness 本身的升級同樣需要流程。我的經(jīng)驗(yàn)是把 Harness 的配置和代碼分開管理。代碼升級走鏡像灰度比如先發(fā)布一個(gè) node 到預(yù)發(fā)環(huán)境跑自動化測試再逐步放量到生產(chǎn)。配置變更走配置中心灰度比如調(diào)整重試參數(shù)時(shí)先在 5% 的任務(wù)上生效觀察錯(cuò)誤率沒有變化再推到全量?;貪L策略要特別關(guān)注狀態(tài)兼容性。比如你升級了狀態(tài)機(jī)的定義加了一個(gè)新狀態(tài)那舊版本代碼是無法識別這個(gè)新狀態(tài)的。所以每次 Harness 代碼升級前我都要檢查數(shù)據(jù)庫里有沒有處于“新狀態(tài)”的任務(wù)如果有要么先把這些任務(wù)處理完再升級要么做一個(gè)狀態(tài)遷移腳本。這個(gè)檢查我寫進(jìn)了發(fā)布手冊每次發(fā)版必看。4.4 穩(wěn)定性驗(yàn)收清單每次改動上線前我會跑一遍這個(gè)清單檢查項(xiàng)方法通過標(biāo)準(zhǔn)任務(wù)不丟失殺掉 worker 后檢查隊(duì)列中待處理任務(wù)重啟后任務(wù)全部繼續(xù)執(zhí)行冪等重試模擬工具調(diào)用成功但響應(yīng)丟失不重復(fù)產(chǎn)生副作用超時(shí)隔離讓單個(gè)工具 sleep 超過超時(shí)時(shí)間只失敗當(dāng)前 Turn不影響其他 session審批恢復(fù)掛起任務(wù)后重啟 worker審批后任務(wù)可從 checkpoint 恢復(fù)配額生效將 max_turns 調(diào)為 1 觸發(fā)限制任務(wù)被強(qiáng)制終止并記錄原因流式斷連在模型響應(yīng)中途斷網(wǎng) 5 秒觸發(fā)重試并最終成功限流保護(hù)高并發(fā)壓測接入層超額請求被丟棄worker 不崩日志完整性抽樣檢查任務(wù)時(shí)間線每個(gè)狀態(tài)變更都有對應(yīng)事件日志這套清單執(zhí)行一次不到 30 分鐘但它保住了我很多次上線。穩(wěn)定性不是靠寫代碼寫出來的是靠一次次模擬故障驗(yàn)出來的。5. 常見問題與排查實(shí)錄最后這部分是我在實(shí)際運(yùn)營中遇到的真實(shí)問題每個(gè)都讓我改過代碼或調(diào)整過配置。整理成速查表放最后建議收藏備用。5.1 流式響應(yīng)中途 malformed 怎么處理這是我最常遇到的問題報(bào)錯(cuò)信息類似the response stream was malformed and no response was produced. try again.。一開始我以為是模型服務(wù)的問題后來發(fā)現(xiàn)很多時(shí)候是連接層的問題模型以流式方式返回?cái)?shù)據(jù)中間某個(gè) chunk 在傳輸層被截?cái)嗔擞绕涫蔷W(wǎng)絡(luò)代理、網(wǎng)關(guān)緩沖設(shè)置不當(dāng)?shù)臅r(shí)候特別容易出現(xiàn)。排查步驟是這樣的先看是不是網(wǎng)絡(luò)層截?cái)唷z查網(wǎng)關(guān)有沒有設(shè)置proxy_read_timeout如果超時(shí)過短流式響應(yīng)很容易中間斷掉。把超時(shí)從 30s 調(diào)到 120s 能解決相當(dāng)一部分問題。再看是不是模型服務(wù)監(jiān)控顯示有異常。如果上游自己沒問題那就是連接層的鍋。最后看是不是代碼層錯(cuò)誤處理不當(dāng)。流式讀取時(shí)如果遇到 EOF 或 JSON 解析失敗正確做法是把這個(gè) Turn 標(biāo)記為可重試而不是直接把任務(wù)置為 FAILED。后來我實(shí)現(xiàn)了“斷流自動重建”機(jī)制Harness 捕獲到 malformed 錯(cuò)誤后保留原始輸入上下文重新開啟一個(gè) Turn 重試重試次數(shù) 1 次。如果重試仍然失敗才進(jìn)入死信隊(duì)列。這個(gè)機(jī)制上線后這類錯(cuò)誤對線上任務(wù)的影響降到了幾乎為零。5.2 任務(wù)卡在 RUNNING 狀態(tài)有一次線上收到告警說某個(gè)任務(wù)執(zhí)行時(shí)間已經(jīng)超過了一個(gè)小時(shí)。我進(jìn)去查狀態(tài)發(fā)現(xiàn)任務(wù)一直停在 RUNNING但 worker 日志里根本沒有這個(gè)任務(wù)的執(zhí)行記錄——進(jìn)程早就不在了但任務(wù)狀態(tài)沒被更新。原因是 worker 崩潰時(shí)沒有“租約過期”機(jī)制。worker 從隊(duì)列里取走任務(wù)時(shí)任務(wù)狀態(tài)變成了 RUNNING但如果 worker 在任務(wù)還沒執(zhí)行完就崩潰這個(gè)狀態(tài)會一直卡在那里。解決方案是給任務(wù)加租約機(jī)制worker 拿到任務(wù)時(shí)寫入一個(gè)租約過期時(shí)間比如 5 分鐘然后每 30 秒續(xù)租一次。如果租約過期且沒有續(xù)租說明 worker 已經(jīng)不在了其他 worker 可以接管這個(gè)任務(wù)。接管時(shí)重新記錄執(zhí)行狀態(tài)并把任務(wù)重新置為 RUNNING。5.3 Token 超限、上下文污染和工具輸出爆炸模型上下文窗口是有限的但工具可以返回?zé)o限大的數(shù)據(jù)。比如一個(gè)查詢工具返回了 10 萬字的 JSON如果直接把它塞進(jìn)上下文下一個(gè) Turn 不僅浪費(fèi) token還可能讓模型產(chǎn)生幻覺。我的做法是給所有工具輸出加“體積保險(xiǎn)絲”工具輸出超過 2000 字符時(shí)自動截?cái)嗖⒏郊印耙呀財(cái)嗤暾麛?shù)據(jù)可調(diào)用 get_more 工具獲取”的提示。同時(shí)每輪 Turn 結(jié)束后檢查上下文總 token 數(shù)超過閾值的部分按“最早的消息優(yōu)先丟棄”策略壓縮但會保留系統(tǒng)提示詞和對當(dāng)前任務(wù)最關(guān)鍵的信息。這個(gè)策略犧牲了一點(diǎn)點(diǎn)“記憶力”但換來了每個(gè)任務(wù)的成本可控、響應(yīng)速度穩(wěn)定。真實(shí)業(yè)務(wù)里絕大多數(shù)任務(wù)的關(guān)鍵信息在最近幾輪上下文里就夠了。5.4 排查速查表現(xiàn)象定位方法處理建議任務(wù)成功但用戶說沒收到結(jié)果查任務(wù)狀態(tài)和事件時(shí)間線看最后一步回調(diào)是否失敗檢查回調(diào)錯(cuò)誤處理增加回調(diào)失敗重試模型響應(yīng)經(jīng)常中斷查網(wǎng)絡(luò)層的超時(shí)和緩沖配置調(diào)大流式超時(shí)斷流自動重試 1 次任務(wù)大量進(jìn)入死信隊(duì)列看死信隊(duì)列里的錯(cuò)誤分類按類型聚合統(tǒng)計(jì)對 Top 錯(cuò)誤逐個(gè)解決不要零散處理成本超支按 task_id 查 token 消耗和模型調(diào)用次數(shù)收緊 max_turns 或 max_total_cost_usd同一工具頻繁超時(shí)查工具執(zhí)行日志里的耗時(shí)分布優(yōu)化工具本身或減少該工具的并發(fā)配額最后再說一個(gè)我反復(fù)踩坑后養(yǎng)成的習(xí)慣每次上線前我都會人為殺掉 worker、斷掉 Redis 連接、模擬模型服務(wù) 5 秒超時(shí)把線上搞亂一遍再讓 Harness 自恢復(fù)。Harness 不是寫出來的是練出來的。PI 把運(yùn)行時(shí)的復(fù)雜性控制得很小你才有精力把外面這層殼做得足夠結(jié)實(shí)。Agent 上線這件事框架選誰其實(shí)沒那么重要Harness 能不能兜住底才是決定一個(gè) agent 項(xiàng)目能不能長期穩(wěn)定跑下去的關(guān)鍵。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
色五月婷婷久久| 十一月婷婷激情四射| 色丁香五月| 五月天婷婷成人网| 色婷婷导航| 一根材五月婷成人| 91激情五月开心| 欧洲色色| 久热伊人在91| 美女主播野战视步页| 大香蕉久艹| 国产亚洲成人综合| AV美美午夜| 激情五月天小说网| 婷婷之六月丁香| 久草大| 9久热在线视频精品| 狠狠色丁香| 久久综合干| 婷婷丁香色五月| 色五月激情网| 欧美日韩99| 五月婷婷婷丁香播| 综合激情专区| 丁香五月欧美午夜视频| 婷婷五月激情综合网| 色久天| 无码成人AAAAA毛片AI换脸| 操日视频| 大香蕉婷婷五月天| 五月六月丁香激情视频| 婷婷五月天开心网| 久久六月综合| 五月天久久婷婷| 色情久久久| 伊人99热| 涩涩五月天| 一本色道久久综合狠狠躁一二三| 这里只有免费的精品| 色色性爱视频| 97人操人免费视频| 久热99| 色情网综合| 久久婷婷免费| 色五月丁香婷婷在线观看| 综合AV网| 襙逼网| 99爱视频在线观看| 丁香涩涩爱| 亚洲精品中文字幕成人片| 啪啪亚洲综合| 久久狠狠欧美| av操B网站| 久久九九热视频| 9久热在线精品| 综合色影| 99热久草| 色五月五月婷婷| AAA久久| 久热这里只有精品性色AV| 久久精彩视频| 91chinese在线| 在线观看视频1区| 婷婷日日天天| 综合色吧| 综合婷婷| 人妻 性久久久久久| 在线只有精品| 天天操天爱综合| aV直接看| 超碰在线成人| 色色射| 五月婷婷综合性爱噜噜| 五月综合视频| 五月婷婷激情视频| 天天做天天爱天天爽在| 五月天婷婷免费| 99精品亚洲| 亚洲午夜AV| 五月天婷婷无码| 丁香五月另类小说在线阅读| 在线不卡视频| 色噜噜综合网| 激情久久婷婷| 99爱免费视频| 人橾人| 色情五月丁香| 99热这里| 激情六月丁| 开心 五月 综合| 99热费观看| 婷婷五月天久草在线| 日韩另类在线观看| 色中色综合| 婷婷五月图片小说视频| 丁香六月婷| 久9综合| 亚洲无码成人| 色五月婷婷亚洲最大| 玖玖资源站蜜臀| 五月丁香婷婷激情影院欧美| 99视频激情四射| 婷婷五月天成人综合网| 内射丰满人妻| 色爱终和网| 99热成人精品| 热久久99视频| pacopacomama 070722_670 素人奥様初撮りドキュメント 103 大久保純子 | 国产熟妇乱子伦hd| 少妇大叫太大太粗太爽了A片| 狠狠操狠狠| 久久久久久人妻久久久久久久久久人妻久久久 | 97操碰在线视频| 99re8热精品免费视频| 桃色五月天| 97久久超碰| 色5月婷婷| www.91色| 色播激情婷婷| 91fuliwang| 久超免费视频| www.日本91| 五月亭久久无码视频| 久久 婷婷 五月天| 久久激情网| 亚洲不卡| 激情五月无码| 激情五月婷婷在线| 天天操天天插| 综合激情在线视频| 婷婷五月天综合久久日美女| 超碰碰碰碰| 久久99这里只有精品| 天天日天天添| 性生活视频98791| 日本色色色| 婷婷丁香五月天亚洲| 色综合久久中文| 精国产品一区二区三区A片| 思思99热| WWW·色色色·COM| 婷婷射综合| 九九热区一区二区三区| 色区域网站视频| WWW.桔色成人.COM| 人人爱摸视频| www超碰| 任你躁XXXXX麻豆精品| 超碰国产一区| 原琪琪色影院| 婷婷狠狠色| 国产激情久久久| 99热最新| 久久色午夜在线导航| 久草视频一,二三四| 五月丁香婷婷综合| 九九热婷婷| 无码人妻少妇色欲AV一区二区| 婷婷九九色| 91九色国产| renrencaoav| 婷婷色导航| 操逼五月婷婷| 日韩av干| 99热免费精品| 另类国产区| 五月婷婷激情四季| 久久久久激情网| 亚洲网综合在线| 九月丁香亭亭| 99综合99| 99久久9| 天堂久久丁香| 玖玖婷婷色五月| 99热这里精| 91日本在线观看| 99综合成人视频在线观看| 丁香五月六月久久综合| 丁香五月网| 五月天在线视频尤物视频在线看| 久久香蕉网| 九热精品| 色色色在线观看| 疯狂做受XXXX高潮A片动画| 亚洲国产精品成人午夜| 伍月婷婷六月丁香| 色婷婷av综合网| 亚洲免费99| 五月丁香影院| 天天综合情| 这里只有精品在线视频在线观看| 久久婷婷五月天大香蕉| 日韩精品无码99| 色丁香久久| 成人在线高清| 天天射天天射一道本日本社区| 91干婷婷| 天天射影院| 天天插,天天射| 五月丁香六月婷婷在线小说视频| 五月天综合激情网| 色九四色| 色婷婷狠狠干芒果TV| 国产真人做爰视频免费| 91狠狠色| 激情婷婷狠狠干综合| 人人爽在线视频综合网| 中文幕无线码中文字蜜桃| 色视频2025| 婷婷色五月丁香六月欧美啪| 天天综合情| 成人中文网| 怡红院精品视频久久久久久久久| 色噜噜丁香| 婷婷激情丁香六月| 99热一本| 97久久视频| 六月色五月天天婷婷| 色色色色色色色五月| 人妻操在线看| www,com,五月色色| 亚洲一级AV在线免费播放| 亚洲超碰在线| 99性色| 九九无码AV| 激情网综合| 五月丁香六月激情| 超碰国产在线| 视频这里只有精品16| 色色色com| 91丨九色丨熟女|老版| 99热精品在线| 激情婷婷在线| 九热视频| 精品无码99| 婷婷九月综合| 国内久久婷婷| 婷婷六月亚洲综合| 婷婷开心综合人妻小说网址| 七七九色| 国产成人精品亚洲线观看| 五月天婷婷在线观看| 九九亚洲视频| 亚洲视频在线网| 久婷| 五月天狠狠网| 99热香港| 色狠狠999综合| 色婷婷影院| 人妻尝试久久久久久久久久久久| 婷婷射综合| 能看的av网站| 五月色婷婷影院| 六月五月久久丁香| 99热这里只有精品1025| 婷婷亚洲五月| 久久丁香婷婷五月天| 五月天综合久久丁香91| 丁香六月婷婷操逼网| 国产在线黄色| 五月开心网| 五月丁香综合影院| 天天色,天天操,天天射| 免费的日逼视频| 在线观看欧美| 色五月色五天色情网址| 丁香五月色激情| 五月天成人综合| 亚洲激情五月天| 五月天伊人日日噜影片AV| 激情婷婷五月| 九九久久污| 国产欧美日韩综合精品一区二区| 色丁香五月| 人妻VideOssS人妻| 婷婷激情五月天亚洲综合| 激情五月婷婷| 另类视频五月天| 婷婷五月天色播| 五月亭亭综合五码| 久久视屏这里只有久久| 综合99久久| 另类图片五月天婷婷| 玖玖爱伊人网| 婷婷狠狠干| 成人 在线观看国产| 91日本在线观看| 色婷婷网| 成人无码髙潮喷水A片| 激情又色又爽又黄的A片| 99热这里只有精品免费| 久久婷婷五月综合色奶水99啪| 婷婷五月色情天| 日本五月婷| 99热网站| 另类图片五月天| 99热这里只有精品在线| 五月婷A V在线| 国色天香成人网| 玖玖在线视频| 国产亚洲精品久久久久久郑州| 成人五月丁香社区| 亚洲精品又粗又大又爽A片| 激情五月综合网| 五月婷婷激情网| 91丨九色丨国产| 香蕉久久国产av一区二区| 涩综合网| 五月激情综合激情五月| 国产精品成人av在线观看春天| 永久地址 色| 久久 天天| 思思热视频在线| 五月婷婷六月色| 精品一二三区久久AAA片| 少妇人妻偷人精品无码视频新浪| 琪琪色网在线| 99丁香五月婷| 我爱宗和色| 天天插,天天射| 婷婷五月色播放| 五月婷婷综合网| 色啦啦视频| 色爱爱综合网| 五月婷婷高清| 激情五月天婷婷丁香 | 激情五月图| 婷婷丁香五月激情| h在线看免费版在线看| 日本久久超碰| 26uuu欧美日本| 色亭亭影园| 熟女重口味αV| 色丁香六月| 婷婷五月综合色拍| 一级AV片| 激情欧美婷婷| 五月天色婷婷综合| 一起草av| 亚洲视频操| 六月色狠狠色| 日韩啪| 久久九网| 五月婷婷熟女| 激情五月天小说网| 五月丁香色综合| 呦呦v线| 人人草人人舔| 色偷偷色婷婷| 99性爱精品| 可以免费观看的AV| 99色在线视频| 五月天成人免费视频| 久久久久久久久月丁| 五月亭亭六月色| 欧美婷婷五月天| 色色综合网www| 婷婷五月天com| 99热超碰| 久99热| 少妇性按摩无码中文A片| 超碰操日| 婷婷五月色亚洲| 久久九九网| 超碰三级片| 激情五月com| 婷婷五月天天| 婷婷色五月久久| 成年人丁香五月| 九九伦子片| 岛国AV网站| 久久婷婷五月综合色区| 精品少妇蜜臀91| 99亚洲视频| 精品九九在线观看视频| 婷婷丁香五月激情| 99超级碰免费视频| 超碰人人操人人干| 成人永久免费视频在线观看| 五月天激情网站| 婷婷中文字幕网| 五月成人网站| 成人 AV播放| 日本色爽| 成人网站免费在线播放| 夜夜爱伊人| 99re热在线视频| www婷婷| 色 免费网站视频| 天天操比比| 五月停停丁香| 丁香五月婷婷高清| 激情啪啪五月| 99热成人精品| 五月丁香日逼| 可以看的AV| 五月丁香网av| 日本五月视频| 精品亚洲国产成人A片在线鸭王| 婷婷激情肏屄网| 午夜少妇在线观看视频| 五月天色导航| 天天色图| 丁香五月婷婷老师网站| 91日本在线观看| 五月花综合网| 人人操人人妻| 五月丁香香蕉| Va另类视频| 九九人人看| 五月丁香婷婷色色| 色噜噜在线| 激情五月天综合网| 久草热8精品视频在线观看| 九九成人| 亚洲、热| 九九久久99| 亚洲网站观看视频| 国产在这里只有精品| 婷婷香五月| 99日本在线| 69凹凸成人综合网| 五月丁香六月激情在线| 色综合久久88色综合天天99| 精品久久人妻热| 伊人久久婷婷五月综合97色| 日本九九视频| 日韩操逼小电影| 婷婷久久五月| 操人91| 99re青青草| 五月天另类激情在线| 丁香六月欧美| 五月天综合视频网| 日批在线看| 亚洲另类婷婷综合| 一区无码| www.ywav| 亚洲视频在线观看| 九九热99熟女| 五月丁香啪综合| 色日本五月天| 婷婷五月天在婷| 婷婷六月综合在线| 五月婷婷激情69| 99热九九这里只有精品| 超碰在线9| www.1024久久| 91聚色综合网| 大伊香蕉精品视频在线 | Jh7Uf088VHafNm| 色久播播| 婷婷她六月天| 丁香五月亚洲激情婷婷射| 青青色com久久| 天天色中文字幕女优AV| 丁香五月婷婷婷桃花影院| 亚洲中文字幕在线观看| 日日爽夜夜爽| 欧美色色色色色| 成人短视频在线免费观看| 天天视频亚洲| 丁香五月婷久久| 婷婷五月丁综合| 丁香婷婷综合激情五月色,开心五月丁香花综合网,激情综合五月亚洲婷婷,五月天 | 91色逼| 99精品免费视频| 色婷婷精品| 亚洲欧美999| A久网| 婷婷开心激情| 99久热在线精品| 在线中文字幕视频| 91男同| 激情丁香五月天| 欧美精品999| 99狠狠| 99自拍视频网站| 粉嫩av蜜桃av蜜臀av| 色综合久久99色| 91欧美日韩综合| 亚洲热热视频| 日韩久久成人| 人操人| 另类国产区| 色婷婷久久综合久色综| 五月婷婷色影院| 超碰三级秋霞| 深爱五月激情网| 色很很96| 亚洲色婷婷| 中文字幕在线日亚州9| 99热这里只有精品99| 久草五月丁香婷婷综合| 91日视频| 婷婷丁香五月天小说| 人人综合五月人人婷婷| 99∨VTV| 色999;丁香五月| 狠狠色综合久久久久| www.97干视频| 97丁香花五月天激情小说| 色久五月| 婷婷久久五月天| 久操热线| 亚洲欧美日韩另类| 日韩综合天堂| 这里只有精品99www| www.狠狠操| 久久久激情| 日韩无码乱轮| 性韩日色婷婷五月天激情啪啪XXX| 五月婷婷五月天天| 狠狠色婷婷| 色婷婷综合在线| 色狠狠999综合网| 婷婷五月天网| 男人先锋久久| 婷婷99狠狠躁天天躁| 可以观看的AV| 香蕉AV福利精品导航| 婷婷久久婷婷| 久播影院免费观看电视剧大全最新网| 激情六月婷婷| 久热无码| 天天日天天舔| 五月天丁香婷婷久久九| 丁香五月天av| 人妻少妇色综合| 大香蕉天堂| 丁香五月天网友自拍啪啪啪视频| 五月婷婷六月丁香综合在线| 丁香五月天婷婷大香蕉| 伊人五月久久| 国产精品色色| 热的国产,热的综合,热的有码| 另类图片激情五月| 精品九九网| 丁香婷婷十月| 综合久久99| 涩五月婷婷| 亚洲性视频| 天天se在线视频| 色婷婷成人五月| 九九99热| 99精品视频在线观看| 7777久久亚洲中文字幕| 热思思| 丁香网五月天| 日韩精品超碰在线观看| 综合久久99| 激情五月婷婷丁香综合网| 九九综合久久| 9 1大香蕉| 99热99精品在线观看| 日本色色影片| 人人人操B超碰| 色色五月激情| 日91高清无玛| 日韩综合网络男女香蕉a片| 亚洲五月婷婷| 激情文学 综合 色| 99久久超级| 国产精品婷婷午夜在线观看| av免费在线观看0| 99热中文字幕久久| 久久99大全| 天天色天天日| 色情久久久| 国产肥白大熟妇BBBB视频| 3www激情| 久久婷婷丁香| 国产欧美日韩综合精品一区二区| 丁香五月天婷婷中文| 操逼国产91| 超碰人人操在线| 成人深爱丁香五月| 96精品成人无码A片观看金桔| 色亚洲中文| 婷婷五月a| 五月激情啪啪| 色丁香五月综合网| 97欧美在线| 五月天婷婷久久| 久草A片| 亚洲中文字幕在线观看| 中文字幕丰满乱孑伦无码专区 | 丁香五月天啪啪a日本| 婷婷午夜激情| 做爰丰满少妇1313| 六月天婷婷| 性五月激情| 有码一区二区三区| 爱操人妻| 五月丁香AV在线| 亚洲av网址| .精品久久久麻豆国产精品| 九九超碰人人| 清纯唯美 激情四射| WWW.婷婷五月天.COM| 女力报到正好爱上你| 青青草原亚洲天堂| 九九99久久精品| 亚洲成人网站在线播放| 欧美美女国产日韩一区二区久| 日本三级第一页| 热九九精品| 夜夜骑天天玩天天日| 九九九日本熟女| 97超美国视频在线观看| 丁香五月av| 九九热10| 另类丁香五月天区图| 亚洲啪啪视频| 免费婷婷| 色婷婷狠狠干芒果TV| 欧美极品999| 操逼六区| 日本偷拍九九九| 中国丰满熟女A片免费观| 五月天天综合| www99热| 99精品在| 538久久| site:xiongshengzz.com| 国产九九一区二区三区| 亚洲另类AV| 丁香五月大香蕉在线99| 国产成人精品一区二三区熟女在线| 91日视频| 九热免费视频| 久久久精品AV| 大香蕉天堂| 天天色视频| 丁香五月天激情视频| 五月丁香六月婷婷久久| 天天草比天天爽| 久久免费婷婷视频| 亚洲AV色婷婷人禽五月天| 五月六月激情婷婷| 久久婷婷五月丁香| 婷婷丁香在线播放| 97久久久免费福利网址| 9 1在线视频| 天天骑天天操| 国产肥白大熟妇BBBB视频| 久久婷婷热| 中文字幕无码人妻少妇免费视频| 色五月综合| 青青草伊人婷婷| 婷综合六月| 超碰在线免费9| 永久无码色| 五月丁香六月婷婷精品| 婷婷五月天亚洲激情戏精品| 亚洲九九99精品视频在线播放| 激情综合婷婷五月| 丁香五月网| 久热网站| 婷婷六月天天| 丁香五月成人| 色婷婷aV四虎| 97碰在线视频| 6080av| 丁香5月婷婷| 综合在线色婷婷| 激情五月综合网| 一级黄色影片| 屁股翘好撅高迎合跪趴| 亚洲无码yw| 成人天天爽| 激情网综合| 99狠狠| 成熟妇人A片免费看网站| 九一娱乐在线观看视频| 亚洲中文av| 丁香婷婷激情网站| 91精品丝袜久久久久久| 激情久久网 | 99热这里只有精品50| 99成人| 五月婷在线| 亚洲黄色av网站| 热中文字幕| 开心五月深爱五月| 亚洲乱码日产精品BD| 婷婷94s| 国产欧美日韩性爱| AV人人操| 超级碰碰97在线| 一级黄色影片| 五月丁香影院| 9久热精品在线视频| 色哟哟www| 色婷婷在线视频综合| 天天插天天插| 黄网在线免费观看| 婷婷五月天激情丁香| 婷婷五月天影院| 97欧美在线| 精品人妻久久久久久| 三级av在线| 天天 青草 制服丝袜 在线| 久久综合影院 | 热99在线精品| 亚州精品成人片| 五月噜噜| 日日噜噜夜夜狠狠久久丁香五月| 色婷婷99| 在线天堂9| 色五月开心久久网| 五月天激情婷婷小说| 亚洲中文字幕在线观看| 天天综合亚洲综合网天天αⅴ| 丁香婷婷性久久| 色都都狠狠色都都色综合色| 亚洲色综久久五月| 超碰无码老师| 五月丁香成人| 玖玖色综合色| 精品免费99| 国产成人一区二区三区在线观看| 91欧美| 婷婷六月久久综合导航| 色婷婷久久久| 天天精品视频免费观看| 激情综合5月| 大战熟女丰满人妻AV| 五月丁香久久网| 97干在线视频| 欧美天堂久久| 这里只有精品视频| 精品人妻伦一二三区久久| 伍月婷婷免费视频| 国产精品一区在线观看你懂的| 凹凸7777操操操| 涩五月婷婷| 少妇激情五月婷婷| 深夜婷婷 丁香| 色导航色婷婷五月天在线观看| 婷婷伊人綜合中文| 99精品在线观看视频| 九九热黄色| 这里只有精品视频| 色播丁香五月婷婷操:屄| A久久| 激情五月天色婷婷综合| 激情五月婷婷视频一区二区三区| 色五月天成人| WWW.五月天9999| 天天做天天爱天天高潮| 亚洲欧美999| www.无码com| 日韩999| 五月婷婷五月天亚洲无码| 99精品人人| 丁香五月天成人网站| 成人在线高清| 九九综合| 色婷婷小说| 丁香蜜臀黄色婷婷五月天| 99热99在线| 五月婷婷激情综合视频| 99在线观看视频免费| 午夜福利8055| 人妻熟人中文字幕一区二区| 精品久热69| 天天天天天色| 超碰九色| 伦乱人妻| 久久久97| 狠狠色五月天| 开心五月婷婷六月丁香| 欧洲精品爱爱| 日韩AV免费| 色五月首页| 六月丁香色婷婷| 97天堂| 五月婷婷久久网| 中文字幕乱码亚洲精品一区| 成人婷婷| 四色AVwww| 777久久综合视频| 色婷婷久久综合| 久久丁香网| 亚洲操B| www.99在线| 婷婷金品综合视频| 亭亭社区五月天| 天天天久久久| 婷婷五月激情欧美| 婷婷九月在线| 超碰成人黄色网| 少妇人妻丰满做爰XXX| 婷婷久久大香蕉| 婷婷午夜天| 婷婷深爱网| 亚洲成人在线播放| 精品女人九九九| 九九色院| a久久| 99噜噜| 人人草人人舔| 五月丁香六月婷婷亚洲| 97久久香草精品视频| 大香蕉九操| 日韩在线成人电影| 亚洲亚洲人成综合网络| 激情爱爱网站| 五月丁香激情四射| 婷婷基地爱| 五月丁香六月婷婷激情视频在线观看免费 | 婷婷开心激情五月激情网| 中文网AV| 99自拍视频在线| 大香蕉久久伊人婷婷五月丁香| 成人丁香五月婷| 色色色色区| 九九色网专区| 色婷婷六月精品| 丁香八月综合激情| 色久五月| www.色色色色| 色综合综合网| 99精品7| 丁香五月激情性色郤| 久久aaa| 久久99激情| 秋霞影音91人妻久久| 五月丁香久久激情网| 涩五月丁香| 激情婷婷六月| 日日舔夜夜操| 日狠狠| 色综合99| 欧美色五月| 五月婷婷丁香六月| 丁香婷婷六月| 日本97久久久精品| AV在线不卡网站| 亚洲成人超碰| 色情综合| 91精品熟女| 日日日影院| 久久丁香五月天| 天天肏视频| 五月婷婷综合在线亚洲视频| 加勒比日本一区二区三区| 五月丁香啪。| WWW久久久| 婷婷色五月天第7色| 五月综合六月婷婷| 五月婷婷亚洲| 青青草国产亚洲精品久久| 男人操女人高潮91视频| 激情五月天情色| 色综合九九| 六月伊人婷婷| 五月婷婷在线免费观看| 日日夜夜天天综合| 超级97碰碰| 久久婷婷色| 九九激情| 91紱請| 丁香五月天天哦| 亚城区在线| 五月婷婷色综图片| 日日做天天操夜夜爽| AV性爱在线| 伊人九九68| 99熟女| 中文在线视频久1| 欧美性生交XXXXX无码小说| 男人的天堂在线婷婷| a九九热www| 国产综合网在线| 99热地址| 色五月91| 欧美国产一区二区三区| 六月天婷婷| 超碰97色| 六月五月久久丁香| www久久99| 9色免费网| 五月综合婷婷久久在线| 99爱在线精品视频免费观看| 日韩久久系列| 夜夜人妻五月天| www.色婷婷| www.97干视频| 丁香六月天婷婷开心综合| 97综合在线| 99色干| 色婷婷久久| 天天揷综合网| 欧美va亚洲va| 婷婷色六月| 婷婷五月天影院| www.com五月天| 欧美十二区| www一区二区三区| 99日热在线视频| 五月丁香AV、伊人业余、性色熟妇| 中文字幕av久久爽一区| 久久婷婷色情7777网站| 亚洲AV日韩无码| 1024手机在线观看看片_日韩精品| 99网99热| 色五月中文字幕| 中文字幕,综合,91| 天天干天天操| 婷婷 丁香 久久| 久热这里只有精品视频免费观看| 少妇人妻丰满做爰XXX| 久久综合激情五月天| 99色色| AⅤ色区| 精品综合网在线| 青草激情在线| 国产女18毛片多18精品| 婷婷成人五月天成人文学小说| 五月婷婷综合性爱噜噜| 五月激激激情综合网| 久久五月天丁香花| 开心五月深爱婷婷| 欧美男女婷婷| 激情五月丁香亭亭| 97超碰在线免费观看| 色色亚洲视频| 97成人丁香婷婷| 国产又爽又猛又粗的视频A片| 亚洲色婷婷99一9|| 美女视频图片久久91| 成人 视频免费观看网站| 伊人影音无码一区二区三区| 日韩艹比| 人人色婷婷| 国产超碰在线| 五月香婷婷| 99视频精品8| 67194线路二在线观看| 丁香五月成人av| wwwss在线观看| 色九九综合色| www.91.com黄| 激情五月天色| 亚洲狠狠丁香婷婷香蕉| 99视频精品在线| 日本色婷婷久久99精品91| 午夜天堂一区人妻| 五月天婷婷在线播放免费| 99热全是精品| 五月婷婷六月丁香在线| 千人斩操逼| 久99精品视频| 亚洲综合五月天婷婷丁香| 日韩AV成人电影| 婷婷六月久久综合导航| 六月激情网| 小视频aaa久久久| 91婷婷丁香| 人人爱人人摸人人澡| 色婷婷五月天激情在线播放| 久Se视频在线观看| www.99热精品99.com| 免费视频WWW在线观看网站| 久99在线视频| 亚洲婷婷免费| www.狠狠干com| 天天爽—爽| 欧美久久婷婷| 九九热10| 综合网啪| 色综合色色色色| 51精品国内探花| a级毛片一区二区免费视频| 久久婷婷综| 日本久久婷| 久久久久久久11111111111| 六月丁香啪啪| 成人精品在线观看| 97视频久久| 婷婷射丁香| 激情五月丁香五月综合| 夜夜操夜夜操| 丁香五月激情视频在线| 日本美女天天日天天爽| 97婷婷丁香| 日韩 mm 不卡| 99操网站| 国产精品日本一区二区在线播放| www.99热视频| 五月停停色色丁香| aa久久| 99在线热视频| 亚洲人成色A777777在线观看| 天天爽天天干天天| 五月情色天| www五月天com| 九九激情视频| 五月丁香在线观看| 欧美碰碰| 91九色PORNY大屁股| 婷婷丁香熟女| 69热在线| 激情五月黄色小说| 九九99视频精品| 伊人综合网4| 五月亭亭六月激情| 99综合一区| 伊人丁香在线| 亚洲天堂爱爱| 深情五月天| 国产成人精品亚洲线观看| 人人性久久| 丁香五月婷婷成人网| www.色五月| 婷婷五月天AV在| 九九热这里只有精品9| 91精品无码| 51精品国内探花| 婷五月丁香| 色色婷| 丁香五月婷婷欧美成人色图| caopeng97日韩| 色婷婷五月综合| 日韩黄色网络| 久狠日av| 欧美大片| eeuss人妻| 4399在线日本A片| 久久丁香网| 人妻肉射免费观看| 婷婷久久久| 激情久久久久| 婷婷五月天电影网| 在线观看视频1区| 色婷婷五月基地在线| 国产亚洲在线观看| 九九色院| 五月亚洲| 色色色宗合网| 日逼免费视频| 天天色情站| 九九精品在线视频观看| WWW.婷婷五月天.COM| 97超级操操| 激情五月天小说| 琪琪色网在线| 男人综合网| 极品人妻VIDEOSSS人妻| 九九热99re8热免费观看| 五月丁香亭亭操逼| 六月色激情| 色五月五月婷婷| 99久久高清视频| 五月婷婷co.m| 亚洲午夜AV| 99久久丝| 婷婷五月婷婷| 婷婷和五月天| 色婷婷导航| 亚洲另类婷婷综合| 五月天成人综合| 亚洲旡码| 丁香婷五月天开心六月| 另类丁香综合| 开心激情综合| 小泽玛利亚视频一区二区| 99热国内| 超碰人人在线| 成人精品一区二区三区四区五区| 五月丁香六月激情在线| 五月天激情国产综合婷婷婷就去爱| 大香蕉九操| 婷婷五月天堂| 久久激情五月| 婷婷六月丁香激情| 99无码黄色视频| 精品99这里有| 久操操| 婷婷在线操| 尤物一区二区| 久久这里只有精品无码| 五月丁花色综合网| 色99综合色88| 91色情播放| 99精品综合在线| 人妻内射视频| 日韩黄色网络| 亚洲成人免费在线| 91人妻色色网| 丁香五月天之婷婷影院| 久久视频这里都是精品| 亚洲妇女熟BBW| www.sezonghe| 超碰日韩人妻在线| 五月婷婷手机在线| 婷婷丁香黄色| 狠狠爱五月婷婷| 99日韩| 九九在线精点品| 好好日激情五月天| 教师性爱毛片| 综合图片色色| 天天综合网91| 99这里只有| 色婷婷成人在线| 刘玥精品一区| 欧美日韩aaa| 97香蕉人人在线观看| 婷婷五月色激情欧美激情| 欧美色色色色色色色| 五月天婷婷色综合| 色婷婷丁香五月高清在线| AA片在线观看视频在线播放| 精品51XX| 97色啪| 六月激情网| 1995年关宝慧版蜘蛛女| 99综合99| 99久在线视频| 樱花99视频| 九色视频九色九色91jiuseshipin| 五月丁香综合在线| 亚洲情色一区| 婷婷五月成人| 色色免费网战视频| 亚洲 视频 导航 一区| 综合99综合久久久久久久| 99久久99久久综合| 嫩草AV久久伊人妇女超级A| 思思热在线播放| 亚洲99综合| 五月天偷拍| 亚洲第一精品成人999久久精品| 国产激情在线| 日韩成人精品中文字幕| 日日舔夜夜操| 六月婷欧美| a久久| 天天狠天天叉| 婷婷五月天堂网| 97超级碰人人| 婷婷内射视频在线| 亚洲中文无码成人| 肏日网在线看| 久久一热| 99综合激情久久精品久久| 欧美色色干| 蜜桃五月天| 97色色视频| 天天色爽| 久九九热| 天天拍天天操| 五月婷视屏在线观看| 夜夜夜天天操| 九月性爱网| 色五月综合网| 我要色综合五月婷婷| 性色综合网| 色婷婷综合网站| 婷婷五月天综合久久| 婷婷五月天天天日日夜夜| 91人人人人人人人| 丁香五月性| 丁香五月婷婷色| 涩五月婷婷| 97超碰9久热婷婷热| 97色色色| 天天爽天天摸人妻综合网| 大香蕉久久伊人婷婷五月丁香| 婷婷97C| 激情色播| 99热在线看片| 狠狠肏综合网| 五月丁香激情综合六月涩涩爱| 免费无码毛片一区二区A片| 一区二区乱码视频| 婷婷综合五月色播| 九九色色色| 影音 五月 婷婷 久久| 综合婷婷| 五月天婷婷激情小说电影| 热99精品视频观看| 99色五月| 久久久国产精品黄毛片 | 五月丁香好婷婷A片网| 青草青草视频2免费观看| AV操逼网| 婷婷丁香五月综合激情视频| 少妇丁香婷婷 | 韩国情人在线电视剧免费观看高清版全集| 97在线日本| 无码一区精品一区视频| 啊v视频在线观看| 色五月激情五月天| 青青草深爱激情网| 五月久久婷婷| 五月天激情日色在线| 亚洲亚洲人成综合网络| 婷婷丁香成人| 激情五月天小说网| 夜夜夜夜做天天天做无码视频| 综合久| 五月婷婷色啪| AV片在线观看| 乱岳熟女50岁| 欧美日韩成人在线| 五月综合婷婷五月| 久噜久噜| 色婷婷在线视频久| 丁香婷婷五月综合色情| 狠狠色大香蕉| 丁香五月婷婷综合激情哟哟哟| 色婷五月| 亚洲精品视频在线| 丁香婷婷九月| 99热在线精品观看| 婷婷丁香亚洲五月天| 久久久久久激情| 久久婷综合网| 婷婷五月欧美| 琪琪色网在线| BBWCUCKOLD精品熟妇| 青草五月天| 色五月欧美| 99色性爰网络| 99热99热不卡| www激情网| 天堂五月婷婷| 天天肏屄夜夜爽| 五月婷婷影院| 猫咪伊人久久| 日本3级片一区2区| 久久99jiu9| 狠狠色婷| 丁香五月天天久久综合小说| 开心五月婷婷| 五月天婷婷无码| 五月丁香激情啪啪| 婷婷的久久网站| 人人操插| 玖玖99免费视频| 婷婷综合爱| 五月丁香激情六月| 涩五月丁香| 色婷婷影音| 久久这里99| 久久这里99| 99热这里只有精品50| 天天综合天天做天天综合| 色,激情五月天| 91久久1118| 亚洲在线综合| XX久久| 亚洲免费观看高清完整版AV线| 伊人五月天97| 无码yw| 日韩人妻无码精品| 黄色精品五月婷婷| 婷婷午夜激情| 国产操逼网站| 久久日九九| 中文字幕,综合,91| 亚洲啪啪视频|