欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

自建AI模型網(wǎng)關(guān):從轉(zhuǎn)發(fā)工具到成本治理層的實戰(zhàn)改造

自建AI模型網(wǎng)關(guān):從轉(zhuǎn)發(fā)工具到成本治理層的實戰(zhàn)改造 自建AI模型網(wǎng)關(guān)這件事我得從一次并不風(fēng)光的對賬說起。上個月財務(wù)把模型API賬單甩到我桌上我看了一眼整個上半月的費用比去年季度總額還高。我們的網(wǎng)關(guān)明明上線了把所有模型調(diào)用都統(tǒng)一走了網(wǎng)關(guān)還做了轉(zhuǎn)發(fā)、鑒權(quán)、日志理論上一切盡在掌控怎么就燒出去這么多錢后來我把這幾周的調(diào)用記錄翻了個底朝天才慢慢意識到一個很扎心的事實你把流量收攏到自己的AI模型網(wǎng)關(guān)只是把事情“看清楚”了并沒有把成本“管住”。這個網(wǎng)關(guān)如果只做轉(zhuǎn)發(fā)本質(zhì)上就是一條更粗的管道模型貴不貴、調(diào)用合不合理、重復(fù)請求多不多這些真正的成本問題一個都沒碰。這篇文章就把我這次自建AI模型網(wǎng)關(guān)踩過的坑以及后來從“轉(zhuǎn)發(fā)工具”硬改成“成本治理層”的過程完整記錄下來希望能幫到正在自建或準(zhǔn)備自建網(wǎng)關(guān)的團(tuán)隊。1. 自建AI模型網(wǎng)關(guān)我當(dāng)初為什么這么干1.1 沒有網(wǎng)關(guān)之前業(yè)務(wù)側(cè)的模型調(diào)用亂成什么樣我們團(tuán)隊最初面臨的局面估計很多公司都一樣多個業(yè)務(wù)線都在做AI功能有智能客服、文本摘要、搜索排序還有幾個內(nèi)部效率工具。每一條業(yè)務(wù)線都自己申請模型API的Key自己連供應(yīng)商OpenAI、國內(nèi)大模型廠商等等。代碼里到處都是散裝的模型調(diào)用你根本不知道今天有多少個Key在線上跑。這種狀態(tài)帶來的問題不是一天兩天了。首先是Key管理混亂權(quán)限收不住有人離職了Key還在線上用換也不是不換也不是。其次是模型選擇完全靠自覺有的業(yè)務(wù)明明只是做一個文本分類順手就把旗艦?zāi)P团渖狭擞械臉I(yè)務(wù)為了省事把幾千行歷史聊天記錄一并塞進(jìn)上下文根本不看token消耗。再就是失敗重試策略不統(tǒng)一有一次一個下游供應(yīng)商抖動有個業(yè)務(wù)的重試邏輯一口氣打了20遍費用嘩嘩地漲。出了問題還特別難排查到底哪個業(yè)務(wù)、哪個場景、哪個用戶在調(diào)用完全沒有一個統(tǒng)一入口能看清楚。我當(dāng)時就提了一個方案自建一個AI模型網(wǎng)關(guān)把模型調(diào)用的入口統(tǒng)一收斂到一個服務(wù)上。核心目標(biāo)有三個統(tǒng)一接入、統(tǒng)一鑒權(quán)、統(tǒng)一日志。說得更直白一點我先不看成本優(yōu)化先把所有流量集中到一個口子上讓團(tuán)隊能知道每天有多少人在調(diào)用、調(diào)用的是什么模型、有沒有報錯。這個目標(biāo)在當(dāng)時看來非常合理大家也都覺得早該這么干了。1.2 初版網(wǎng)關(guān)設(shè)計把“轉(zhuǎn)發(fā)”做好我就以為萬事大吉初版網(wǎng)關(guān)設(shè)計得很簡單我當(dāng)時的想法是只要能讓業(yè)務(wù)方把代碼從直連模型API改成請求網(wǎng)關(guān)就算成功。技術(shù)選型上我用了一個輕量的中間層服務(wù)Python FastAPI加Redis接收所有模型請求校驗API Key然后把請求原樣轉(zhuǎn)發(fā)給對應(yīng)的模型供應(yīng)商拿到響應(yīng)后再原樣透傳給調(diào)用方。核心代碼攤開看其實就是一個轉(zhuǎn)發(fā)層。from fastapi import FastAPI, Header, HTTPException import httpx app FastAPI() UPSTREAM_MAP { openai: https://api.openai.com/v1/chat/completions, qwen: https://dashscope.aliyuncs.com/api/v1/services/aigc/text-generation/generation, } app.post(/v1/chat/completions) async def chat_completions(request: dict, x_api_key: str Header(...), x_upstream: str Header(openai)): # 鑒權(quán)校驗這個 Key 是否有權(quán)限調(diào)用 if not check_key(x_api_key): raise HTTPException(status_code401, detailinvalid key) # 轉(zhuǎn)發(fā)把請求體原樣打給上游 upstream_url UPSTREAM_MAP.get(x_upstream) if not upstream_url: raise HTTPException(status_code400, detailunknown upstream) async with httpx.AsyncClient(timeout60) as client: resp await client.post(upstream_url, jsonrequest, headers{ Authorization: fBearer {get_upstream_key(x_upstream)} }) return resp.json()當(dāng)時我還挺滿意因為這個服務(wù)上線很快兩天就接完了主要業(yè)務(wù)。上線第一周所有請求都正常流轉(zhuǎn)日志也統(tǒng)一了業(yè)務(wù)方反饋接入成本很低只要把base_url換掉就行。我一度以為這個項目已經(jīng)成了接下來只需要修修補補。1.3 上線兩周代價立刻出現(xiàn)了結(jié)果就是文章開頭那一幕月底對賬的時候賬單不僅沒降反而比上個月還高。我第一反應(yīng)是網(wǎng)關(guān)有Bug或者是有人惡意刷接口趕緊拉日志出來查。查完我才明白網(wǎng)關(guān)確實把所有調(diào)用收攏了但它本質(zhì)上只是把費用從多個供應(yīng)商賬單收攏到了一個出口。業(yè)務(wù)方以前怎么調(diào)用現(xiàn)在還是怎么調(diào)用以前用貴模型拍腦袋現(xiàn)在依然用貴模型拍腦袋以前重復(fù)請求反復(fù)打現(xiàn)在依然重復(fù)請求反復(fù)打。換句話說網(wǎng)關(guān)幫我把問題的可見度提高了卻沒幫我解決任何一個成本問題。你看到每一筆token在消耗但你阻止不了它們。這種感覺很難受就像裝了個水表發(fā)現(xiàn)家里漏水很嚴(yán)重但你手上沒有扳手關(guān)不掉閥門。那段時間我反復(fù)跟團(tuán)隊說一句話“轉(zhuǎn)發(fā)”解決的是技術(shù)通道問題而“成本浪費”是治理問題通道通了不代表成本會被管住。后來我把這次經(jīng)歷做了一次復(fù)盤核心結(jié)論是一個只負(fù)責(zé)轉(zhuǎn)發(fā)的AI模型網(wǎng)關(guān)充其量是個API代理層它沒有路由、沒有緩存、沒有配額、沒有計量就談不上成本治理。我決定開始改造。2. 只做轉(zhuǎn)發(fā)成本浪費到底出在哪2.1 貴模型被當(dāng)成默認(rèn)選項殺雞一直在用牛刀成本浪費的第一個大頭是模型選型嚴(yán)重不合理。我拉了一周的調(diào)用日志統(tǒng)計各模型的使用占比發(fā)現(xiàn)幾個旗艦?zāi)P驼剂丝傉{(diào)用量的六成以上。但實際上很多業(yè)務(wù)場景根本不需要那么強的模型比如文本標(biāo)簽分類、關(guān)鍵詞抽取、意圖識別、格式改寫這類任務(wù)用中等規(guī)格的模型完全能打。這里算一筆簡單的賬假設(shè)某旗艦?zāi)P洼斎雰r格是15元/百萬token輸出價格是60元/百萬token一個便宜模型輸入3元/百萬token輸出15元/百萬token。一個文本分類場景每天調(diào)用10萬次每次平均輸入2000 token、輸出200 token。旗艦?zāi)P鸵惶斓某杀敬蠹s是10萬乘以2000除以100萬乘以15再加上200除以100萬乘以60算下來是4200元。便宜模型一天的成本是10萬乘以2000除以100萬乘以3再加上200除以100萬乘以15只有900元。一天就差3300元一個月就近10萬元。而這只是一個場景。這種浪費的根源在于業(yè)務(wù)方?jīng)]有成本和模型能力匹配的意識。對他們來說我在代碼里寫死了旗艦?zāi)P湍芡瓿扇蝿?wù)就行不會有人關(guān)心token單價。網(wǎng)關(guān)如果不提供路由能力它就永遠(yuǎn)只能眼睜睜看著這些請求打向最貴的模型。2.2 重復(fù)請求反復(fù)計費同一個Prompt燒了好幾遍第二個大頭是重復(fù)請求。我發(fā)現(xiàn)有些接口一天之內(nèi)傳進(jìn)來的Prompt幾乎完全一樣比如“判斷用戶這句話是否屬于投訴”“給這篇文檔生成一段摘要”這類任務(wù)的輸入高度相似但因為沒有緩存每一次都實打?qū)嵈蚪o了模型API每一分錢都在重復(fù)計費。舉一個真實案例我查日志的時候看到一個接口一天內(nèi)完全相同的Prompt跑了八千多次。單次調(diào)用成本按2分錢算一天就白燒160元。你可能覺得160元不算多但同樣的情況在十幾個接口里都存在有些更夸張一天重復(fù)調(diào)用上萬次。積少成多一個月下來就是幾萬塊。這里面的問題在于很多內(nèi)部工具和自動化流程的調(diào)用模式是高度可預(yù)測的。同一個模板、同一份輸入隔幾分鐘跑一次結(jié)果幾乎不會變。對這類請求網(wǎng)關(guān)如果只是轉(zhuǎn)發(fā)它就是一臺沒有感情的“燒錢機(jī)器”但如果有一個精確緩存命中后直接返回歷史結(jié)果這部分成本就能直接歸零。2.3 重試與并發(fā)放大了損失模型一抖動費用翻倍第三個大頭是重試和并發(fā)帶來的費用放大器。當(dāng)時網(wǎng)關(guān)里配了一個很粗暴的邏輯只要上游返回超時或5xx就自動重試3次。這個策略在單次請求上看起來沒什么問題但一旦遇到模型供應(yīng)商大規(guī)模抖動所有業(yè)務(wù)同時開始重試問題就非??植懒?。舉個例子某次上游模型連續(xù)報警有20個業(yè)務(wù)同時處于失敗狀態(tài)每個業(yè)務(wù)都按約定重試3次瞬時流量直接擴(kuò)大了4倍。結(jié)果就是模型供應(yīng)商更慢、更多請求超時然后又有一些重試被觸發(fā)。賬單自然也跟著水漲船高。那個時候我才意識到重試策略不是越簡單越好而是必須配合退避算法和熔斷機(jī)制。真正應(yīng)該做的是快速失敗、有限重試、及時切走流量。除了重試還有并發(fā)問題。沒有限流的網(wǎng)關(guān)面對突發(fā)流量會全量轉(zhuǎn)發(fā)給上游結(jié)果上游被壓垮失敗的請求又開始重試整個鏈路進(jìn)入惡性循環(huán)。如果限了流至少能保證一部分請求正常完成另一部分快速返回“稍后再試”而不是把費用白白燒在失敗請求上。2.4 沒有配額與預(yù)算熔斷接口在裸奔最后一個大頭也是最容易被忽視的沒有配額和預(yù)算控制。我一直到賬單爆炸之后才意識到網(wǎng)關(guān)對調(diào)用方是完全信任的只要Key有效你想調(diào)多少次就調(diào)多少次想調(diào)多貴的模型就調(diào)多貴的模型。這就導(dǎo)致了一些典型的失控場景。測試人員對一個內(nèi)部接口做壓測一個小時打出幾十萬次調(diào)用某個定時任務(wù)因為數(shù)據(jù)問題陷入死循環(huán)一晚上把所有數(shù)據(jù)重新跑了一遍某個業(yè)務(wù)上線了新的實驗策略忘了關(guān)開關(guān)把流量全部切到旗艦?zāi)P蜕吓芰艘徽?。這些場景沒有任何一道閘門能攔住。我一直覺得成本治理的關(guān)鍵不只是看每一次調(diào)用而是要把每次調(diào)用的“額度”算清楚。就像公司預(yù)算一樣每個業(yè)務(wù)線每個月有多少模型調(diào)用額度用完了是降級還是停止必須提前定好規(guī)則。否則等賬單出來再查就已經(jīng)太晚了。3. 從“轉(zhuǎn)發(fā)”到“經(jīng)營成本”網(wǎng)關(guān)必須做什么3.1 模型路由按任務(wù)、按場景、按成本分級既然只轉(zhuǎn)發(fā)不行那網(wǎng)關(guān)第一步要做的就是模型路由。核心原則很簡單能用便宜模型解決的絕不調(diào)用貴模型能用小模型解決的場景絕不上旗艦?zāi)P?。把“業(yè)務(wù)要什么任務(wù)”和“哪個模型適合這個任務(wù)”對應(yīng)起來。路由的維度可以根據(jù)實際情況來定。我后來在網(wǎng)關(guān)里至少會考慮這幾個維度。第一是業(yè)務(wù)場景調(diào)用方請求時要傳一個scene字段比如text_classify、summary、code_gen、chat_demo網(wǎng)關(guān)根據(jù)場景直接決定默認(rèn)模型。第二是上下文長度傳入的Prompt或者歷史消息非常長時自動切到支持更大上下文且單價更合適的模型如果輸入很短就走延遲低、價格便宜的模型。第三是用戶等級免費用戶和付費用戶可以走不同檔次的模型這不只是為了省錢也是產(chǎn)品策略的一部分。第四是失敗切換上游模型不可用時自動路由到備選模型而不是直接報錯。我踩過的一個坑是路由規(guī)則一開始不要太激進(jìn)。先做觀測記錄每個場景真實調(diào)用量、token消耗、模型效果運行一兩周之后再根據(jù)數(shù)據(jù)調(diào)整路由策略。沒有數(shù)據(jù)支撐的路由規(guī)則很容易拍腦袋拍完就出問題。3.2 緩存精確緩存先落地語義緩存按需開緩存是解決重復(fù)請求最直接的手段。我把緩存分成兩檔來設(shè)計。第一檔是精確緩存也就是請求體完全一樣時直接返回歷史結(jié)果。這個實現(xiàn)最簡單也最容易看到效果。我在網(wǎng)關(guān)里對model、messages、關(guān)鍵參數(shù)做一個哈希Redis里存一份命中就直接返回完全不再打上游。第二檔是語義緩存字面不完全一樣但語義相同的請求比如“幫我總結(jié)一下這個文檔”和“請把這篇文檔做個摘要”可以通過embedding相似度來命中。語義緩存很誘人因為它能覆蓋更多請求但風(fēng)險也高。一是embedding計算本身有成本和延遲二是相似度閾值調(diào)不好容易誤命中返回一個不完全匹配的舊答案業(yè)務(wù)方會投訴質(zhì)量。所以我的建議是語義緩存只對特定高頻、結(jié)果相對穩(wěn)定的場景開啟并且做灰度驗證。還有一個原則要記住流式輸出、個性化回答、涉及隱私或合規(guī)要求的請求不適合做緩存。流式輸出要緩存必須等完整結(jié)果生成完首token延遲會變高個性化回答幾乎不會有重復(fù)隱私內(nèi)容留在緩存里本身就是隱患。3.3 限流、重試與降級把失敗成本控住轉(zhuǎn)發(fā)模式下的重試是災(zāi)難放大器所以網(wǎng)關(guān)必須具備三個能力限流、重試策略、熔斷降級。限流用令牌桶就夠了不用搞太復(fù)雜。每個業(yè)務(wù)、每個場景設(shè)置一個QPS上限超過部分直接排隊或快速失敗避免突發(fā)流量打爆上游也避免費用失控。重試策略一定要改不能無限重試默認(rèn)最多一次并且要做指數(shù)退避第一次失敗等0.5秒第二次失敗等1秒中間加隨機(jī)抖動防止所有請求同時重試。熔斷和降級是配套的。當(dāng)某個上游模型連續(xù)失敗率達(dá)到一定閾值比如30秒內(nèi)錯誤率超過50%就把這個上游標(biāo)記為熔斷狀態(tài)后續(xù)請求自動切換到備用模型。降級則是在配額用盡時使用某個業(yè)務(wù)的預(yù)算花完了可以降級到更便宜的模型繼續(xù)提供服務(wù)而不是直接拒絕用戶。這樣用戶感知不到服務(wù)中斷成本也不會失控。3.4 成本計量與標(biāo)簽體系讓每筆token都有歸屬前面說的路由、緩存、配額都依賴一件事情你必須知道錢花在了哪里。所以我后來在網(wǎng)關(guān)里加了全面的成本計量每個請求處理前后都記錄一條日志包含時間戳、業(yè)務(wù)線、場景、用戶ID、模型名、prompt_tokens、completion_tokens、總token、費用估算、緩存是否命中、命中了哪條路由規(guī)則等等。這些數(shù)據(jù)落到一張明細(xì)表里每天定時聚合成成本報表。只有有了標(biāo)簽體系你才能回答“哪個業(yè)務(wù)最燒錢”“哪個模型最浪費”“哪個用戶一天就把配額燒光了”這些問題。沒有計量的治理都是空話這句話我后來反復(fù)跟團(tuán)隊講。網(wǎng)關(guān)不是裝完路由和緩存就完事了它得像一個經(jīng)營儀表盤每天都讓你看見成本的流向。4. 關(guān)鍵方案落地路由、緩存、配額怎么實現(xiàn)4.1 整體架構(gòu)調(diào)整從純轉(zhuǎn)發(fā)到多級調(diào)度改造后的網(wǎng)關(guān)不再是一個簡單的轉(zhuǎn)發(fā)層而是變成了一個多級調(diào)度器。每個請求進(jìn)入網(wǎng)關(guān)后的處理流程大致是第一步鑒權(quán)解析API Key和請求頭第二步記錄原始請求元數(shù)據(jù)第三步路由模塊根據(jù)場景、上下文長度、用戶等級選擇模型第四步查緩存命中就直接返回第五步做配額檢查判斷這筆請求是否允許繼續(xù)消耗預(yù)算第六步調(diào)用上游帶超時、重試和熔斷邏輯第七步記錄計量數(shù)據(jù)寫成本日志。這個流程看著環(huán)節(jié)多但每一步都是輕量操作實際增加的時間在幾十毫秒以內(nèi)還是能接受的。更重要的是這個架構(gòu)讓網(wǎng)關(guān)從“搬運工”變成了“調(diào)度中心”成本控制能力一下子就有了。4.2 模型路由實現(xiàn)示例請求級模型選擇路由模塊我建議用配置驅(qū)動不要硬編碼在代碼里。可以在配置中心放一份路由規(guī)則運營人員直接調(diào)整不需要重新發(fā)布服務(wù)。下面這個示例簡化了配置格式核心是講清楚思路。# 路由規(guī)則可以在配置中心運行期更新 ROUTING_RULES [ {scene: text_classify, model: fast-model, max_input_chars: 4000}, {scene: extract, model: mid-model, max_input_chars: 8000}, {scene: code_gen, model: flagship-model, max_input_chars: 16000}, ] DEFAULT_MODEL fast-model LONG_CONTEXT_MODEL long-context-model def route_by_scene(scene: str, input_text: str) - str: normalized_scene (scene or default).strip().lower() for rule in ROUTING_RULES: if rule[scene] normalized_scene: if len(input_text) rule[max_input_chars]: return rule[model] # 輸入過長專門切到支持長上下文的模型 return LONG_CONTEXT_MODEL return DEFAULT_MODEL這里的關(guān)鍵點是業(yè)務(wù)方在接入網(wǎng)關(guān)時必須在請求頭或請求體里帶上scene字段。如果有些老接口不方便改也可以先通過URL路徑映射比如/v1/chat/completions/summary這樣的路徑直接對應(yīng)summary場景??傊酚傻囊罁?jù)越清晰后續(xù)調(diào)整越容易。4.3 緩存落地示例用Redis做精確緩存精確緩存是最容易上手的我用Redis的字符串結(jié)構(gòu)就夠了。核心思路是把“模型名、消息列表、關(guān)鍵參數(shù)”三個要素序列化后做SHA256哈希作為Redis Key緩存值就是模型返回的結(jié)果。import hashlib import json import redis r redis.Redis(hostlocalhost, port6379, db0) def _cache_key(model: str, messages: list, params: dict) - str: raw json.dumps({model: model, messages: messages, params: params}, sort_keysTrue) return model_cache: hashlib.sha256(raw.encode()).hexdigest() def get_cached_response(model: str, messages: list, params: dict): key _cache_key(model, messages, params) cached r.get(key) if cached: return json.loads(cached) return None def set_cached_response(model: str, messages: list, params: dict, response: dict, ttl: int 3600): key _cache_key(model, messages, params) r.setex(key, ttl, json.dumps(response))使用的時候在處理請求前先查緩存查到就直接返回查不到再調(diào)模型API拿到結(jié)果后寫緩存。TTL我一般不會設(shè)太長一小時到一天根據(jù)場景調(diào)。這里有個小技巧對于明顯包含時間戳、隨機(jī)數(shù)的請求緩存命中率會很低。可以在生成緩存Key前先做一層歸一化把時間戳、隨機(jī)數(shù)、無關(guān)緊要的空格等字段剔除再生成Key。這個操作能明顯提高命中率。4.4 配額與預(yù)算控制示例先估算費用再決定放不放行配額控制的思路是基于預(yù)算上限做前置判斷。每次請求進(jìn)來之前先根據(jù)模型和token數(shù)估算本次費用然后用Redis中的計數(shù)器看當(dāng)前業(yè)務(wù)當(dāng)天已經(jīng)消耗了多少如果加上本次費用會超過每日限額就走降級模型或者直接拒絕。下面是一段精簡的示例代碼。import time QUOTA_KEY quota:cost:{biz}:{day} def check_and_consume_quota(biz: str, estimated_cost: float, daily_limit: float) - bool: day time.strftime(%Y-%m-%d) key QUOTA_KEY.format(bizbiz, dayday) used float(r.get(key) or 0.0) if used estimated_cost daily_limit: return False r.incrbyfloat(key, estimated_cost) return True如果配額不足網(wǎng)關(guān)可以根據(jù)策略決定是返回429讓業(yè)務(wù)方感知還是自動降級到便宜模型。我建議在初期先做“拒絕”模式把問題暴露出來等業(yè)務(wù)穩(wěn)定了再切“降級”模式避免用戶在無感知的情況下拿到質(zhì)量下降的答案。成本明細(xì)表的結(jié)構(gòu)也很重要我用的是MySQL核心字段包括調(diào)用時間、業(yè)務(wù)線、場景、用戶ID、模型、prompt_tokens、completion_tokens、total_tokens、估算費用、緩存是否命中、路由命中的規(guī)則名、原始響應(yīng)JSON。有了這張表就可以寫各種聚合SQL來做成本分析。CREATE TABLE model_call_bill ( id BIGINT AUTO_INCREMENT PRIMARY KEY, call_time DATETIME NOT NULL, biz VARCHAR(64) NOT NULL, scene VARCHAR(64) NOT NULL, user_id VARCHAR(128), model VARCHAR(64) NOT NULL, prompt_tokens INT DEFAULT 0, completion_tokens INT DEFAULT 0, total_tokens INT DEFAULT 0, cost_cny DECIMAL(10, 4) DEFAULT 0, cache_hit TINYINT DEFAULT 0, route_rule VARCHAR(128), raw_response JSON, KEY idx_biz_time (biz, call_time), KEY idx_model_time (model, call_time) );SELECT biz, model, SUM(total_tokens) AS total_tokens, SUM(cost_cny) AS total_cost FROM model_call_bill WHERE call_time NOW() - INTERVAL 7 DAY GROUP BY biz, model ORDER BY total_cost DESC LIMIT 20;5. 踩坑記錄與問題排查速查5.1 緩存命中率為什么上不去緩存落地之后我遇到的第一個問題是命中率遠(yuǎn)遠(yuǎn)低于預(yù)期。查了一圈才發(fā)現(xiàn)很多業(yè)務(wù)在Prompt里帶了時間戳或者隨機(jī)字符串比如“今天是2025年6月1日請分析以下內(nèi)容”每次請求內(nèi)容都不一樣精確緩存當(dāng)然永遠(yuǎn)不命中。解決方法是做請求歸一化。在生成緩存Key之前先把明顯不影響結(jié)果的噪聲字段去掉比如時間戳、隨機(jī)ID、無意義的空格和換行。如果還是命中率低就要看業(yè)務(wù)場景是否真的適合緩存。有些場景每次輸入都完全不同硬上語義緩存也沒用沒必要為了緩存而緩存。語義緩存我也試了踩了不少坑。相似度閾值設(shè)高了命中很少形同虛設(shè)閾值設(shè)低了隔三差五返回一個語義上差不多但實際內(nèi)容有偏差的舊結(jié)果業(yè)務(wù)方立刻投訴質(zhì)量。最后我學(xué)到的經(jīng)驗是語義緩存只對低風(fēng)險、模板化的場景開比如“產(chǎn)品功能介紹”“內(nèi)部知識問答”這類結(jié)果和措辭不完全一樣沒關(guān)系但不會出大錯的場景。對生成代碼、醫(yī)療診斷、法律文本這類高風(fēng)險場景我堅決不開。5.2 路由規(guī)則上線后效果回退了路由規(guī)則剛上線的時候其中一個文本摘要場景被我強制切到了便宜模型。省是真的省了一個月少了將近八成的token費用但業(yè)務(wù)方很快反饋摘要質(zhì)量偶發(fā)下降有些長文檔的提煉不夠準(zhǔn)。說白了便宜模型不是不行而是在某些邊界場景下穩(wěn)定性不如旗艦?zāi)P汀_@件事給我的教訓(xùn)是路由規(guī)則的調(diào)整必須灰度。不能一把梭把整個場景切過去而是先放5%的流量對比效果和成本再逐步加大比例。同時要給每個場景配一個白名單某幾個核心客戶或者高價值用戶始終走旗艦?zāi)P推渌俗弑阋四P?。另外還要設(shè)置一鍵回退開關(guān)一旦質(zhì)量指標(biāo)惡化馬上切回原模型不要讓業(yè)務(wù)方在那里干著急。5.3 token計量口徑不一致對不上賬成本統(tǒng)計做完之后我發(fā)現(xiàn)網(wǎng)關(guān)里算出來的費用和模型供應(yīng)商賬單對不上差得還挺多。排查下來原因很多不同模型對token的定義不一樣有的按字符有的按token有的對緩存命中token打折有的把系統(tǒng)提示詞算在輸入里有的不算。如果我們自己在網(wǎng)關(guān)里估算token用字符數(shù)除以4這種粗略方式誤差會非常大。這個問題的解法是所有成本計量都以模型返回的usage字段為準(zhǔn)不要自己猜。網(wǎng)關(guān)在拿到上游響應(yīng)后把usage里的prompt_tokens、completion_tokens、total_tokens原封不動落庫再套用官方計費表計算費用。同時保留原始usage JSON方便以后對賬時追溯。如果供應(yīng)商支持流式返回記得在流結(jié)束時匯總各分段usage避免漏算。5.4 排查成本上漲的通用流程現(xiàn)在我的日常工作中排查成本問題已經(jīng)形成一套固定流程。第一步看成本趨勢圖找到漲幅最大的那天和業(yè)務(wù)線第二步按標(biāo)簽下鉆看TOP模型、TOP場景、TOP用戶一眼定位錢燒在哪里第三步翻對應(yīng)的請求日志看有沒有異常重復(fù)、異常重試、異常大token輸入第四步對照路由規(guī)則和緩存配置驗證是不是規(guī)則沒生效或者被繞過了第五步修復(fù)問題后觀察24小時確認(rèn)成本曲線回落。下面整理了一個速查表是我自己排查時常用的對照邏輯異?,F(xiàn)象可能的線索處理建議某個場景token突然暴漲上下文無限累積對歷史消息做截斷或摘要限制單次請求最大token數(shù)失敗重試次數(shù)多上游模型抖動或限流開啟熔斷重試次數(shù)降為1次增加指數(shù)退避同一Prompt被無限次調(diào)用緩存沒生效或Key設(shè)計不合理檢查歸一化邏輯確認(rèn)緩存Key覆蓋所有影響參數(shù)單個Key費用異常Key被盜用或測試腳本失控重置Key設(shè)置配額和每日上限網(wǎng)關(guān)成本統(tǒng)計和供應(yīng)商賬單對不上用量口徑不一致以官方usage為準(zhǔn)保留原始響應(yīng)JSON6. 說點心里話這次改造做下來我最后悔的是第一版網(wǎng)關(guān)太執(zhí)著于“轉(zhuǎn)發(fā)”這個動作把網(wǎng)關(guān)當(dāng)成了一個網(wǎng)絡(luò)管道只要數(shù)據(jù)能流過去就覺得任務(wù)完成了。但AI模型網(wǎng)關(guān)真正值錢的地方根本不在“轉(zhuǎn)發(fā)”而是在“在不影響業(yè)務(wù)效果的前提下用最便宜的方式把任務(wù)做完”。如果你現(xiàn)在正準(zhǔn)備自建模型網(wǎng)關(guān)我建議第一個版本就把四件事帶上計量標(biāo)簽、模型路由、精確緩存、配額熔斷。不要像我一樣先把轉(zhuǎn)發(fā)上線再被賬單打醒然后返工。另外也給還在猶豫是否要自建的團(tuán)隊提個醒自建網(wǎng)關(guān)本身有維護(hù)成本要跟著上游API的變更新增適配邏輯還要持續(xù)迭代路由策略。如果你們團(tuán)隊只有一兩個AI應(yīng)用直接使用開源的LLM網(wǎng)關(guān)可能更劃算先借用現(xiàn)成方案把成本觀測做起來搞清楚自己的調(diào)用畫像之后再評估要不要自研。自研不是不行但要清楚它解決的是“成本治理”問題不是“轉(zhuǎn)發(fā)通道”問題。我這次也就是栽在這個認(rèn)知偏差上希望你們能比我少走一段彎路。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
3p日韩网站视频| 久久五月天色婷婷| 五月婷婷深深爱| 欧美色图天堂网| 99精品偷自拍| 欧美色久| 丁香五月色| 久久这有这里精品| 国产日产成人亚洲欧美国产VA| 五月婷婷六月激情| 六月丁香五月婷婷| 狠狠干综合| 婷婷五月婷婷五月| 久9热| 夜夜做天天爽| 色婷婷五月基地在线| 免费观看2018www黄色操逼网站| 国产超碰在线| 69精品人人人人| 久久久精品色| 激情五月婷婷中文字幕| 日韩五月天婷婷| www久久久久| 天天色粽合合合合合合合| 色色色成人网| 99热99热在线| 五月丁香六月激情欧美综合| 欧美精品熟女一区二区| 天天做 天天爱| 久er免费视频| 色色成人網| 色色色婷婷五月| 天天干天天av天天射| 色噜噜狠狠色综合日日| 婷婷五月天影院| 五月天伊人综合| 骚。com| 欧美色色色色色色色色色色影视| 中文字幕丰满乱孑伦无码专区| 久久色五月| 99操不停| 色婷婷四色| 中文字幕丰满孑伦无码专区| 黄色热99| 国产女生爱爱AA| 99久久人妻精品无码二区| 中文无码婷婷| 开心激情婷婷| 少妇2做爰HD韩国电影| 开心五月网 | 九九久99免费视频| 综合久久久婷| 激情久久综合| 狠狠夜夜五月丁香| 五月天婷婷视频30| 综合色播| 91久久久久久久久| 国产SUV精品一区二区6| 婷婷99视频在线| 婷婷久久网| 婷婷伊人网| 狠狠干狠狠色| 狠狠精品干练久久久无码中文字幕| 丁香六月五月天| 久9热| 97视频久久| 色婷久| 婷婷九月激情| 91 影音先锋| 风流少妇A片一区二区蜜桃| 成人视频网| 久99| 区啪精品| 激情综合网之激情五月| 五月丁香婷婷三级| 婷婷五月天激情综合| 亚洲99综合| 91婷婷在线| 成人日韩欧美| 免费日本aⅴ中文字幕 | 国产精品久久..4399| 狠狠色婷婷7777久| 色噜噜狠狠狠狠色综合久欧美| 色欲久久99精品久久久久久| 婷婷色九月| 亚洲色9| 狠狠狠狠狠狠草| 五月丁香亚洲婷婷| 五月婷婷深深爱| 操草草草| 婷婷啪啪| 午夜丁香久久久久久| 97操男人的天堂| 91视频人人做97| 99在线观看亚洲| 五月深爱婷婷| 欧美影院婷婷| 激情骚五月| 大香蕉久| 国产激情在线| 91久久国产自产拍夜夜91久久精品文字>91麻豆精品国产 | 99玖玖视频| 玖玖在线视频福利| 狠狠综合网| 久久99网| 99免费在线视频| 婷婷精品视频| 五月天成人综合| 熟女激情五月天| AV九九| 日本黄色一级| 男人天堂伊人五月丁香| 爆乳熟妇一区二区三区爆乳| 夜色.cnm| 激情婷婷另类| 五月天婷婷小说| 9精品一区| 中文网AV| 色色网站在线| 超碰超碰在线| 天天操天天曰| 中文av在线观看| 激情文学 综合 色| 99无码超碰| www.婷婷com| 色噜噜狠狠色综合无码久久欧美| 欧美在线操| 沈娜娜av| av在线色五月丁香婷区久| 激情久久久| 五月天大香蕉AV| 五月天a婷婷伊人| 五月天激情图片网| 九九在线这里只有精品视频| 色五月丁香91| 五月深爱网| 五月天丁香| 亚洲永久免费| 人妻久久久久久久 | 五月天开心网| 99久久a线观| 日韩在线99| 久久久9久| 婷婷丁香五月天综合网| 超碰婷婷色| 99久久精彩视频。| XX色综合| 丁香婷婷视频一区二区| 久久日本wwww色| 丁香五月亚洲婷婷| 青青色com久久| 婷婷五月丁香香蕉| 丁香五月六月综合激情| 激情四射婷婷| 九九综合视频在线观看| 国产亚洲精品久久久久苍井松| 精品99这里有| 国产美女无遮挡裸体毛片A片 | 日日干天天爽| 婷丁香五月天| WWW、99热| 亚洲瑟瑟精品在线| 热婷婷在线视频| 99亚洲无码| 黄网在线免费观| 激情五月天无码| 黑人糟蹋人妻HD中文字幕 | 五月丁香六月婷婷不卡免费无码| 极品人妻VIDEOSSS人妻| 日日夜夜狠狠操| 九九视频热| 久久xx| 538久久| WWW.久久.COM| 亚洲人人操| 色99在线观看| 欧美性色A片免费免费观看的 | 五月婷婷自拍视频| 99久在线视频| 大伊香蕉精品视频在线| 日日夜夜狠狠| 九九综合视频在线观看| 色综合网页| 五月天亚洲综合网| 涩涩涩,com| 婷婷99狠狠躁天天久久久九九九| 久久婷婷五月天蜜桃| 亚洲无aV在线中文字幕| 嫩草AV久久伊人妇女超级A | 五月丁香久久网| 狠狠干无码| 激情六月五月婷婷综合网| 亚洲成人AV电影在线| 99热99热| 色婷婷综合久色AV五色最新| 婷婷综合另类| 激情六月婷婷| 色色狼人综合| 六月天丁婷婷| 色五月xxx| 欧美日韩成人综合9| 色噜噜狠噜噜视频| 密乳视频| 五月天婷婷色在线视频免费观看| 五月婷婷六月婷| 欧美超碰亚洲| .精品久久久麻豆国产精品| 这里只有精品69| 日韩高清成人| 九月大香蕉| 亚洲综合99| 五月丁香婷婷三级| 五月婷婷六月丁香激情综合网| 婷婷中文字暮| 色亭亭影园| 色婷天天| 五月丁香婷婷综合网| 欧美A级网站| 91黄色五月天视频| 国产亚洲精品久久久久久郑州| 人人舔人人| 五月天啪啪| 热婷婷av| 国产探花一片区| 开心激情网在线| 五月天激情av| 婷婷六月色播| 欧美综合五月丁香六月婷| 國語久久婷| 思思热99er| 99热97| 538在线精品| 内射丰满人妻| 伊人丁香婷婷东京| 激情黄色五月天| www超碰| 欧美成人精品一区二区| 丁香六月视频| 天天操夜夜玩!| 婷婷色亚洲| 五月天伊人综合| 色天使久久综合| 国产真实乱了老女人视频| 婷婷久久五月丁香| 中文字幕AV在线播放| 五月婷婷在线综合| 99久久极情精品一区| 五月亭亭六月激情| 甈你aaaaa| 99精品激情| 色五月偷偷| 99免费偷拍视频| 色五月亚洲| 中文av网站| 成人短视频在线| 婷婷午夜天| 国精产品一区二区三区| 五月婷婷天| 色婷婷激情五月天| 99热这里只有精品在线| 五月丁香婷草| 激情五月天影院| 激情久久五月天| 啪啪婷婷五月天激情| 婷婷五月六月丁香| 色综合综合色| 99精品国产在热久久| 久久九色| 偷拍九九热| 色五月 婷婷, 大香蕉| 字幕网AV中文字幕| 九九激情视频| 婷婷午夜| 丁香网五月网| 婷婷久久女人| 色情五月丁香| 五月天婷婷色播| 亚洲人妻一区二区| 久久九精品| 国产亚洲精品久久一区二区三区| 九九热在线视频观看| 日日干天天爽| 久久婷婷一级片| 9久久精品视频| 色色色婷| 99这里只有精品在线| 色婷婷丁香五月色综合网| 激情网婷婷婷| 天天日夜夜拍| 影音先锋男人站,影音先锋男人色资源网,影音先锋AV最新资源站,影音先锋AV资源 | 色情五月天婷婷| 丁香五月伊人| 99热免费| 中日韩狠狠色| 伊人干练久| 夜夜干夜夜操| 国产精品美女久久久久AV超清 | 五月天婷婷视频小说| 97久久草草超级碰碰碰| 成人超碰网| 久久99jiu9| 色婷婷伊人| 色婷婷丁香五月天在线视频| www婷婷| 91精品综合久久久久久五月丁香| 亚洲AV成人精品网站在线播放| 超碰男人色| 久久伊人日日夜夜| 亚洲久热| 91视频五月丁香| 五月久久五月激情| 综合网啪| 婷婷视频在线碰| 玖玖婷婷色五月| 激情网第四色| 丁香五月色| 99热有精品在线观看| 久久婷婷五月综合色奶水99啪| www.狠狠色.com| 热99在线精品| 欧亚中文A V| 久久99这里只有精品| 五月婷婷丁香在线| 亚洲字幕AV一区二区三区四区| 91日视频| 色色性爱视频| 久久9情免费| 激情av| 四色AVwww| 久久婷婷五月天| 99ri精品视频在线观看| 激情开心五月天| 久热re在线视频| 激情狠狠丁香月| 亚洲AV日韩无码| 五月婷久久综合| 丁香婷婷人妻| 玖玖婷婷五月天| 日韩淑女人妻luan伦激情精品一区二| 亚洲 五月 婷婷 成人| 五月婷婷啪啪| 五月丁香另类图片| 丁香五月婷婷超碰在线| 91久久五月天| 九九99精品视频| 亚洲殴洲精品Av在线| 丁香五月亚洲无码| 99国产精品久久久久久久久久久| 激情涩涩网| 99久久婷| 噜噜色天天开心| 大香蕉五月婷婷| 月色色综合婷婷网| 九九热精品| 久久受www免费人成| 五月综合777| 另类在线| 西瓜美女a片| 99噜噜噜在线播放| 五月婷婷免费视频| av大片在线| 亚洲五月天天| 久久五月婷天天干| 噜噜久| 免费观看日韩成人av| 中文字幕无码人妻少妇免费视频| 99热这里只有精品国产免费| 婷婷五月影院| 中文字幕 久久9999| 国产成人AV| 六月丁香激情最新更新| 久综合九综合99| 久久机热思思热| 天堂二区| 激情婷婷久久| 开心五月激情| 五月丁香亭亭电影久久| 色五月欧美| 五月婷婷六月丁香玖玖玫瑰91| 可以看的av| 久久大香蕉视频| 99热主页日本| 欧美日韓成人亚洲精品另类| 日韩二区搞逼插逼毛片| 天天插天天射| 天天草人人摸| 婷婷色狠狠| 深爱五月婷婷| 色色综合无码| 日本97人人| 婷婷久月| 激情五月黄色小说| 丁香五月亚洲综合| 亚洲旡码| 爱之国产色情综合| 99视频热99| 五月婷婷婷婷| 99自拍视频在线观看| 亚洲国产精品二二三三区 | 色五月激情综合网| 狠狠干总合| jiujiuxiangjiaowang| 五月天色丁香| 久久er这里只有精品| 午夜免费试看| 五月丁香色婷| 国产精品色| 粉嫩av蜜桃av蜜臀av| 久久婷婷五月| 99热这里都是精品| 91热er| 伊人激情网| 亚洲人妻Av| 综合综合色色| 五月花激情网| 日韩二区搞逼插逼毛片| 乱码操操| 五月丁香激情婷婷| 久久久久久久五月| 三十熟女| 亚洲午夜视频| www狠狠| 色噜噜狠狠色综合网| 婷婷五月天影院| 婷婷综合六月| 99热99网| 婷婷五月丁香久久| 五月丁香色色色| 亚洲免费看片| 亚洲精品永久久久久久| 国产又黄又爽又激情不遮挡视频在线观看| 怡春院久操| 亚洲情综合五月天| 思思热这里只有精品| 日韩精品无码99| 97狠狠色| 亚洲视频无| 色婷婷呢狠禁久禁| 天天干天天爽| 99热老司机| 丁香六月婷婷色XXXXX| 九九九精品视频免费观看| 久热爱大香蕉在线蜜臀悦色 | 日日干日日| 人妻精品一区二区三区| 亚洲丁香五月在线观看| 99在线观看免费精品视频| 狠狠色丁香婷婷五月| 久久小说网| 色五婷婷| 五月色亭丁香| 国产精女同一区二区三区久 | 成人短视频在线| 一本婷婷丁香久久| 超碰在线网站9| 天天日天天色| 狠狠色婷婷| 丁香六月婷婷综合缴| 色婷婷综合网站| 包操45分钟网站| 中文精品在| 成人AV综合在线| 日本韩国视频在线观看社区免费的9| 99热日本| 欧美在线视频99| 爱操人妻| 成人午夜无码视频| 久热这里只有精品99re| 亚洲九九夜夜| 一起草性爱不卡视频| 激情婷婷丁香五月天| 色深爱五月| 丁香五月大片| 久久与婷婷| 九九人妻福利| 狠狠干2007| 天天色情站| 成人噜噜网| 婷婷久久五月| 深爱激情五月天色婷婷| 蜜乳A√| 天天狠狠插| 日批在线看| 99热这里只有精品69| 99精品视频在线免费观看| 香蕉久久六月| 老司机午夜福利视频金瓶梅| 九九热九九| 婷婷色色播五月天| 激情六月一二| 狠狠爱五月婷婷| 婷婷综合在线| 国产日韩精品SUV| 欧美私人家庭影院| 丁香五月激情无码视频| 第五色婷婷| 99色视频| 激情五月天综合网| 久久婷婷原创视频| 91九色精品| 成人在线精品| VA婷婷亚洲| 激情五月天伊人影院| 五月丁香免费看| 色色99| 日日夜夜干| 三人荫蒂添的好舒服A片| 婷婷五月天性色| 欧美日韩国产一区二区| 婷婷综合激情| 精品色色色| 久艹大香蕉| 久久婷五月天| 婷婷基地成人五月天| 丁香六月色婷婷| 六月婷婷视频| 99无码精品| 色色色com| 狠狠爱丁香婷| 久久久人妻人伦| WWW.开心五月天.COM| 丁香六月婷婷色播| 国产露脸150部国语对白| 丁香五月激情五月| 五月情四婷婷| 丁香五月天.com| 嫩BBB槡BBBB搡BBBB| 欧美在线视频9| 亚洲99激情| 狠狠xx| 天天干天干| 九九精品9| 国产精品大香蕉| 一级A片天天操夜夜操| 人妻操逼视频| 激情中文在线| 亚洲综合婷婷五月天| 黄网在线免费观看| 激情国产五月| 国产乱码久久| 99热老网站| 久久久全国免费视频| 91久久婷婷| 亚洲色 视频| 色婷婷丁香五月| 五月丁香六月在线| 国产乱子轮XXX农村| 91无码视频| 五月丁香六月激情啪| 丁香五月天婷婷激情| 五月婷婷综合影院| 久久久久久久合一狠狠做深爱 | 青柠影视免费高清电视剧| 五月天激情网址| 午夜婷婷六月天| 久久这里有精品| 色色色色区| 狠狠色噜噜| 成人综合网站| 天堂婷婷五月在线| 91久久久久久| 天天色情站| 五月婷婷六月丁香综合| www98日本小时间到了| 99热在线这里| www超碰com| 婷婷八月激情| 九九aV| 激情综合无码| 日韩另类| 俺也去在线久久精品23欧美综合视频网站,丰满人妻一区二区三区在线视频53,丰满 | 久99久精品视频| 日本欧美999久久久三级片| 欧美日韩aaaa| 五月丁香婷婷激情爱爱| 久久综合丁香激情五月| 97国产精品女人碰碰| 天天日天天日天天搞| av大片在线| 欧美va亚洲va在线播放| 色婷婷很很十八禁| 亚洲综合丁香五月天| 丁香六月婷婷色XXXXX| 狠狠色噜噜色狠狠狠综合久久成人波 | 丁香婷婷五月六月久久| 丁香婷婷色九月| 婷婷五月中文字幕| 狠狠色婷婷7777久| 精品五月丁香| 丁香五月激情婷婷| 婷婷五月天色色| 婷婷五月天成人娱乐| 色五月丁香五月| 深爱开心激情网| 日本黄色三级片内射| 日本九九热| 成人做爰高潮A片免费视频| 成人狠狠成人狠狠成人狠狠成人狠狠| 狠狠噪| 欧美婷婷五月天| 久久久久亚洲AV成人无码电影| 伊人久久大香线蕉av一区| 久久婷婷五月天蜜桃| 五月丁香六月情| 色狠狠激情五月| 51精品国自产在线| 另类图片五月天| 亚洲av免费在线| 天天日天天干天天操| 欧美性爱特黄一级aaaassss| 草久私拍| 色播五月丁香| 99综合免费视频| 丁香五月婷婷大香蕉| 九九aV| 青草热视频这里只有精品| 色色色色色色色色色色色色色色,网站| 五月婷综合| 99re热精品在线视频| 国产国产乱老熟女视频网站97| 婷婷综合伊人丁香| 五月天天堂久久| 婷婷五月天伊人| 色五月综合激情| 亚洲午夜AV| 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | 人人操人人爰人人一天天碰夜夜拍夜夜爽-中国A级毛片天天看天天谢… | 日碰日| 五月婷婷六月丁香| 天天视频亚洲| 五月六月播婷婷| 丁香五月瑟瑟| 五月婷婷在线视频| 襙比视频| 99在线精品观看99| 五月婷九九草| 超碰在线caop| 婷婷六月久久综合导航| 亚洲成人在线五月天| 亭亭丁香久久五月| 2017狠狠干| 久cao香蕉影院| 色五月天电影| 一级二级色大片| 人人色AV| 蜜臀A∨在线水帘洞| 久久精彩视频99| 色综合五月| www.maotanji.com| 色色综合网络| va婷婷在线免费观看| 丁香六月婷婷久久综合八月| 97色啪| 日韩av手机在线观看| 超碰成人电影| 99激情视频| 婷婷丁香综合| 婷婷国产日本欧美| 婷婷激情五月综合| 乱码操操| 色五月色图| 亚洲a片免费观看| 国产精品久久久久久喷浆| 亚洲这里只有精品| 亚洲视频二区| 五月天婷婷綜合院| 久热亚洲| 亚洲操精品| 停婷丁五月在线| 五月深爱网| 五月天色网站| 五月天婷婷深深爱| 九九成人精品| 婷婷色情小说| 久久这里只有欧美| 婷婷丁香五另类网站| 亚洲综合激| 99er这里只有精品视频| 在线观看熟女少妇| 婷香五月网在线| 天天爽夜夜爽夜夜爽精品| 欧美色色色| 婷婷综合精品| 婷色五月| 婷婷六月网| 婷婷五月天,影院| 99热综合| 五月天综合区| 人人人人人人人草| 五月亭亭狠狠| 91久久精品无码一区二区三区| 亚洲a色| 色在线99| 99自拍视频| 久久色婷婷| 婷婷五月天av| 天天天天干| 色婷婷色综合久久精品V| 91人妻人人操| 五月婷婷九| 99热国产| 色综合性视频| 色婷五月| 欧美五月婷婷| 九九精品综合| 日本人妻伦在线中文字幕| 日韩成人中文| 97热在线精品| 五月丁香久久综合| 国模淫穴色图| AV在线大香蕉| 天天干一干| 国产肥白大熟妇BBBB视频| 99九九热播在线免费视频| 激情丁香五月AV| 亚洲综合字幕色色| 热这里| 五月天六月色| 狠狠狠狠狠狠| 99综合成人视频在线观看| 婷婷丁香色情| 天天色天天爱天天舔| 色综合综合网| www.99热视频| 五月天小说激情| 在线观看欧美| 五月婷综合网| 99久久婷婷国产综合精品草原| 无码 av电影| www.99热在线| 亚洲色情激情丁香五月| 婷婷在线综合| 天天综合天综合久久网| 开心婷婷中文字慕| 激情内射p| 婷婷激情六月| 婷婷狠狠97| 久久婷五月综合色| 久热大香蕉| tingtingcaobi| 亚洲综合五月天婷婷丁香| 中文不卡一二区| 色色综合网站| 日韩有码久久| 精品色色网| 丁香婷婷五月六月久久| 中文字幕久久婷九女同| 久热这里只有精品在线观看 | 99re这里只有精品免费| 99热精品在线在线| 亚洲综合五月天婷婷丁香| 综合伊人久久| 丁香五月激情无码视频| 亚洲人妻av伦理| 天天肏在线观看| 亚洲女婷婷五月基地综合久久久| 婷婷精品在线| 美女91一起草| 欧美人妻一区二区| 一二线视频 另类| 99色色热| 97干97色| 丁香五月天.com| 五月天婷婷婷| 色婷婷8| 米奇激情婷婷| 国产精品电影| 97人人草| 深爱五月激情五月| 九九九热精品| 激情综合网五月婷婷| 亚洲色综久久五月| 五月天婷婷综合网| 在线不卡的视频| 另类小说婷婷色| 老师的粉嫩小又紧水又多A片视频| 男女99免费视频| 色色丁香五月天| 丁香五月婷婷99| 久久婷婷激情视频| 五月天激情日色在线| 国产高清RV综合aVa| 日韩成人无码| 色五月婷婷五月久久| 色色99| 婷婷大美在线| 精品影院| 精品99只有。| 婷久久久| 丁香五月婷婷AV在线| 欧美婷婷综合网| 婷婷日日夜夜| A级毛片高清免费不卡播放谢谢谢谢| 人人操人人爱丁香五月| 91AV视频| 婷婷五月,偷窥偷拍网| 婷五月天| 噜噜在线| 婷婷五月天堂| 日韩另类| 天天射射夜| 91精品刘玥| 天天天操天天天日| 婷婷狠狠五月综合| 婷婷色正月| 激情五月丁香五月| 婷婷性爱影院| 欧美性爱五月天| 六月米奇色综合| 亚洲激情四谢| 亚洲激情婷婷| 五月丁香激情怕怕| 久热婷婷| 婷激情五月| 色噜久| 99热这里| 亚洲色情一区二区三区四区| 婷婷影院A成人| 亚洲视频伍月婷婷| 色婷婷97| 丁香五月成人| 99热这里只有精品4| 9久久久久| 超碰v| 狠狠人人婷婷| 六月婷婷网| 99riAV成人在线视频| 夜夜爱伊人| 丁香五月综合色婷婷| 婷婷5月久久综合网站| 亚洲无码yw| 五月丁香日本片| 日本97在线看片| 色综合网址| 米奇影视资源777狠狠色婷婷五月天激情网| 天天久久九九| 99自拍视频在线观看| 9久热这里只有精品视频| 一级无码作爱片| 97人人超| 婷婷丁香18| 99视频久久免费视频| 壅壅儕家a| 久99热在线观看| 六月色色婷婷| 182TV亚洲| a性生活久久无| 丁香五月婷婷啪| 五月涩涩网| 久久九九爽| 国产亚洲成人综合| 开心激情站| 欧美黑人巨大性生话| 5月婷婷6月六月丁香| 亚洲色涩视频| 丁香五月色五月| 色婷婷六月| 五月天婷婷色色| 婷婷五月天中文字幕| 热久久成人| 国产精品视频| 大香蕉久久视频久久视频| 婷婷婷婷色| 俺去也婷婷| 五月花婷婷丁香| 五月综合视频在线| 七七九色| 久久久五月天婷婷成人网| 久久er99热精品一区二区| 玖玖色综合网| 激情五月天开心| 1010日日无码| 丁香五月婷婷六月婷婷| 婷婷少妇激情| 九九精品re免费视频| 九九综合九| 九九热精品| 99爱视频在线观看这里只有精品| 人人摸人人| 亚洲热久久| 五月丁香狠狠爱婷婷综合| 99色6爱9热| 秋霞成人毛片一级A片| 色九四色| 少妇性按摩无码中文A片| 精品乱码久久久久| 激情久久久| 久久婷婷综合基地| 国产精品色婷婷99久久精品| 玖玖精品视频| 婷婷五月在线播放| 丁香五月无码| 狠狠干综合网| 五月天婷婷激情综合| 丁香五月天视频在线播放| 偷拍视频五月天| 婷婷五月天亚洲精品| 丁香婷婷偷拍| 五月丁香网中文字幕| 六月伊人婷婷| 狠狠草婷婷| 99热日| 九色视频这里只有精品| 欧美丁香五月天| 九九视频精品在线免费| 五月天伊人av| 久久在这里有精品| 情五月亚洲婷婷| 婷婷丁香人妻| 丁香婷停五月激情综合深爱| 深爱五月天 开心网| 婷婷激情综合色五月久久,色婷婷丁香花,丁香婷婷五月情天,久久婷婷五月综合色 | www.婷婷.com| 五月丁香欧美综合| 色五月大| 啪啪婷婷五月天激情| 久久久精品色| 久久婷婷精品| 美女婷婷激情亚洲| 日韩一级| 日本色色网站| 91无码视频| 天天拍夜夜撸| 丁香五月人妻熟女| 亚洲色9| 婷婷中文字幕版| 欧美狠狠地| 九色七七| 久9视频| 欧美激情综合五月色丁香| 婷婷丁香18| 国产精品色婷婷久久久精品| 激情久久久久久| 在线中文字幕视频| 激情涩涩网| 丁香五月成人在线| 色播五月婷婷| 天天澡天天狠天天天做| 97香蕉碰碰人妻国产欧美| 五月天激情婷婷| 99久久超级| 久久九九国产| 伊人婷婷青青cao| 99热精品一| 免费看成人747474九号视频在线观看| 99久久网站| 丰满少妇猛烈A片免费看观看| 97婷婷五月激情六月丁香伊人| 日本三久久| 色国产五月| 综合久久99| 丁香五月天激情| 丁香五月婷婷总啪啪| 99色天堂| 九九精品在线网| 亚洲激情av| 丁香五月婷婷av影院| 天天久久狠狠色综合| 涩涩五| 婷婷五月激情欧美| 日本不卡一区二区三区| 九月激情综合| 手机AVAV天堂看网| 91色久| 天天干天天av天天射| 久久婷婷色情7777网站| 日本精品99| 五月天另类小说久久小说网| 123草逼网| 99精品偷自拍| 99热主页日本| 亚洲色婷婷五月| 五月婷在线| 婷婷五月激情综合啪啪| 亚洲精品无码99热| 第四色五月婷婷| 久久机只有这里精品| 99久热在线精品| 激情婷婷22月间| 精品一区二区三区四区五区六区介绍| 五月婷婷啪啪综合网| 色色色网站| 狠狠综合网| 色婷婷基地| 秋霞AV吧| 狠狠香婷婷五月| 97碰超级人人看| 婷婷天堂综合网| 婷婷激情六月中文| 九九热99热| 97久人人| www,99热| 九色综合网| 五月丁香在线国产 | 五月色亚洲| 五月婷婷综合成人| 久久黄色网扯| 日日夜夜狠狠| 51成人| 免费黄色AV| 九九美女视频| 五月丁花六月丁香综合| 精品爱欲五| 五月天成人网婷婷| 综合久| 天堂婷婷五月在线| 五月天社区| 99人妻碰碰碰久久久久禁片| 激情丁香九九五月综合网| 天堂在线婷婷| 人妻操逼视频| 久久丁香网| 成人性爱无码| 九久久九精品视频| 天天五月情| 4438亚洲欧美| 午夜不卡久久精品无码免费| 婷婷色色狠狠| 99操视频| 另类综合激情| 少妇高潮呻吟A片免费看软件| 六月激情婷婷色| 丁香五月激情五月| 九九成人高清视频| 五月丁香综合激情| 亚洲综合五月天综合| 成人做爰A片免费看视频| 婷婷丁香水多多视频| 9久久久久| 婷婷五月天AV| 99精品在线| 五月婷婷深深爱爱| 日韩黄在免| 能看的AV网站| 久久日本wwww色| 影音先锋777xfplay色资源网站| 五月天激情综合网| 婷婷五月天开心网| 丁香五月激情啪| 婷婷中文字幕| 色五月天天| 超碰免费电影| 色五月中文网| PORNY九色9l自拍视频成人| 色婷婷大香蕉| 久久久久久久久久久久久久人妻视频 | 色五月婷婷天天操夜夜操| 久久久精品免费啪啪国| 九九热在线精品| 五月丁香久久呀| 六月激情婷婷| 丁香五月婷婷激情123| 国洲夜色亚热在线久久| 91精品久久久久久久| 激情网五夜婷婷| 67194线路二在线观看| 无人精品在线视频| 九九性视频| 国产做爰视频免费播放| 天天搞天天爽| 99热偷拍| 亚洲成av人影院| 91精品久久久久、久五月天| 超碰99热| AV片在线观看| 九色七七| 亚洲精品小视频| 热久久这里只有三级视频| 欧洲亚洲午夜| 这里只有精品99www| 亚洲av网址| 色噜噜狠狠色综无码久久合欧美| 久热网站| 丁香婷婷人妻| 大香久久伊人网| 婷婷五月六月丁香| 日本色色色| 丁香丁婷五月激情| 国内在线99视频| 久99久视频| 天天搞天天色综合| 3pAV| 婷婷综合九月| 超碰成人公开| 婷婷情色五月天| 九月丁香五月婷婷| 婷婷五六月丁香| 亚洲免费在线观看岛国| 51精品国自产在线| 天天操B| 橾逼网| 婷婷丁香五月视频| 天堂中文国产| 色欲色香综合网站| 激情综合色| 色色色国产| 开心婷婷五月天激情网| 日日干日日s| 五月开心婷婷极品激情| 久9草在线观看视频| 人妻熟人中文字幕一区二区| 色婷婷88| 六月激情久久| 丁香五月中文字幕久色| 久久婷婷青草五月天| 91精品婷婷国产综合| 亚洲a片免费观看| 精品9197碰| 婷婷综合五月天| 九热视频| 免费观看大片视频 丁香婷婷 六月欧美| 婷婷播播五月天| 婷婷爱综合| 激情五月综合网最新| 97碰成超视频免费视频| 久久艹 五月天| 超碰碰碰碰| 五月天激情小说| 99九九99九九九视频精彩| 色婷婷色99国产综合精品| 人人干Av| 久噜久噜| 亚洲成av人影院| 秋霞性爱AV| 色丁香五月天| 五月天婷婷综合免费| 激情亚洲网| 色色色.COM| 人妻操操色| 热的无码综合视频| 激情四射网| 色色五月天丁香| 丁香花色色网| www999日韩精品| 欧洲综合视频| 性一交一乱一交A片久久四色| 色综合视频| 国产av基地| 色婷另类| 丁香五月婷婷黑人妻黄色电影院| 婷婷五月天久久| 亚洲视频二区| 99re在线观看| A√天堂网在线| 丁香六月天AV| 偷偷狠狠久久婷婷五月天| 激情五婷网| 超级碰碰碰97免费| 五月丁香啪啪综合| 亚洲激情在线| 亚洲视频在线观看99| 思思久ren热| 人妻操操色| 婷婷色av| 欧美狠狠色| 激情综合色| 色五月激情网| 婷婷综合中文| 色黄啪啪| 99热国产婷婷| 亚洲欧美婷婷五月色综合| 久久婷狠狠色| 蜜臀AV在线成人| 夜夜天天天天天干天天爽| 婷婷五月天性| 99在线免费观看| 99精品在线观看| 狠狠色丁香| 91n啪啪| 日本三级韩三级99久久| 中文幕无线码中文字蜜桃| 久热这里只有| 精品99在线| 综合激情婷婷| 另类在线| 岛国AAAV| 激情婷婷在线中文字幕| 丁香六月婷婷激情综合| 丁香欧美| 97碰久久| 久久99热这里只频精品6学生| 天天操天天插天天射| 91avse| 五月六月丁香婷婷在线观看| 岛国AV网站| 亚洲天天| 久久99人人| 日韩综合网络男女香蕉a片| 精品人妻久久久| 五月天成人网在线观看| 六月激情综合| 91怕怕网| 综合色色婷婷| 99热精品免费在线观看| 激情色色色| 婷婷五月天基地| 99爱操| 99热人人| 综合网五月天123| 丁香久月| 色五月婷婷在线| 亚洲色婷婷五月天| 婷婷六月婷婷| 亚洲天堂aaaa| 色播五月丁香| 亚洲国产色婷婷| 99热99成人| 夜夜爽天天爽| 五月丁香啪啪啪| 久久婷婷的综合色丁香五月| 天天爽天天爽天天爽天天爽天天爽| 五月天婷婷在线AN| 99色网站| 九九 激情 网| 这里只有精彩视| 五月丁香婷婷色| 爽tv | 婷婷综合色图| 97好吊操| 一起草av| 97操在线视频| 俺也高清无码高清视频| 色色无码| 婷婷在线视频| 五月婷婷免费在线视频| 亚洲欧洲另类| 色墦五月丁香| 丁香五月天成人网站| 99操视频| 国产a视频| 襙比视频| 被男人添B超爽视频| 亚洲国产婷婷色五月 | 成人AV在线网站| 丁香五月婷中字幕| 国产精品人人做人人爽人人添| 九九99热| 洗浴中心操B视频| 欧美性生交XXXXX无码小说| 这里只有精品日韩| 成人精品在线| 国产第99页| 九九视频这里有精品| 色色色九九九五月婷婷| 婷婷色五月丁香六月欧美啪| 色五月播五月| yw国产AV| 这里只有精品69| 成人做爰高潮A片免费视频| 五月综合亚洲色| 婷婷午夜天| 97人人操| 婷婷六月激情| 六月婷久久| 丁香五月婷婷基地| 殴美97色| 日日夜夜狠狠操| 超碰成人影视| 亚洲久热无码| 婷婷激情五月天桃花网| 久热最新视频| 中文字幕无码人妻少妇免费视频| 五月天婷婷网站| 亚洲狠狠终合停停终合| 噜噜噜色噜噜| 久草婷婷网 |