欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

LiteLLM:大模型API協(xié)議統(tǒng)一與跨平臺(tái)調(diào)用實(shí)戰(zhàn)指南

LiteLLM:大模型API協(xié)議統(tǒng)一與跨平臺(tái)調(diào)用實(shí)戰(zhàn)指南 1. 為什么“l(fā)itellm”突然在開發(fā)者圈里被反復(fù)提起——它根本不是個(gè)新工具而是個(gè)“協(xié)議翻譯官”最近在幾個(gè)技術(shù)群和開源社區(qū)里頻繁看到有人發(fā)“l(fā)itellm”三個(gè)字母配文往往是“剛試了下居然能用OpenAI的SDK調(diào)通Claude”“本地跑Llama3代碼一行沒改就切到了Ollama”“我們API網(wǎng)關(guān)加了層litellm下游服務(wù)完全無感”。這詞出現(xiàn)得既突兀又高頻不像某個(gè)新爆火的模型倒像一個(gè)突然被集體發(fā)現(xiàn)的“隱藏開關(guān)”。我第一次見到它是在幫某公司做AI服務(wù)架構(gòu)復(fù)盤時(shí)對(duì)方后端團(tuán)隊(duì)指著監(jiān)控圖表說“上個(gè)月我們把所有大模型請(qǐng)求都過了一層litellm錯(cuò)誤率降了63%但開發(fā)同學(xué)壓根沒動(dòng)業(yè)務(wù)代碼?!蔽耶?dāng)時(shí)第一反應(yīng)是這玩意兒難道是個(gè)流量鏡像工具還是某種智能路由中間件翻完文檔才明白litellm壓根不碰模型推理本身——它干的是更底層、更枯燥、也更關(guān)鍵的事統(tǒng)一抽象所有大模型服務(wù)商的通信協(xié)議。你肯定寫過類似這樣的代碼openai.ChatCompletion.create(modelgpt-4, messages[...])。但當(dāng)你想把gpt-4換成Anthropic的Claude就得改成anthropic.Completion.create(modelclaude-2, prompt...)換成Google Gemini又得換一套genai.GenerativeModel.generate_content(...)本地跑Llama3可能還得用transformers.pipeline(...)或者Ollama的requests.post(http://localhost:11434/api/chat, ...)。這些API長(zhǎng)得完全不同參數(shù)名、返回結(jié)構(gòu)、錯(cuò)誤碼、流式響應(yīng)格式全都不兼容。而litellm做的就是在這堆五花八門的“方言”之上硬生生建起一座通用“普通話”廣播站。它不訓(xùn)練模型不優(yōu)化推理速度甚至不緩存結(jié)果——它只做一件事把你的OpenAI風(fēng)格調(diào)用實(shí)時(shí)翻譯成Claude能聽懂的Anthropic格式再把Claude返回的JSON原樣轉(zhuǎn)成你熟悉的OpenAI結(jié)構(gòu)。這種能力聽起來平平無奇但在真實(shí)工程場(chǎng)景里它直接消解了“模型供應(yīng)商鎖定”這個(gè)長(zhǎng)期困擾AI應(yīng)用層的頑疾。比如某高校實(shí)驗(yàn)室的模擬項(xiàng)目X原本用GPT-4做論文摘要生成預(yù)算砍半后要切到開源模型傳統(tǒng)做法是重寫所有調(diào)用邏輯、適配新返回字段、處理新錯(cuò)誤類型至少一周而他們用了litellm只改了兩行環(huán)境變量LLM_MODELollama/llama3和OLLAMA_BASE_URLhttp://192.168.1.100:11434當(dāng)天下午就跑通了全流程。這不是魔法是協(xié)議層的標(biāo)準(zhǔn)化暴力——而litellm就是那個(gè)默默扛起翻譯大旗的工程師。提示litellm不是模型部署工具也不是推理加速器。如果你在找怎么讓Llama3跑得更快、顯存占用更低litellm幫不上忙。它的價(jià)值只存在于“調(diào)用方”與“提供方”的接口縫隙里。一旦你開始同時(shí)對(duì)接3家以上模型服務(wù)商或需要在不同模型間快速灰度切換它就從可選項(xiàng)變成必選項(xiàng)。2. litellm的核心工作原理三步協(xié)議轉(zhuǎn)換比你想象中更輕量也更精密很多人初看litellm文檔會(huì)誤以為它是個(gè)重型代理服務(wù)——畢竟名字帶“LM”又常被放在API網(wǎng)關(guān)位置。實(shí)際上它的核心邏輯異常簡(jiǎn)潔只有三個(gè)確定性步驟且全部發(fā)生在毫秒級(jí)內(nèi)。我把它拆解成一個(gè)廚房類比假設(shè)你是餐廳主廚業(yè)務(wù)代碼每天要向不同供應(yīng)商OpenAI、Anthropic、Ollama下單食材模型請(qǐng)求。以前你得分別記住給魚販子打電話要說“來5條活鱸魚去鱗去鰓冰鎮(zhèn)打包”給肉鋪發(fā)微信得寫“黑豬五花肉1公斤肥瘦3:7切薄片”給菜農(nóng)發(fā)短信又是另一套話術(shù)。litellm就像你雇的專職采購助理他只做三件事統(tǒng)一收單、精準(zhǔn)轉(zhuǎn)譯、標(biāo)準(zhǔn)回傳。整個(gè)過程不參與烹飪推理也不囤貨緩存純靠腦子快。2.1 第一步統(tǒng)一入口——所有請(qǐng)求都走“OpenAI兼容模式”litellm強(qiáng)制所有上游調(diào)用必須使用OpenAI SDK的語法。這意味著無論你背后接的是哪家模型代碼永遠(yuǎn)是這一套from litellm import completion response completion( modelgpt-4, # 這里填的不是真實(shí)模型名而是litellm的路由標(biāo)識(shí) messages[{role: user, content: 你好}], temperature0.7, streamTrue # 支持流式這點(diǎn)很關(guān)鍵 )注意這個(gè)model參數(shù)——它根本不是真實(shí)的模型ID。在litellm里model是一個(gè)路由鍵routing key比如gpt-4對(duì)應(yīng)OpenAI官方APIclaude-3-opus對(duì)應(yīng)Anthropicollama/llama3對(duì)應(yīng)本地Ollama服務(wù)。這個(gè)設(shè)計(jì)看似簡(jiǎn)單實(shí)則暗藏玄機(jī)它把模型選擇權(quán)從代碼層抽離交給了配置層。你可以用環(huán)境變量export LITELLM_MODEL_MAP{gpt-4: azure/gpt-4, claude-3-opus: anthropic/claude-3-opus-20240229}動(dòng)態(tài)映射也可以在Kubernetes ConfigMap里定義甚至通過數(shù)據(jù)庫查詢實(shí)時(shí)加載。我見過最激進(jìn)的用法是某公司把model參數(shù)設(shè)為業(yè)務(wù)標(biāo)簽如summarize-prod然后在litellm配置里定義這個(gè)標(biāo)簽實(shí)際指向哪個(gè)物理模型和集群運(yùn)維人員改配置就能切流量開發(fā)完全無感。2.2 第二步協(xié)議翻譯——JSON字段的“同義詞詞典”式映射這才是litellm最體現(xiàn)工程功力的部分。它內(nèi)部維護(hù)著一張超大的“協(xié)議詞典”精確到每個(gè)字段的映射關(guān)系。以最常用的messages數(shù)組為例OpenAI格式要求[{role: user, content: xxx}]Anthropic格式要求{prompt: \n\nHuman: xxx\n\nAssistant:}注意這個(gè)詭異的\n\nHuman:前綴Ollama格式要求{messages: [{role: user, content: xxx}], stream: true}看起來像OpenAI但實(shí)際字段含義不同litellm的翻譯器會(huì)逐字段解析看到messages就按規(guī)則展開成Anthropic的prompt字符串看到temperature就轉(zhuǎn)成Anthropic的temperature值不變但如果是max_tokens就得映射成Anthropic的max_tokens_to_sample遇到streamTrue則要為Anthropic構(gòu)造特殊的HTTP頭Accept: text/event-stream。這個(gè)過程不是正則替換而是基于AST抽象語法樹的深度解析——因?yàn)橛行┳侄未嬖谇短滓蕾?。比如OpenAI的functions參數(shù)在Anthropic里根本不存在litellm會(huì)自動(dòng)降級(jí)為tool_choicetools組合甚至在不支持的模型上靜默忽略。我曾用Wireshark抓包對(duì)比過litellm代理前后的HTTP請(qǐng)求發(fā)現(xiàn)它連User-Agent頭都做了標(biāo)準(zhǔn)化處理確保下游服務(wù)無法感知中間層存在。2.3 第三步響應(yīng)歸一化——把千奇百怪的返回揉成標(biāo)準(zhǔn)OpenAI JSON模型返回的數(shù)據(jù)比請(qǐng)求更混亂。OpenAI返回choices[0].message.contentAnthropic返回completion字段Ollama返回message.contentGoogle Gemini返回candidates[0].content.parts[0].text。litellm的響應(yīng)處理器像一個(gè)精密的JSON手術(shù)刀它先識(shí)別響應(yīng)來源通過HTTP狀態(tài)碼、響應(yīng)頭或JSON結(jié)構(gòu)特征再啟動(dòng)對(duì)應(yīng)的解析模板。所有解析結(jié)果最終都塞進(jìn)一個(gè)統(tǒng)一的Python對(duì)象{ id: chatcmpl-xxx, object: chat.completion, created: 1715823456, model: gpt-4, # 注意這里顯示的是路由鍵不是真實(shí)模型 choices: [{ index: 0, message: {role: assistant, content: 你好}, finish_reason: stop }], usage: {prompt_tokens: 12, completion_tokens: 5, total_tokens: 17} }這個(gè)結(jié)構(gòu)完全兼容OpenAI SDK的ChatCompletion對(duì)象意味著你原來的response.choices[0].message.content代碼一行不用改。更絕的是錯(cuò)誤處理——OpenAI拋openai.error.InvalidRequestErrorAnthropic拋anthropic.APIStatusErrorlitellm全部捕獲統(tǒng)一轉(zhuǎn)成litellm.exceptions.BadRequestError連錯(cuò)誤消息都做了語義對(duì)齊比如把Anthropic的prompt is too long轉(zhuǎn)成OpenAI風(fēng)格的This models maximum context length is 200000 tokens. However, your messages resulted in 200050 tokens.。我在某跨平臺(tái)系統(tǒng)里實(shí)測(cè)過當(dāng)Ollama服務(wù)宕機(jī)時(shí)litellm返回的錯(cuò)誤棧里完全看不到Ollama字樣業(yè)務(wù)層只看到熟悉的litellm.exceptions.TimeoutError日志告警系統(tǒng)無需任何改造。注意litellm的協(xié)議映射不是靜態(tài)的。它支持運(yùn)行時(shí)熱更新——當(dāng)你新增一個(gè)模型支持只需提交PR到其GitHub倉庫的litellm/model_prices_and_context_window.json文件維護(hù)者合并后下個(gè)版本就會(huì)自動(dòng)生效。這種“社區(qū)共建協(xié)議標(biāo)準(zhǔn)”的模式正是它能快速覆蓋100模型的根本原因。3. 實(shí)戰(zhàn)部署的四大關(guān)鍵決策點(diǎn)選對(duì)模式比調(diào)參重要十倍litellm提供了三種部署形態(tài)但90%的線上事故都源于最初選錯(cuò)了模式。我見過太多團(tuán)隊(duì)在生產(chǎn)環(huán)境踩坑有的用import litellm方式嵌入業(yè)務(wù)代碼結(jié)果因模型超時(shí)拖垮整個(gè)服務(wù)有的盲目上litellm proxy卻沒配熔斷導(dǎo)致雪崩還有的在K8s里用Deployment跑proxy卻忘了設(shè)置Pod反親和性結(jié)果所有流量打到同一臺(tái)節(jié)點(diǎn)。這四個(gè)決策點(diǎn)每一個(gè)都直接影響系統(tǒng)穩(wěn)定性。3.1 模式一SDK嵌入式——適合MVP驗(yàn)證但必須加“安全圍欄”這是最簡(jiǎn)單的用法pip install litellm然后在Python代碼里直接from litellm import completion。優(yōu)點(diǎn)是零運(yùn)維成本調(diào)試方便特別適合個(gè)人開發(fā)者或小團(tuán)隊(duì)快速驗(yàn)證想法。但危險(xiǎn)在于——它把模型調(diào)用變成了同步阻塞操作。如果下游模型API響應(yīng)慢比如某些國產(chǎn)模型P99延遲達(dá)8秒你的Flask/FastAPI接口就會(huì)卡住線程池耗盡整個(gè)Web服務(wù)假死。我的解決方案是強(qiáng)制加三層圍欄超時(shí)控制永遠(yuǎn)不依賴模型服務(wù)商的默認(rèn)超時(shí)。litellm的timeout參數(shù)必須顯式設(shè)置且分層設(shè)定response completion( modelgpt-4, messages[...], timeout10, # 總超時(shí)10秒 # 內(nèi)部再細(xì)分連接2秒讀取8秒 api_basehttps://api.openai.com/v1, max_retries0 # 關(guān)閉自動(dòng)重試由上層業(yè)務(wù)控制 )異步封裝用asyncio.to_thread把同步調(diào)用扔進(jìn)線程池避免阻塞Event Loopimport asyncio from litellm import completion async def async_completion(**kwargs): return await asyncio.to_thread(completion, **kwargs) # 在FastAPI里這樣用 app.post(/chat) async def chat_endpoint(): response await async_completion(modelgpt-4, messages[...]) return response降級(jí)熔斷集成tenacity庫實(shí)現(xiàn)優(yōu)雅降級(jí)from tenacity import retry, stop_after_attempt, wait_exponential, retry_if_exception_type from litellm.exceptions import TimeoutError, RateLimitError retry( stopstop_after_attempt(2), waitwait_exponential(multiplier1, min1, max10), retryretry_if_exception_type((TimeoutError, RateLimitError)) ) def robust_completion(**kwargs): return completion(**kwargs)提示嵌入式模式下務(wù)必禁用litellm的內(nèi)置重試max_retries0。因?yàn)闃I(yè)務(wù)層的重試邏輯更懂上下文——比如用戶提問失敗可以返回“網(wǎng)絡(luò)有點(diǎn)慢請(qǐng)稍后再試”而不是默默重試三次再報(bào)錯(cuò)。3.2 模式二獨(dú)立Proxy服務(wù)——生產(chǎn)環(huán)境首選但配置是靈魂當(dāng)你的QPS超過50或需要集中管控審計(jì)、限流、計(jì)費(fèi)就必須上獨(dú)立Proxy。litellm自帶litellm --port 4000命令啟動(dòng)一個(gè)標(biāo)準(zhǔn)OpenAI兼容API服務(wù)。但直接nohup litellm --port 4000 上線等于裸奔。真正的生產(chǎn)配置需要這五個(gè)核心文件config.yaml模型路由表必配model_list: - model_name: gpt-4 litellm_params: model: azure/gpt-4 api_base: https://your-azure-instance.openai.azure.com api_key: ${AZURE_API_KEY} # 從環(huán)境變量讀取 api_version: 2023-05-15 - model_name: llama3 litellm_params: model: ollama/llama3 api_base: http://ollama-service:11434litellm_settings.yaml全局策略限流、緩存、日志general_settings: master_key: sk-1234567890abcdef # API密鑰所有請(qǐng)求需帶Bearer database_url: sqlite:///./litellm.db # 用于記錄調(diào)用日志router_config.yaml智能路由高級(jí)玩法model_group: gpt-4 routing_strategy: least-busy # 自動(dòng)選負(fù)載最低的實(shí)例 num_retries: 3Dockerfile容器化基礎(chǔ)避免環(huán)境差異FROM python:3.11-slim COPY requirements.txt . RUN pip install -r requirements.txt COPY config.yaml /app/config.yaml CMD [litellm, --config, /app/config.yaml, --port, 4000]K8s Deployment資源與彈性關(guān)鍵resources: requests: memory: 512Mi cpu: 250m limits: memory: 1Gi # 必須設(shè)內(nèi)存上限否則OOM Killer會(huì)殺進(jìn)程 cpu: 1 livenessProbe: httpGet: path: /health port: 4000 initialDelaySeconds: 30我?guī)湍彻具w移時(shí)發(fā)現(xiàn)他們最初的Proxy配置里memory limit設(shè)為2Gi結(jié)果在流量高峰時(shí)litellm的Python進(jìn)程內(nèi)存飆升到1.8Gi觸發(fā)K8s OOM Kill每小時(shí)重啟3次。改成1Gi后配合--max-tokens參數(shù)限制單次請(qǐng)求長(zhǎng)度穩(wěn)定性提升到99.99%。3.3 模式三邊緣計(jì)算部署——在IoT設(shè)備上跑litellm真有人這么干最讓我驚訝的用法是某硬件團(tuán)隊(duì)把litellm編譯成ARM64二進(jìn)制刷進(jìn)Jetson Orin邊緣盒子。他們的需求很極端工廠產(chǎn)線上的機(jī)械臂需要實(shí)時(shí)理解工人語音指令“把A區(qū)第三臺(tái)機(jī)器的溫度閾值調(diào)到85度”但網(wǎng)絡(luò)只允許訪問內(nèi)網(wǎng)Ollama服務(wù)且不能有外網(wǎng)依賴。litellm的--lite模式完美匹配litellm --lite --port 4000 --model ollama/llama3啟動(dòng)后內(nèi)存占用僅42MBCPU峰值30%比他們?cè)瓉碜约簩懙腜ython協(xié)議轉(zhuǎn)換腳本快3倍。這種部署的關(guān)鍵技巧是用--lite參數(shù)關(guān)閉所有非必要功能數(shù)據(jù)庫、Prometheus監(jiān)控、Web UI靜態(tài)鏈接所有依賴生成單文件二進(jìn)制pyinstaller --onefile --strip litellm/cli/main.py用--timeout 2強(qiáng)制超時(shí)防止邊緣設(shè)備因網(wǎng)絡(luò)抖動(dòng)卡死注意邊緣部署時(shí)務(wù)必禁用--telemetry遙測(cè)。litellm默認(rèn)會(huì)上報(bào)匿名使用數(shù)據(jù)這在離線環(huán)境中不僅無效還會(huì)因DNS查詢失敗拖慢啟動(dòng)。4. 踩坑實(shí)錄那些文檔里不會(huì)寫的12個(gè)血淚教訓(xùn)litellm文檔寫得極簡(jiǎn)但真實(shí)世界遠(yuǎn)比文檔復(fù)雜。我把過去兩年在多個(gè)項(xiàng)目中踩過的坑按嚴(yán)重程度排序標(biāo)出根本原因和繞過方案。這些經(jīng)驗(yàn)沒有一次出現(xiàn)在官方Issue里全是深夜Debug時(shí)熬出來的。4.1 坑位1Ollama的/api/chat和/api/generate別混用Ollama提供兩個(gè)API/api/chat類OpenAI和/api/generate類Curl。litellm默認(rèn)走/api/chat但很多老版本Ollama0.1.32的/api/chat有嚴(yán)重bug當(dāng)messages里包含tool_calls時(shí)會(huì)返回500錯(cuò)誤。而/api/generate雖不標(biāo)準(zhǔn)卻穩(wěn)定得多。解決方案不是升級(jí)Ollama客戶環(huán)境不允許而是強(qiáng)制litellm走generate端點(diǎn)# 在config.yaml里這樣寫 - model_name: ollama-llama3 litellm_params: model: ollama/llama3 api_base: http://localhost:11434 # 關(guān)鍵告訴litellm用generate模式 custom_llm_provider: ollama_chat # 或 ollama_textollama_chat對(duì)應(yīng)/api/chatollama_text對(duì)應(yīng)/api/generate。后者返回結(jié)構(gòu)不同但litellm能自動(dòng)歸一化。4.2 坑位2Azure OpenAI的api_version必須和model嚴(yán)格匹配Azure OpenAI的API版本和模型是強(qiáng)綁定的。比如gpt-4-turbo必須用2024-04-01-preview而gpt-4老模型只能用2023-05-15。litellm不會(huì)校驗(yàn)這個(gè)它只負(fù)責(zé)轉(zhuǎn)發(fā)。結(jié)果就是你配了model: azure/gpt-4-turbo但api_version: 2023-05-15Azure直接返回{error: {code: UnsupportedApiVersion, ...}}。排查時(shí)你會(huì)看到litellm日志里一堆400 Bad Request但錯(cuò)誤消息被litellm的錯(cuò)誤處理器截?cái)嗔?。繞過方案在config.yaml里為每個(gè)模型單獨(dú)配api_version并用model_name做區(qū)分model_list: - model_name: gpt-4 litellm_params: model: azure/gpt-4 api_version: 2023-05-15 - model_name: gpt-4-turbo litellm_params: model: azure/gpt-4-turbo api_version: 2024-04-01-preview4.3 坑位3流式響應(yīng)streamTrue在Nginx反向代理下丟失數(shù)據(jù)這是最隱蔽的坑。當(dāng)你把litellm Proxy放在Nginx后面開啟streamTrue時(shí)前端可能只收到第一個(gè)chunk就斷開。根本原因是Nginx默認(rèn)緩沖SSEServer-Sent Events響應(yīng)。解決方案是修改Nginx配置location /v1/chat/completions { proxy_pass http://litellm-proxy; proxy_http_version 1.1; proxy_set_header Upgrade $http_upgrade; proxy_set_header Connection upgrade; # 關(guān)鍵禁用緩沖 proxy_buffering off; proxy_cache off; proxy_buffer_size 4k; proxy_buffers 8 4k; }4.4 坑位4litellm的fallbacks機(jī)制在模型不可用時(shí)會(huì)靜默降級(jí)litellm支持配置備用模型fallbacks: [gpt-4, gpt-3.5-turbo]。但問題在于當(dāng)gpt-4超時(shí)litellm會(huì)自動(dòng)重試gpt-3.5-turbo且不通知上游。業(yè)務(wù)代碼拿到的還是modelgpt-4的響應(yīng)但實(shí)際是3.5模型算的。這在需要模型可追溯的金融場(chǎng)景里是致命的。解決方案關(guān)閉自動(dòng)fallback改用get_model_info()手動(dòng)探測(cè)from litellm import get_model_info try: info get_model_info(gpt-4) if info.get(status) healthy: response completion(modelgpt-4, ...) else: # 記錄日志走降級(jí)邏輯 logger.warning(gpt-4 unhealthy, using fallback) response completion(modelgpt-3.5-turbo, ...) except: response completion(modelgpt-3.5-turbo, ...)4.5 坑位5自定義模型如HuggingFace TGI的max_new_tokens參數(shù)傳遞失效當(dāng)你用litellm調(diào)用HuggingFace Text Generation InferenceTGI服務(wù)時(shí)max_tokens參數(shù)不會(huì)自動(dòng)轉(zhuǎn)成TGI的max_new_tokens。litellm的TGI適配器有個(gè)bug它只認(rèn)max_new_tokens不認(rèn)max_tokens。結(jié)果就是你設(shè)了max_tokens100TGI卻用默認(rèn)值通常是20。修復(fù)方案在調(diào)用時(shí)顯式傳max_new_tokensresponse completion( modelhuggingface/meta-llama/Llama-3-8b-chat-hf, messages[...], max_new_tokens100, # 必須用這個(gè)參數(shù)名 # max_tokens100 # 這個(gè)會(huì)被忽略 )4.6 坑位6litellm Proxy的/health端點(diǎn)返回200不代表模型可用/health只檢查litellm進(jìn)程是否存活不檢查下游模型。我見過最慘的案例Proxy健康但所有模型配置里的api_key都過期了結(jié)果所有請(qǐng)求返回401 Unauthorized而健康檢查依然綠燈。解決方案是寫個(gè)自定義健康檢查腳本定期調(diào)用completion測(cè)試真實(shí)鏈路#!/bin/bash # health-check.sh if curl -s -o /dev/null -w %{http_code} \ -H Authorization: Bearer sk-123 \ -H Content-Type: application/json \ -d {model:gpt-3.5-turbo,messages:[{role:user,content:hi}]} \ http://localhost:4000/v1/chat/completions | grep -q 200; then echo OK else echo CRITICAL: Model endpoint down exit 1 fi4.7 坑位7litellm的caching功能會(huì)緩存錯(cuò)誤響應(yīng)litellm支持Redis緩存但默認(rèn)會(huì)把400 Bad Request這類錯(cuò)誤響應(yīng)也緩存。比如用戶傳了非法JSONlitellm返回錯(cuò)誤這個(gè)錯(cuò)誤被緩存10分鐘。之后相同請(qǐng)求進(jìn)來直接返回緩存的錯(cuò)誤而不是重新校驗(yàn)。繞過方案在litellm_settings.yaml里禁用錯(cuò)誤緩存caching: True cache: type: redis host: localhost port: 6379 # 關(guān)鍵只緩存2xx響應(yīng) cache_responses: [200]4.8 坑位8多租戶場(chǎng)景下master_key無法區(qū)分租戶用量litellm的master_key是全局API密鑰所有請(qǐng)求共享同一個(gè)key。但企業(yè)客戶需要按租戶統(tǒng)計(jì)用量比如A公司用了多少tokenB公司用了多少。litellm原生不支持必須自己加一層。解決方案用litellm.proxy.hooks鉤子在請(qǐng)求進(jìn)入時(shí)注入租戶信息# hooks.py def pre_call_hook(user_api_key_dict, *args, **kwargs): # 從請(qǐng)求頭提取租戶ID tenant_id kwargs.get(headers, {}).get(X-Tenant-ID) if tenant_id: # 把tenant_id塞進(jìn)kwargs后續(xù)可記錄 kwargs[tenant_id] tenant_id return kwargs, args # 在config.yaml里引用 litellm_settings: environment_variables: - LITELLM_HOOKShooks.pre_call_hook4.9 坑位9litellm的model_alias_map在動(dòng)態(tài)路由時(shí)失效model_alias_map用于靜態(tài)別名比如把my-gpt4映射到azure/gpt-4。但如果你在代碼里動(dòng)態(tài)拼接model名modelf{tenant_id}-gpt4這個(gè)映射就不生效了因?yàn)閘itellm只查字面量匹配。解決方案改用router的動(dòng)態(tài)路由from litellm.router import Router router Router( model_list[ { model_name: gpt-4, litellm_params: {model: azure/gpt-4} } ], routing_strategysimple ) # 動(dòng)態(tài)路由 def get_model_for_tenant(tenant_id): if tenant_id enterprise-a: return gpt-4 else: return gpt-3.5-turbo model get_model_for_tenant(enterprise-a) response router.completion(modelmodel, messages[...])4.10 坑位10litellm的logging級(jí)別DEBUG日志會(huì)泄露API密鑰litellm的DEBUG日志會(huì)打印完整HTTP請(qǐng)求包括Authorization: Bearer sk-xxx。在K8s里這些日志會(huì)進(jìn)ELK造成密鑰泄露。官方文檔沒提這事。解決方案在litellm_settings.yaml里關(guān)閉敏感日志log_level: INFO # 不要用DEBUG # 或者用filter litellm_settings: environment_variables: - LITELLM_LOG_LEVELINFO4.11 坑位11litellm Proxy的/models端點(diǎn)返回的模型列表不包含自定義模型GET /v1/models默認(rèn)只返回litellm內(nèi)置支持的模型名如gpt-4,claude-2但你配置的ollama/llama3不會(huì)出現(xiàn)在列表里。前端UI想動(dòng)態(tài)渲染模型下拉框時(shí)會(huì)找不到選項(xiàng)。修復(fù)方案在config.yaml里顯式聲明model_list: - model_name: ollama/llama3 litellm_params: model: ollama/llama3 api_base: http://... # 添加這行讓/ models返回它 model_names: [gpt-4, claude-2, ollama/llama3]4.12 坑位12litellm的timeout參數(shù)在流式請(qǐng)求中行為異常當(dāng)streamTrue時(shí)litellm的timeout參數(shù)只控制連接建立時(shí)間不控制整個(gè)流式響應(yīng)的總時(shí)長(zhǎng)。結(jié)果就是連接很快建立但模型生成慢客戶端等10分鐘才斷開。這是因?yàn)榱魇巾憫?yīng)是長(zhǎng)連接timeout機(jī)制失效。終極方案用asyncio.wait_for包裝import asyncio from litellm import completion async def safe_stream_completion(**kwargs): try: # 設(shè)置總超時(shí)包括流式傳輸 return await asyncio.wait_for( asyncio.to_thread(completion, **kwargs), timeout30 # 強(qiáng)制30秒內(nèi)完成 ) except asyncio.TimeoutError: raise TimeoutError(Stream timeout after 30s) # 在FastAPI里 app.post(/stream) async def stream_endpoint(): response await safe_stream_completion( modelgpt-4, messages[...], streamTrue ) return StreamingResponse(...)最后分享一個(gè)小技巧litellm的GitHub倉庫里tests/目錄下的測(cè)試用例比文檔更真實(shí)。比如想確認(rèn)某個(gè)模型的字段映射是否正確直接搜test_anthropic.py看它的test_completion函數(shù)里傳了什么參數(shù)、期望什么返回——這才是最權(quán)威的協(xié)議說明書。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
婷婷五月天.com| 成人一级片| 人妻丰满精品一区二区A片| 久久看婷婷| 这里只有精品69| 国产精品久久久99视频| 国产激情AV| 人妻五月天激情开心网| 色播激情| 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | 国产成人精品一区二三区熟女在线| 色爽九九| 99久久网站| 久久成人天| 国产伊人五月天| 91人操| 91久久人人操| 超碰免费人人肏| 99re在线播放| 丁香五月激情综合| 日日噜噜夜夜狠狠久久丁香六月| 久久九九爽| 欧美丁香婷婷五月天| 森林影视大全,最好看的2019年视频 | 91丨九色丨东北熟女| 思思精品热在线| 国产精品五月丁香| 热的国产,热的综合,热的有码| 在线成人网址| 思思99久久| 色五月大香蕉婷婷| 丁香激情五月少妇| 日本在线wwww| 久久婷婷五月综合色天| 色五月在线综合| 欧美69久成人做爰视频| 丁香五月婷婷免费视频| 久久久天堂国产精品女人| 色婷婷久久| 亚洲激情四射| 能直接看的av网站| 色色色综合色| 天天艹夜夜艹| 黄网在线播放| 97色在线| 亚洲亚洲人成综合网络| 91精品综合久久久久久五月丁香| 色噜噜狠狠色综无码久久合欧美| 国产肥白大熟妇BBBB视频| 开心深爱激情网| www.99久久久| 五月丁香婷婷色| 欧美婷婷日本| 91丨九色丨熟女高潮| 日韩99视频| 欧美性爱五月天| 婷婷五月天综合久久| 亚洲欧美另类在线23p| 五月婷婷六月婷| 99在线免费视| 丁香五月天人体| 在线区区区| 五月天婷婷基地丁香| 婷婷导航| 五月丁香婷婷综合在线| 快乐婷婷五月天| 色狠狠五月天| 乱女乱妇熟女熟妇综合网站| 五月婷高清视频| 婷婷激情另类| 色五月五月丁香| 就爱操www com| 九九九九九无码| 国内婷婷丁香社区在线播放| 婷婷丁香人妻| 色色色欧美色色| 九九亚洲小视频| 思思99re这里只有| 久热这里只有精品在线| 婷婷淫淫狠狠六月| AV成人在线播放| 五月丁香激| 99免费热视频在线| 狠狠色丁香| 人妻精品一区二区三区| 色婷婷丁香A片区毛片区女人区| 色婷婷影院| 午夜天堂啪啪| 97一区二区| 色色99| .精品久久久麻豆国产精品| 疯狂做受XXXX高潮A片动画| 成人精品视频99在线观看免费| 色一情一乱一伦一区二区三区| 亚洲精品又粗又大又爽A片| 欧美性生交A片免费看| 亚洲性爱AV在线| 欧美成人AAA片一区国产精品| 午夜亚洲AV日韩无码| 久久精品熟女亚洲AV麻豆| 中文超碰视在线| 色婷婷另类| 97AV人人插人人操| YJLZZJLZZ亚洲乱熟无码| 亚洲国产婷婷色五月| 无码一区二区日韩| 天天日天天操天天干| 色色免费网战视频| 色婷婷国产精品综合在线观看| 狠狠爱激情网| 久久xxxx| 国产操B| 夜色爱爱亚洲| 丁香五月欧美激情| 五月天另类综合网| 99热在线观看精品免费| 欧美三日本三级少妇三99| 中文字幕 码精品视频网站| AA丁香综合激情| 久久久网站| 亚洲乱码日产精品BD| 在线综合亚洲欧美65| 曰本aaaaaa丈片| 99人人精品| 久9热视频在线观看| 人妻AV在线观看| 久热这里只有精品6官网亚洲| 性婷婷| 91婷婷五月天综合视频| 丁香五月手机在线| 欧美色五月| 怡红院AV亚洲一区二区三区H| 婷婷香蕉香| 91视频免费后入强操| 色一情一乱一乱一区91| 午夜九九电影| 婷婷色导航| 激情久久久久| 91打屁股免费看| 操比激情五月| 三级三久久线久久99久目本WW| 亚洲日韩人妻操逼| 色爱亚洲| 激情五月天在线视频| 被男人添B超爽视频| 婷婷干| 久久五月婷婷丁香| 性小说五月天| 激情六月综合| 思思热99热| 国产小精品| 艹色18p| 丁香九九九九| 五月婷婷丁香大陆免费| 99久久久国产精品免费蜜乳tv| 五月婷婷丁香五月婷婷丁香| 香蕉久久国产AV一区二区| 淫视馆av三区| 久婷婷婷| 九九久久综合网站| 色射影院| 五月天丁香婷婷视频网址| 亚洲乱码w在线观看| 欧美激情综合| 五月天综合激情网| 色五月欧美| 五月天丁香啪啪网| 人人人操| 九九热视频免费的| 99自拍视频网站| 国产午夜精品一区二区三区嫩草| www.激情五月天.con| 91操人| 五月丁香六月综合激情网| 色婷婷综合影院| 九九久久99| www.久久久久久久久久.com| 99热综合| 五月天婷婷影院影院观看| 婷婷五月天激情四射| 蜜乳久AV| 97碰在线| 五月丁香色播| 伊人狠狠狠综合| 夜夜操,天天撸| 91精品久久久久| 亚洲中文字幕在线观看| av无码电影| wWwCom夜操wwW| 色色哒五月婷婷六月丁香| 97人人干| 五月婷婷丁香大香蕉| 丁香五月婷婷基地| 婷婷五月天狠狠搞干| 91久久婷婷| 九九热狼人| 欧美日朝成人| site:ornaments52.com| 91狠狠色丁香婷婷综合久久精品| 狠狠狠狠青草| 五月婷婷综合激情| 激情综合国产| 日比视频91| 久99久在线| 婷婷丁香高潮了| 欧美在线视频免费播放| 99综合色色色| 99er这里只有精品| 能看的av| 六月色丁香婷婷| 五月丁香色色网| 99成人精品视频| 激情五月天婷婷| 色色丁香五月| 人人人va亚洲视频在线| 丁香六月激情综合| 婷婷射丁香| 99综合一区| 色日本五月天| 色综合视频| 色五月丁香在线| 亚洲成人AV在线观看| 97操碰98| 77799热| 婷婷五月天AV在线| 九九热内射| 免费精品66| 五月婷婷偷拍| 丁香五月97视频| 狠狠狠狠免费| 99操| 99色精品| 五月丁香婷婷中文网| 日韩视频99| 婷婷九月丁香天堂丁香天堂| 天天日夜夜爽。| 亚洲五月婷婷| 91色综合网| 色婷婷五月天小说| 大地资源色婷婷视频在线| www.色九月| 色狠狠综合| 色狠久| 五月丁香激情综合网| 欧美色色色色色色色色色色| 婷婷五月天欧美| 色婷婷成人做爰A片免费看网站| 五月天丁香综合| 强伦轩人妻一区二区电影| 国产精产国品一二三在观看| 任你艹| 色婷久久| 亚洲AV电影av| 激情五月,深深爱五月| 久久婷婷色| 色九月婷婷综合| 激情五月天综合| 亚洲天堂婷婷丁香| 婷婷五月大| 玖玖五月| 伊人大香蕉毛片| 五月天亚洲最大成人| 国产精品电影网| 久久婷婷五月综合色天| 久久 视频这里只有精总| 九九亚洲| 深爱丁香网| 国产精品久久久久久白浆色欲| 99九九热视频免费| 婷婷五月天激情免费在线观看| 久久久久久久久久久久久9| 99这里的视频都是精品| 91九色在线| 亚洲天堂无码| 99精品视频网| 久久aaaaa| 九九精品视频在线6| 99久久久久| 婷婷99中文字幕| 欧美激情综合色综合啪啪五月| 久久看九九90| 综合久久五月| 亚洲五月婷| 久久五月婷婷丁香| 日日爽夜夜爽| 婷婷综合日本| 天天天天天天操| 91在线人| 开心婷婷五月天激情网| 久久亭亭电影| 九九久久网| 久9综合| 五月婷婷六月奇米网丁香| 久久一级AV| 五月婷伊人| 综合色久| 天天 青草 制服丝袜 在线| 久热无码| 开心五月六月婷婷| 99热这里只有精品9| 人妻AV在线观看| 丁香五婷婷| 五月天大香蕉AV| 日本颜色视频人人爱| 亚洲AV成人一区二区在线观看| 五月婷婷视频ab| 射婷婷中文字幕| 呦呦v线| 少妇人妻丰满做爰XXX| 五月婷婷色播视频| 五月开心久久| 大香蕉五月天| 99爱在线免费视频| 色噜噜狠狠色综合伊人| 五月天成人综合| 99在线观看精彩视频| 九九碰九九爱97超碰| 五月天色色网站| 婷婷五月天在婷| 久99婷婷色综合| 五月婷婷丁香六月在线| 五月婷婷激情啪啪| 欧美日韩AAAA| 9999热在线观看| 天天婷婷| 2016日日夜夜操| 色五月婷婷大香蕉| 日韩999| 色爱五月天| 激情五月天黄色小说| 九九热视频在线观看| 五月天婷五月天综合网小说首页-五月天激激婷婷大综合,婷婷亚洲综合五月天小说 | 热久久99热欧美国产亚洲| 97在线精品| 97色色色色色| 五月天婷五月天综合网在线观| www.五月天| 欧美熟女乱又伦| 婷婷丁香激情五月天色色色| 丁香五月亚综合图片| 久久久9久| 99热在线只有精品| 97热精品| 亚洲色网络| 九九综合精品| 五月丁香婷婷伊人| 色色AV色色色东莞| 色色五月天丁香婷婷| 9色在线| 九九热只有这里精品| 日韩成人电影AV| 超碰爱爱爱| 色噜噜狠狠色综合成人99| 日本三级韩三级99久久| 第九色区av天堂| 开心五月深爱五月婷| 色色网站日本91| 丁香五月天激情视频| 亚洲天堂大香蕉| 色999亚洲人成色| 99精品视频免费在线播放| 噼里啪啦在线观看免费完整版视频| 色五月激情五月丁香五月婷婷啪啪综合 | 性做爰A片免费视频A片直播 | 久久综合99综合| 成人性爱无码| 日本欧美国产| 精品久热| 婷婷五月丁香久久| www.五月丁香| 九九热视频在线观看| 深爱五月天 开心网| 久久男人网婷婷| 色婷婷五月天在线观看| 久久精彩综合视频| seav天堂| 五月天激情网站| 99在线69| 老美AA片| 久色婷婷200| av网址在线| 国产成人精品亚洲线观看| 亚洲狠狠狠| 哇嘎成人久久| 五月婷婷综合网| 天天干天天色天天干| 久久182| 99久久99九九九99九他书对| 狠狠干总合| 一起草日本| 久婷婷婷| 久久婷婷五月综合激情国产| 亭亭玉月丁香| 久久98| 五月色导航| 成人一区在线观看| 五月天激情图片| 少妇人妻凹凸视频| xx久久| 99无码视频| 无月播播激情在线观看视频| 97碰碰视频在线观看| 极品人妻VIDEOSSS人妻| 另类小说激情五月天| 五月丁香av中文| 亚洲熟妇AV乱码在线观看| 99A片| 五月激情视频| 久久综合站| 综合99久久天天综合| 亚洲激情淫网| 亚洲免费av观看| 亚洲精品色| 久久婷婷五月天综合| 91视频精品99| 久久AV无码精品人妻系列试探| 婷婷五月天激情诱惑| 色五月综合网| 青青草原亚洲久| 超碰色综合| 青青草蜜臀| 五月色情婷婷| 五月天国产| 婷婷五月天开心激情网| 丁香五月天激情网址| 香蕉99网| 色婷婷亚洲婷婷| 欧美成人网99网| 欧美极品999| 7777久久亚洲中文字幕| 综合网亚洲| 婷婷综合色五月天| 色婷婷婷av | 69五月天视频| 成人资源在线| 最近中文字幕大全免费版在线 | 超碰三级片| 天天日,夜夜爽| 96精品久久久久久久久| 在线成人va| 婷婷99中文字幕| 99国产小视频免费观看| 婷婷五月天亚洲综合| 免费无码毛片一区二区A片| 色婷婷精品视频| 欧美综合婷婷欧美综| 婷婷成人AV| 欧美性做爰大片免费看办公室| 天天影院色| 99re思思在线视频| 久久婷五月综合| 日本操B视频在线观看| 欧美人人操| 思思热久久婷婷五月天| 天天插天天玩天天干| 97狠狠碰| 熟妇人妻中文字幕无码老熟妇 | 91九色小视频| 狠狠色噜噜狠狠狠狠狠色综合久久| 亚洲综合激情五月久久| 色激情五月| 99re这里只有精品免费| 97九色视频| 超碰在线日夜| 激情五月综合| 九九这里有精品| 啪啪啪五月天| 婷婷久久五月| 美国不卡视频| 丁香六月成人| 99热官网| 在线中文字幕视频| 婷婷丁香18| 99热综合在线观看| 五月总合激情网| 狠狠se| 欧美成人AAA片一区国产精品| 蜜臀av粉嫩av懂色av| 5月丁香六月婷婷| 九九热这里只有精品首页| 伊人色五月| 曰韩五月丁香色婷婷无码| 婷婷爱五月天| 99干视频| 色色色热热热| 五月丁香婷婷潮喷中文字幕| 狠狠色官网| 日韩久久视频| 亚洲一区二区无遮挡A片| 婷婷狠狠干| 9久精品| 婷婷五月丁香久久| 99性爱| 国产乱妇乱子伦| 五月天 综合 在线| 五月天婷婷色在线视频免费观看 | 色婷婷六月| 思思久久精品| 婷婷五月天综合中文| 六月亚洲婷婷6月中文字幕| 色综合大香蕉| 玖玖婷婷视频| 1769在线观看欧美国产| 日本二级毛片二级毛片| 五月丁香五月婷婷| 久久色情| 五月婷六月| 五月天激情无码| 欧美va亚洲va在线播放| 无码网| 色墦五月丁香| 99日本黄站| 九九99在线| 超碰操日| 天天日中文| 欧美成人精品A片免费一区99| 五月婷婷中文| 色婷久久| 大香蕉婷婷丁香天堂AV| 棕合影院色色| 成人在线视频一区| 囯产精品久久欠久久久久久九大| 激情亚洲网| SS丁香五月婷婷| 丁香伊人激情| 丁香八月综合激情| WWW色五月天| 色就是色婷婷五月亚洲激情| 婷婷色色网| 丁香六月久久| 91丨九色丨熟女|新版| HD久久精品视频| 大香蕉福利导航| av中文字幕免费观看| 99无码精品| www色色色com| 久操热| 天天日,天天插| 色色色99| 五月香婷婷| 五月天丁香成人社| 亚洲顶级VA在线观看-高清完整版在线影院观看-S022AV | 大香蕉人人网| 色婷婷色| 美欧成人视频| 日本免费91| 97成人操| 任你干aa| 九 九九九AV| 狠狠狠狠草草| 影院久久久| 天天操天天插天天射| 激情综合五月丁香六月婷婷| 人人操婷婷| 殴美97色| 综合超碰熟| 另类图片五月天激情| 色婷婷久久7777| 伊人成综合五月婷婷| 91猫咪国产在线播放| 99热黄| 亚洲色图五月丁香五月婷婷| 五月综合激情图片| www,色综合| 婷婷综合一二三| 伊人五月婷| 色啪久| ai97re99一本| 欧美一黄一色一乱一伦| 久草视频大香蕉99| 欲色人妻| 欧美日韩成人在线免费| 在线观看996精品| 国产免费一区二区三州老师F1F1| 色琪琪一综合久久激情五月视频| 五夜婷婷| 久久亚洲婷婷综合色五月| 国产va在线视频| 玖玖资源网站最新站| 日本九九热| 丁香久久久| 九九热思思| 五月婷婷色播| 色狠狠综合网| 天天爽天天日| 午夜天堂一区人妻| 国内一级片| 亚洲综合色激情色五月| 亚州色综合| 国产操肏网站| 天天射综合网站| 丁香五月天欧美成人| 色五月激情五月丁香五月婷婷啪啪综合| 九九视频精品在线免费| 草做免费在线观看| 欧美狠狠色| 婷婷的99视频网站| www.婷婷| 婷婷五月丁香基| 婷婷色资源| 丁香五月天婷婷91| 99九色视频在线观看| 天天人人综合| 天天爽天天爽夜夜爽| 另类五月激情| 天天爱综合网| 五月婷婷综合激情网| 激情99| Blackedraw视频一区二区| 天堂呦 呦百度搜索-百度搜索| 免费观看2018www黄色操逼网站| 99riAV国产精品视频| 亚洲一个色| 黄涩毛片| 激情五婷网| 人妻久热| 久久综合婷婷| 日本波多野结衣视频| 色九月综合| 91九色中文字幕女在线观看| 欧美日韩91| 丁香伊人激情| 丁香五月香蕉| 亚洲99热| 五月婷A V在线| 综合激情四射一theav| 伊人色五月| 影音先锋按摩| 色噜噜在线| 婷婷五月天社区| 色色色色综合| 91久久久久久久久18| 色色婷婷丁香| www.第四色99| 91成人看片| 九九热九九| 另类图片婷婷五月天| 婷婷六月综合基地| 91chinese在线| 久久九九99视频| 99丁香五月婷| 色天天久婷婷| 尔尔AV一区| 色五月天在线观看| 国av网| 五月婷婷色色网址| 99热在线爱| 久久这里只有国产视频| 色婷婷9| 少妇熟女视频一区二区三区| 九一娱乐在线观看视频| 天天噜日日噜综合无码| 99aese| 亚洲第一综合| 婷婷五月在线视频| 欧美超碰亚洲| 99re最新地址视频| 国精产品久久| 亚洲五月婷婷| 淫视馆av三区| 色综合色五月| 国色天香伊人狠狠色| 啪色综合| 怡红院AV亚洲一区二区三区H| 东京热人妻一区二区三区在线| 91视频一起草| 91久久精品无码一区二区三区| 五月婷婷伦理| 99视频只有精品| 天天爽天天| 成人午夜在线视频| 丁香色情五月天| 婷婷五月综合亚洲| 丁香五月色| 日本三级网址| 狠狠夜夜五月丁香| 五月天开心网| 欧美性猛交XXXX乱大交极品| 一区二区免费看| 久久婷婷操| 久婷| 丁香五月欧美婷婷| 欧洲毛片基地c区| 天天摸,天天爽| 另类图片五月天| 久久九九国产精品怡红院| 超极99精品| 99精品热| 激情小说之五月| 色情久久久| 岛国在线观看91| 超碰成人在线观看| 五月丁香激情六月| 五月丁香综合激情| 日本人妻操| 亚洲VA欧美VA| 五月婷婷色| 99久久户外勾搭| 99乱视频| 俺去也在线www色官网| 六月丁香啪啪| 欧美婷婷综合网| 五月婷无码| 日本九九网| 草草色情综合网| 99热超碰| 开心婷婷五月中文字幕组| 26uuu最新地址| 五月婷婷丁香网| 夜夜夜夜操| 亚洲综合婷婷| 婷婷色色丁香| 五月丁香六月合| 天天爽夜爽| 操日本三片99| 成人电影丁香六月天| www.超碰在线| 99热在线观看精品| 五月天精品视频| 夜精品无码A片一区二区蜜桃| 久久综合中文字幕| 久久思思精品| 欧美性生交A片免费看| 大香蕉五月丁香| 夜夜干天天操| 97搞在线| 五月婷婷内射网| 丁香五月婷婷AV| 色婷婷色和| 婷婷色色播五月天| 人人摸人人| 日本一毛片| 九九久热| 99re欧美精品| 久久色五月| 国产成人av在线播放| 国产在线视频1234| 互月天综合| 99热官网| 99re免费精品视频| 噜噜狠狠色综合久| 国产超碰av| 天天艹天天色| 99欧美| 午夜丁香| www.五月婷婷.com| 五月天堂色色| 亚洲经典小视频| 97在线观视频免费观看| 色九月婷婷| 久草视频一,二三四| 另类图片五月天婷婷| 色综合久久天天综合网| 色婷婷激情| 五月丁香婷婷基地| 国产三级片91| 丁香久久九九99| 婷婷五点亚洲| 色色色九九九五月婷婷| 情情五月天色| 丁香五月色情| WWW,色五月| 国产成人综合网| 色九亚洲| 99热免费| 99啪在线| 五月天激情小说欧美激情| 射满了还射免费在线观看 -午夜版全集-新视觉影院 | 五月丁香综合激情| 五月丁香A∨在线| 热99只有里视频| 伊人久久大香线蕉精品| www.av视频xx999.com| 九九免费视频| 日本啪啪天堂| 91无码视频| 成人AV网站在线| www.国产色| 五月婷婷 激情按摩| 人妻久久久久久久久妻久久久久| 日日干夜夜干| 亚洲无码成人网| 99色性爰网络| 五月综合色| 久热99| 五月婷在线观看| 99久视频| 成人色图情色成人网 www.5b5b5bcom 五月天 | 免费的日逼视频| 色五月综合在线| 大香蕉天堂| 五月丁香好婷婷A片网| 69久久99精品久久久久| 亚洲婷婷久久综合| 国产成人在线不卡AV| 69色婷婷| 国产精品色婷婷久久久精品| 九九在线视频| 免费成人网在线观看| 九九無妻| 99超碰人人| 色爱综合网| 色九月欧美| 99ri精品在线| 亚洲情色一区| 婷婷久久亚洲| 激情AV| 26UUU精品一区二区| 99在线精品视频观看免费下载| 日日夜夜狠狠| 五月天快乐开心激情网| 国产在线aaa片一区二区99| 五月丁香在线视频观看| 激情婷婷丁香| 午夜性爱影视一区77| 久久97久久99久久综合欧美| 激情小说之五月| 狠狠色综合图片| 丁香激情综合| 97sese婷婷| 99热99热在线| 日本乱论99| www.五月婷婷.com| 婷婷丁香五另类网站| 五月婷婷之综合激情| 色欲婷婷夜夜| 极品少妇XXXX精品少妇偷拍| 婷婷成人五月天一区| 97色 五月天丁香| 亚洲色婷婷五月| 五月天大香蕉AV| 日韩黄色电影| 色综合com| 天天日天天爽| 人妻videos人妻高清| 丁香五月婷婷社区| 五月激情小说网| 六月丁香婷婷色狠狠久久| AV在线免费播放| 人人爽天天莫| 成人做爰A片免费看视频| 五月噜噜| 色婷婷第四色| 日韩一级网站| 二色av| 欧美性生交XXXXX无码小说| 久久99热精品a片在线观看| 日本97人人| 播五月开心婷婷欧美综合| 久久综合综合久久| 日本天天操| 狠狠色无码| 任你干aa| 色噜噜狠狠色综无码久久合欧美| 8区视频在线| 99精品久久| 毛片新网地| 亚洲激情| 九九热欧美| 亚洲AV激情五月综合网| 色域五月丁香| 色色无码| www.粉嫩av.com| 天天色情站| 五月丁香六月婷婷亚洲视频| 五月丁香成年黄色| se99视频| 一起草Av| 99热在线只有精品| 日本噜噜色网| 婷婷性爱综合| 久九色| 69五月天视频| 碰超在线九色| 国产成人+综合亚洲+天堂| 五月婷婷综合激情| www.1024久久| 九九婷婷综合| 十月丁香婷婷| 99视频综合网| 午夜成人天堂久久无码日韩久久| 玖玖视频福利| 无码少妇高潮喷水A片免费| 岛国AV网| 超碰人人艹| 国产精品18久久久| 亚洲av骚货| 热九九精品| 国产欧美精品AAAAAA片| 欧美激情综合五月色丁香| 婷婷色色丁香五月天| 大香蕉人妻| 激情五月婷婷丁香综合网| 欧美在线97| 亚洲精品久久久久久久久久吃药| 天天干夜夜谢| 高清不卡一区| 欧美久久一级内射wwwwww.| jiZZdr| www,8050,午夜三级| www.金莲av| 五月天激情四射网站| 久久五月天合网| 最新日韩AV中文字幕| 二色AV| 亚洲婷婷丁香五月在线| 99热免费18| 婷婷色综合| 麻豆五月丁香婷婷| 五月天婷婷伊人| 极品人妻VIDEOSSS人妻 | 久久五月网| 亚洲女婷婷五月基地综合久久久| 第四色五月婷婷| 91日韩在线| 色爱亚洲| 成人做爰A片免费看网站找不到了| 成人做爰黄A片免费看直播室男男 A片试看120分钟做受图片 | 无月播播激情在线观看视频| 五月天开心色情网| 激情又色又爽又黄的A片| 六月婷婷中文字幕| 久热这里这里有精品| 婷婷五月精品中文| 91日本在线观看| 九九性视频| 色噜噜狠狠色综合AV兰草影视| 五月天婷婷色综合| 国产欧洲欧洲精品久久| 五月婷婷六月丁香综合| 综合欧美五月婷婷| 丁香五月激情欧美| 五月婷婷综合网| 亚洲操操操| 99热思思在线观看| 九九热婷婷| 五月婷婷丁香| 日韩aaaaa| 99丁香五月婷| 丁香久月| 色五月激情五月| 超碰色综合| 好激情在线综合网| 成人五月丁香社区| 99久久超级| 99熟女| AV五月婷婷露脸| 婷婷她六月天| 六月丁香天堂| 色色五月丁香| 五月婷婷在线观看黄| 色综合五月婷婷狠狠干| 久久婷婷色色| 日本91在线播放| 色九网| 五月丁香亚洲婷婷| 一夜福利不卡| 色婷婷国产精品综合在线观看| 激情亚洲五月| www.夜夜操.com| 亚洲五月停停| 丁香五月天婷婷中文| 99天堂网| 我想看国产大学生口爆吞精的视频| 99色热| 96精品久久久久久久久| 手机免费福利视频| 热久久77777| 日韩成人电影在线播放| 久久婷婷丁香花综合网| 久热免费| 丁香激情五月| 五月婷婷欲色| 六月丁香视频网站| 久久性刺激| 91婷婷丁香五月亚洲| 亚洲人妻av| 站长推荐无码播放| 亚洲欧美另类在线23p| 琪琪理论片| 伊人网大香| 色在线免费观看| 99免费在线视频| 另类专区在线| 六月色播| 五月丁香六月合| 6月丁香婷婷| 五月天婷婷色色网| 亚洲六月综合激情久久下卡| 亚洲激情久久| 亚洲av日韩无码| 色狠狠色噜噜AV天堂五区消防| 五月婷婷六月丁香激情综合网| 久九色| 亚洲AV无码一区二| 色五月婷婷成人| 婷婷97| 亚洲成人免费电影| 婷婷综合五月| 婷婷五月色網站| 伊人六月丁香婷婷| www.激情五月天。com| 铁牛TV人妻| 91猫咪国产在线播放| 99re热视频这里只精品| 天天操天天曰| av在线中文| 婷婷伊人网| 丁香五月网在线观看| 丁香婷婷综合五月天| 婷婷久久网| 亚洲成人在线综合| 亚洲色基地| 国产69久久久欧美黑人A片| 亚洲男女激情| 五月激情小说| 五月丁香天堂网| 狠狠色婷婷六月激情网| 日韩五月天婷婷| 欧美激情 日韩无码 婷婷 五月天| 五月婷精品| 五月丁香综合成人社区| 91久久精品视频| 99操九九网| 大伊香蕉精品视频在线| 婷婷五月色| 天天日夜夜拍| 97婷婷狠狠| 99热精品在线观看| 99热在这里只有精品| 日日做夜夜爱| 亚洲综合色丁香五月天| 久er免费视频| 欧美精产国品一二三区| 亚洲熟女乱色综合亚洲网站| 五月天婷婷激情四射综合| 无码激情AAAAA片-区区| 婷婷五月天色| 99色在线| 第四色五月天| 国产67194| 女婷久久| www.色综合.com| 亚洲婷婷激情综合激情999精品| 思思久久99| 涩涩涩五月天| 婷婷色丁香六月| 久久99这里只有精品视频| 激情五月五月五月婷婷| 色久婷婷网| 99精品这里只有免费视频| 26uuu四色| 日日日,com| 激情综合婷婷五月| 五月天婷五月天综合网小说首页-五月天激激婷婷大综合,婷婷亚洲综合五月天小说 | 丁香五月色| 色玖玖综合| 九热视频在线精品15| 婷婷五月花| 六月婷婷五月丁香| 国产亚洲精品久久一区二区三区| 可以看的av网站| 五月丁香婷婷综合网| 深爱五月激情| 欧洲亚洲精品| 亚洲va欧美va天堂v国产综合| 五月丁香六月婷婷久久| 色婷婷成人| 亚洲热热视频| 欧美色色色色色| 几激情五月婷婷色五月色天堂| 丁香五月天成人| 亚洲五月天婷婷在线| 日日日天天干| 操人妻视频91| 色五月激情| 亚洲五月色| 丁香婷婷成人网| 伊人五月综合网| 免费观看欧美成人AA片爱我多深 | 天天日天天爽| 99在线热视频| 五月丁香激情婷婷| 欧日韩成人| 成人在线网址| 色播五月丁香| 五月亭亭开心网| 精品亚洲国产成AV人片传媒| 三人荫蒂添的好舒服A片| 野战J办公桌椅H| 99精品无码| BBWCUCKOLD精品熟妇| 成人无码精品1区2区3区免费看| 三年高清大片免费观看国语| 九九婷| 久久婷婷五月综合色和| 久久精品日| 丁香 亚洲 久久| 亚洲天堂啪啪| 久99| 中文字幕丰满乱孑伦无码专区| 性 色 婷婷| 99热精品一区| 日韩精品二三区| XX色综合| 91激情五月开心| 欧美日韩999| 欧美日综合| 成人国产欧美大片一区| 五月婷婷伊| 五月天久草| 激情五月天情色| 91视频人人做97| 99re视频在线播放| 丁香九月综合| 凹凸7777操操操| 中文字幕簧片| 日本成人噜噜| 色播丁香婷婷五月激情| 天天爽免费视频| 99热综合网| 久久婷婷国产| AA丁香综合激情| 丰满老熟妇BBBBB搡BBB | 天天操天天干天天日| 天天色综合图片| 亚洲六月婷婷| 色婷婷97| 久久久久久久久久8888| 亚洲欧洲中文日韩久久AV乱码| 国产精品成av人在线视午夜片| 亚洲AVwwwwwww| 8区视频在线| 丁香色五月 97干| 99'无码| 亚洲人妻一区二区 | 五月丁香91| 国产67194| 精品9197碰| 天天日日| 亚洲AV第二区国产精品| www99热| 99re这里只有精品国产99| 色色色色网色色网色色| 欧美Va婷色| 亚洲天天| 日韩一本操| 久久午夜丁香| 久久综合激情| 人妻久久久久久久久妻久久久久| 国产色色色色| 久久网日本| 99热综合| 九月停停| 99干99| 久久中文人妻系列| 精品久久久久久久久久久久人妻| 人人视频人人干人人做| 婷婷久久久| 少妇水多A片太爽了| 色欲色香综合网站| 五月婷精品| 五月天色官网| 99久热这里只有精品| 影音先锋色婷婷| 国产精品色| 亚洲AV电影av| 热久久91| 丁香五月婷婷88在线| 久久久性爱视频| 丁香五月成人| 丁香六月成人| 亚洲色人妻| 久久久久婷婷五月热综合| 婷婷六月五月| 亚洲天堂热| 国产亚洲精品久久久久久久久动漫| 天天操五月天| 天天肏屄夜夜爽| 深爱1激情网| 丁香婷婷性爱| 中文字幕 中文字幕明步| 丁香五月性爱爱五月| 99国产小视频2013| 婷婷五月丁香网| 大香蕉久艹| 国产精产国品一二三在观看| www.99精品日操伊人乱碰在线| 日韩美女羞羞网站在线观看| 天天做天天要天天爱| 婷婷五月丁香成人| 能看的av| 天天日天天插| 五月亭亭欧美女人| 色五月丁香总合网| 天天日天天干天天爽| 日日干天天| 日本玖玖在线| 97色色色色| 天堂草在线观看| 丁香五月六月综合激情| 亚洲日韩一页精品发布| 九九色播五月丁香| 五月天六月丁香| 色婷婷婷婷五月天| 天天干天天干天天干天天干天| 亚洲欧美日韩VIP| 人妻激情在线| 中文不卡一二三区| 五月丁香五月综合欧美| 久色网| 99伊人婷婷在线| 安息电影在线观看完整版| 天天摸天天舔| WWW.国产| 国产激情在线| 国产综合激情五月久久| 五月天色色婷婷| AAA级久久久精品| 超碰激情网| 永久AⅤ1| 婷婷五月成人| YW无码| 色狠狠激情五月| 国产在这里只有精品| 色色色网站| 99视频热99| 色狠狠五月天| 狠狠做婷婷| 日日夜夜天天| 色一情一乱一乱一区9| 六月米奇色综合| www.五月天色色.com| 国产成人精品亚洲线观看| 综合色影| 五月激情网络| 激情综合网激情五月天| 五月婷婷www| 五月天免费色| 97色欧美| 夜色五月天| 婷婷五月天丁香| 91婷婷五月天嫩女| 成人做爰A片免费看网站找不到了| 婷婷五月综合网| 久色五月| 91久久久久久久| 大香蕉人在线65| 丁香婷五月| 91操操| 大香蕉人人网| 99热在线中文字幕| 超碰九九热| 色色综合网。| 亚洲色色爱| 区美毛片子| 婷婷中文综合网| 玖玖资源站国产| 99色色色色| 丁香五月综合| 99ri在线| 五月婷婷av| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | 狠狠丁香| 婷婷色一二三区波多野结衣| 新99思思视频|