欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

WebSocket后端實(shí)戰(zhàn):從協(xié)議原理到線上排障的完整指南

WebSocket后端實(shí)戰(zhàn):從協(xié)議原理到線上排障的完整指南 聊到后端實(shí)時(shí)通信WebSocket 是繞不開的一個(gè)坎。很多后端同學(xué)對(duì)它的認(rèn)知停留在“用來做聊天室”“比輪詢好用”這種層面但真到了線上連接閃斷、消息丟失、集群廣播失效、鑒權(quán)怎么做、nginx 要不要配 Upgrade 頭這些問題一個(gè)接一個(gè)冒出來才會(huì)發(fā)現(xiàn)自己對(duì)它的理解其實(shí)很淺。這篇筆記不是把官方文檔抄一遍而是把我從協(xié)議細(xì)節(jié)到代碼落地、再到線上排障的完整經(jīng)驗(yàn)梳理出來適合正在學(xué)后端、準(zhǔn)備面試、或者已經(jīng)在項(xiàng)目里被 WebSocket 折磨過的朋友。1. 為什么后端要單獨(dú)研究 WebSocket1.1 HTTP 的請(qǐng)求-響應(yīng)模型在實(shí)時(shí)場(chǎng)景下的尷尬HTTP 協(xié)議是典型的“一問一答”模式客戶端發(fā)請(qǐng)求服務(wù)端給響應(yīng)一次請(qǐng)求對(duì)應(yīng)一次響應(yīng)連接用完就斷。這種模型在普通的 CRUD 接口里沒有任何問題但放到實(shí)時(shí)性要求高的場(chǎng)景里就非常別扭。舉個(gè)最常見的例子網(wǎng)頁上的未讀消息提醒。如果只用 HTTP前端只能靠輪詢Polling來解決——每隔幾秒發(fā)一個(gè)請(qǐng)求問后端“有沒有新消息”。時(shí)間間隔短了服務(wù)端壓力巨大明明沒有新消息也要硬扛一堆無效請(qǐng)求時(shí)間間隔長(zhǎng)了消息延遲高用戶那邊體驗(yàn)很差。我在早期項(xiàng)目里就做過 3 秒輪詢的推送方案一個(gè) 500 人在線的后臺(tái)系統(tǒng)光輪詢請(qǐng)求就能把 Tomcat 的線程池打到快滿而真正有意義的業(yè)務(wù)請(qǐng)求反而被擠掉了。SSEServer-Sent Events能解決一部分問題它允許服務(wù)端單向推送數(shù)據(jù)給客戶端基于 HTTP 協(xié)議實(shí)現(xiàn)不需要額外協(xié)議。但 SSE 是單向的客戶端沒法通過同一條連接向服務(wù)端持續(xù)發(fā)送數(shù)據(jù)而且瀏覽器對(duì) HTTP/1.1 下 SSE 連接數(shù)也有限制。如果業(yè)務(wù)需要客戶端和服務(wù)端頻繁雙向交互比如實(shí)時(shí)協(xié)作編輯、股票行情雙向訂閱、在線客服SSE 的局限性就暴露了。1.2 WebSocket 到底改了什么WebSocket 本質(zhì)上是在 TCP 之上建立了一條全雙工的持久通道。握手階段借用 HTTP 的 101 Switching Protocols 完成協(xié)議升級(jí)之后雙方就在同一條 TCP 連接上雙向收發(fā)數(shù)據(jù)不再有請(qǐng)求-響應(yīng)的一一對(duì)應(yīng)關(guān)系。這意味著三件事第一實(shí)時(shí)性從“秒級(jí)延遲”降低到“消息一到立刻推送”不需要客戶端反復(fù)輪詢。第二連接復(fù)用服務(wù)端可以主動(dòng)向客戶端推送數(shù)據(jù)服務(wù)器資源消耗大幅下降。第三協(xié)議本身的數(shù)據(jù)幀開銷很小一個(gè)文本幀的控制頭只有幾十比特相比 HTTP 每次請(qǐng)求都要帶一堆 Header省了太多帶寬。對(duì)后端工程師來說WebSocket 不是一個(gè)“庫(kù)”或者“框架”層面的東西而是一個(gè)需要從協(xié)議層理解的通信機(jī)制。因?yàn)榫€上問題往往不在業(yè)務(wù)代碼里而在于連接管理、心跳保活、代理層透?jìng)鳌⒓合⒙酚蛇@些基礎(chǔ)設(shè)施層面的細(xì)節(jié)。把這些搞明白了你寫出來的推送服務(wù)才是真正能上線的而不是 demo 級(jí)別。2. 協(xié)議級(jí)的關(guān)鍵點(diǎn)后端必須吃透2.1 握手不是魔法從 HTTP Upgrade 說起很多人第一次接觸 WebSocket 都會(huì)困惑為什么瀏覽器的 WebSocket API 直接填一個(gè)ws://地址就能連上感覺跟 HTTP 沒關(guān)系。實(shí)際上WebSocket 連接的第一步就是一次普通的 HTTP 請(qǐng)求只是帶上了特殊的 Upgrade 頭。我抓包看過一次完整的握手過程客戶端發(fā)出去的請(qǐng)求長(zhǎng)這樣GET /chat HTTP/1.1 Host: example.com Upgrade: websocket Connection: Upgrade Sec-WebSocket-Key: dGhlIHNhbXBsZSBub25jZQ Sec-WebSocket-Version: 13 Origin: http://example.com服務(wù)端返回HTTP/1.1 101 Switching Protocols Upgrade: websocket Connection: Upgrade Sec-WebSocket-Accept: s3pPLMBiTxaQ9kYGzzhZRbKxOo這里的Sec-WebSocket-Key是客戶端生成的一個(gè)隨機(jī) Base64 字符串服務(wù)端拿到后拼上一個(gè)固定的 GUID258EAFA5-E914-47DA-95CA-C5AB0DC85B11做 SHA-1 哈希再 Base64 編碼得到Sec-WebSocket-Accept返回給客戶端。客戶端會(huì)校驗(yàn)這個(gè)值確認(rèn)服務(wù)端真的懂 WebSocket 協(xié)議。這個(gè)機(jī)制不是擺樣子它的目的是防止一些緩存代理服務(wù)器誤把 WebSocket 請(qǐng)求當(dāng)成普通 HTTP 請(qǐng)求緩存下來導(dǎo)致連接異常。后端開發(fā)如果自己實(shí)現(xiàn)協(xié)議解析這段邏輯必須完全按規(guī)范來不能偷懶。2.2 數(shù)據(jù)幀格式和掩碼規(guī)則握手完成后數(shù)據(jù)就開始以幀F(xiàn)rame的形式在連接上傳輸了。WebSocket 的幀格式要比 HTTP 報(bào)文簡(jiǎn)單得多但有一個(gè)容易踩坑的細(xì)節(jié)——掩碼。數(shù)據(jù)幀的關(guān)鍵字段分布如下FIN1 bit標(biāo)記這是不是消息的最后一幀。消息可以分多個(gè)幀發(fā)送最后一片幀上 FIN 才置 1。opcode4 bits表示幀類型。0x1文本幀0x2二進(jìn)制幀0x8關(guān)閉幀0x9Ping0xAPong。MASK1 bit掩碼標(biāo)志位。Payload length7 bits 或擴(kuò)展表示數(shù)據(jù)長(zhǎng)度小數(shù)據(jù)用 7 位不夠就擴(kuò)展到 716 位或 764 位。Masking-key4 bytes僅在 MASK 為 1 時(shí)存在。Payload data實(shí)際業(yè)務(wù)數(shù)據(jù)。協(xié)議里有一個(gè)硬性規(guī)定客戶端發(fā)送給服務(wù)端的幀必須帶掩碼MASK1服務(wù)端發(fā)送給客戶端的幀必須不帶掩碼MASK0。這個(gè)設(shè)計(jì)的初衷是防止早期瀏覽器被惡意腳本用 WebSocket 連接攻擊內(nèi)網(wǎng)服務(wù)。服務(wù)端在實(shí)現(xiàn)時(shí)如果收到客戶端未掩碼的幀應(yīng)該按協(xié)議錯(cuò)誤處理。對(duì)于后端開發(fā)來說如果是用成熟的 WebSocket 庫(kù)比如 Spring 的 WebSocket 模塊、Netty、Node.js 的 ws 庫(kù)掩碼處理已經(jīng)被底層封裝好了不手寫解析的話通常碰不到。但一旦用原生 Socket 或者做網(wǎng)關(guān)轉(zhuǎn)發(fā)就必須自己處理這一步。2.3 幀類型文本、二進(jìn)制、Ping/Pong 與關(guān)閉幀實(shí)際開發(fā)里業(yè)務(wù)數(shù)據(jù)主要用文本幀或二進(jìn)制幀。文本幀要求數(shù)據(jù)必須是合法的 UTF-8發(fā)二進(jìn)制數(shù)據(jù)比如圖片上傳、文件流就要用二進(jìn)制幀。選擇哪種取決于業(yè)務(wù)場(chǎng)景聊天消息用文本幀就夠了要傳序列化對(duì)象或者文件分片就用二進(jìn)制幀省掉 Base64 編碼帶來的 33% 體積膨脹。Ping 和 Pong 幀的作用是?;?。WebSocket 連接底層是 TCPTCP 本身雖然有心跳機(jī)制但默認(rèn)關(guān)閉且探測(cè)周期很長(zhǎng)。如果客戶端和服務(wù)端之間長(zhǎng)時(shí)間沒有數(shù)據(jù)傳輸中間經(jīng)過的 NAT 網(wǎng)關(guān)、負(fù)載均衡、防火墻設(shè)備可能會(huì)把空閑連接回收掉連接就悄悄斷了而雙方都不知道。這時(shí)候就需要應(yīng)用層心跳一端發(fā) Ping 幀另一端收到后必須回 Pong 幀。很多庫(kù)也支持直接發(fā) Pong 幀作為對(duì) Ping 的響應(yīng)。如果發(fā)了 Ping 之后在超時(shí)時(shí)間內(nèi)沒收到 Pong就可以判定連接已經(jīng)死了主動(dòng)關(guān)閉然后觸發(fā)重連邏輯。關(guān)閉幀則用于正常關(guān)閉連接。關(guān)閉時(shí)可以帶一個(gè)狀態(tài)碼和原因說明。常見狀態(tài)碼比如 1000 表示正常關(guān)閉1001 表示服務(wù)端即將關(guān)停比如應(yīng)用重啟1008 表示策略違規(guī)比如鑒權(quán)失敗。提示如果服務(wù)端在收到關(guān)閉幀之后繼續(xù)往這條連接上寫數(shù)據(jù)很可能會(huì)觸發(fā)異常。正確的流程是收到關(guān)閉幀 - 回復(fù)關(guān)閉幀 - 雙方關(guān)閉 TCP 連接 - 釋放相關(guān)資源。3. 服務(wù)端實(shí)現(xiàn)與代碼落地3.1 在 Spring Boot 里寫一個(gè) WebSocket 服務(wù)端我平時(shí)主要用 Java 技術(shù)棧Spring Boot 項(xiàng)目里集成 WebSocket 非常順手。Spring 提供了兩套方式一套是基于ServerEndpoint的 Java WebSocket 標(biāo)準(zhǔn)JSR-356實(shí)現(xiàn)另一套是 Spring 自家的WebSocketHandlerWebSocketConfigurer。兩者對(duì)比下來我的習(xí)慣是用ServerEndpoint做業(yè)務(wù)接入因?yàn)樗谔幚磉B接生命周期、消息接收、異常處理時(shí)的代碼更直觀配合ConcurrentHashMap管理會(huì)話非常清晰。先加依賴dependency groupIdorg.springframework.boot/groupId artifactIdspring-boot-starter-websocket/artifactId /dependency然后有一個(gè)配置類注入ServerEndpointExporterConfiguration public class WebSocketConfig { Bean public ServerEndpointExporter serverEndpointExporter() { return new ServerEndpointExporter(); } }接下來是具體的 Endpoint 類我用一個(gè)通知推送服務(wù)來做示例Component ServerEndpoint(/notice/{userId}) Slf4j public class NoticeWebSocketServer { // 會(huì)話集合key 是用戶標(biāo)識(shí)value 是 Spring 封裝的 Session private static final MapString, Session SESSION_MAP new ConcurrentHashMap(); OnOpen public void onOpen(Session session, PathParam(userId) String userId) { SESSION_MAP.put(userId, session); log.info(用戶 {} 建立連接當(dāng)前在線數(shù){}, userId, SESSION_MAP.size()); } OnClose public void onClose(PathParam(userId) String userId) { SESSION_MAP.remove(userId); log.info(用戶 {} 斷開連接當(dāng)前在線數(shù){}, userId, SESSION_MAP.size()); } OnMessage public void onMessage(String message, Session session) { // 根據(jù)業(yè)務(wù)處理客戶端發(fā)來的消息比如回復(fù)確認(rèn)、上行指令 log.info(收到來自客戶端消息{}, message); } OnError public void onError(Session session, Throwable error) { log.error(連接異常: , error); } public static void sendToUser(String userId, String message) { Session session SESSION_MAP.get(userId); if (session ! null session.isOpen()) { try { session.getBasicRemote().sendText(message); } catch (IOException e) { log.error(推送消息失敗userId: {}, userId, e); } } } }注意SESSION_MAP要支持多線程并發(fā)訪問所以用ConcurrentHashMap。因?yàn)?WebSocket 的onOpen、onMessage、onClose是在不同線程里被調(diào)用的普通的HashMap在高并發(fā)下擴(kuò)容時(shí)可能出現(xiàn)死循環(huán)或者數(shù)據(jù)錯(cuò)亂。3.2 把連接對(duì)象管起來會(huì)話管理Session對(duì)象就是服務(wù)端和某個(gè)客戶端之間的一條持久通道。管理好這些 Session是 WebSocket 后端最核心的日常操作。會(huì)話管理的核心要點(diǎn)有三個(gè)第一選擇合適的 Key。上面示例用的是userId適用于一個(gè)用戶同時(shí)只維持一個(gè)連接的場(chǎng)景。如果是同一個(gè)用戶在多端登錄手機(jī)、瀏覽器、桌面應(yīng)用一個(gè)userId對(duì)應(yīng)多個(gè) Session就要用userId 端類型做 Key或者改成userId - SetSession的結(jié)構(gòu)推送時(shí)遍歷這個(gè)集合。第二及時(shí)清理失效連接??蛻舳酥苯訑嗑W(wǎng)、斷電是不會(huì)有正常關(guān)閉幀發(fā)過來的服務(wù)端的onClose不一定被觸發(fā)。如果不做心跳檢測(cè)SESSION_MAP里會(huì)堆積大量僵尸 Session內(nèi)存和文件描述符都會(huì)泄漏。第三推送時(shí)要檢查session.isOpen()。連接可能已經(jīng)關(guān)閉了但對(duì)象還在 Map 里直接sendText會(huì)拋IllegalStateException。先判空再檢查 isOpen這是最基本的防御。3.3 服務(wù)端主動(dòng)推送消息的正確姿勢(shì)很多項(xiàng)目會(huì)通過業(yè)務(wù)線程主動(dòng)推送比如訂單支付成功給用戶發(fā)一個(gè)站內(nèi)信通知、告警系統(tǒng)推送異常信息。這里有一個(gè)很容易犯的錯(cuò)誤直接在業(yè)務(wù)線程里調(diào)用session.getBasicRemote().sendText()。getBasicRemote()是同步發(fā)送如果網(wǎng)絡(luò)慢或者客戶端處理慢會(huì)阻塞當(dāng)前業(yè)務(wù)線程。在秒殺、告警這種高并發(fā)推送場(chǎng)景這個(gè)操作會(huì)直接影響業(yè)務(wù)接口的響應(yīng)時(shí)間。我一般用getAsyncRemote()改異步發(fā)送或者干脆封裝一層推送服務(wù)把“發(fā)送消息”和“業(yè)務(wù)處理”解耦。另外一個(gè)實(shí)戰(zhàn)技巧是不要用單條 session 的鎖來同步批量推送。最典型的問題出現(xiàn)在群發(fā)場(chǎng)景——如果按用戶維度加鎖一個(gè)用戶的連接卡頓會(huì)導(dǎo)致整個(gè)循環(huán)推送阻塞。我在上一個(gè)項(xiàng)目里就是把“往單個(gè)客戶端發(fā)消息”和“遍歷所有用戶群發(fā)”拆成兩個(gè)方法單用戶發(fā)送失敗直接捕獲異常跳過絕對(duì)不讓一個(gè)壞連接拖垮整個(gè)群發(fā)。4. 線上一定會(huì)遇到的四個(gè)問題4.1 連接不穩(wěn)定心跳與重連機(jī)制WebSocket 連接在公網(wǎng)環(huán)境下很難保持長(zhǎng)期穩(wěn)定。運(yùn)營(yíng)商 NAT 映射有超時(shí)時(shí)間公司防火墻會(huì)回收閑置連接服務(wù)端應(yīng)用重啟也會(huì)斷掉所有連接。設(shè)計(jì)一個(gè)健壯的 WebSocket 服務(wù)心跳和重連是標(biāo)配。心跳機(jī)制通常是這樣設(shè)計(jì)的服務(wù)端維護(hù)一個(gè)定時(shí)任務(wù)每隔一段時(shí)間比如 30 秒主動(dòng)向客戶端發(fā) Ping 幀同時(shí)記錄每個(gè) Session 最近一次收到消息的時(shí)間。如果連續(xù) N 次 Ping 都沒有響應(yīng)就把這個(gè) Session 標(biāo)記為超時(shí)并關(guān)閉。還有一種常見做法是客戶端主動(dòng)心跳由前端每隔一段時(shí)間發(fā)一個(gè)業(yè)務(wù)心跳包服務(wù)端收到后重置空閑計(jì)時(shí)。這兩種方案可以組合服務(wù)端 Ping 客戶端業(yè)務(wù)心跳雙保險(xiǎn)。無論哪種方案關(guān)鍵點(diǎn)是服務(wù)端必須兜底清理超時(shí)連接不能依賴客戶端主動(dòng)斷。我在第一次做的時(shí)候就把這件事想簡(jiǎn)單了只做了服務(wù)端 Ping沒做超時(shí)清理。結(jié)果線上運(yùn)行三天后堆內(nèi)存里躺著幾萬個(gè)已經(jīng)不存在的 Session 對(duì)象連接數(shù)飆升到服務(wù)端文件描述符上限整個(gè)應(yīng)用直接拒連接。從那以后我所有的 WebSocket 服務(wù)都強(qiáng)制加超時(shí)清理邏輯。前端那邊的重連也很有講究。最簡(jiǎn)單的方案是斷線后固定延遲重連但服務(wù)端發(fā)布重啟時(shí)成百上千的客戶端會(huì)同時(shí)發(fā)起重連造成“驚群效應(yīng)”——服務(wù)端剛啟動(dòng)就被一輪重連請(qǐng)求打掛。我建議前端做指數(shù)退避重連從 1 秒開始每次失敗翻倍最長(zhǎng)不超過 30 秒并且加上隨機(jī)抖動(dòng)jitter避免客戶端的重連請(qǐng)求在同一時(shí)刻爆發(fā)。4.2 鑒權(quán)怎么做token 帶在哪WebSocket 握手走的是 HTTP所以鑒權(quán)理論上可以在握手階段完成。但 WebSocket API 在瀏覽器里有一個(gè)限制無法自定義 Header。new WebSocket(url)只能設(shè)置 URL 和協(xié)議列表不能像fetch那樣手動(dòng)帶Authorization頭。因此常用方案有三種方案一token 放進(jìn) URL Query 參數(shù)。比如ws://localhost:8080/notice/1001?tokenabc123。實(shí)現(xiàn)簡(jiǎn)單但 token 會(huì)出現(xiàn)在日志、瀏覽器歷史、反向代理的 access log 里有泄露風(fēng)險(xiǎn)務(wù)必做好日志脫敏。方案二token 放到子協(xié)議Subprotocol里。在握手時(shí)用Sec-WebSocket-Protocol字段攜帶 token服務(wù)端從 header 里取出來校驗(yàn)。這種方式相對(duì)隱蔽但協(xié)議本意是標(biāo)記應(yīng)用層協(xié)議拿它傳 token 屬于“擦邊球”需要團(tuán)隊(duì)統(tǒng)一約定。方案三先通過 HTTP 接口換取一次性票據(jù)再在握手時(shí)通過 Query 參數(shù)提交服務(wù)端校驗(yàn)通過后立即失效。適合對(duì)安全要求高的場(chǎng)景。我個(gè)人最常用的組合是token 放 Query 參數(shù) 服務(wù)端攔截器校驗(yàn) 對(duì)日志做脫敏處理。校驗(yàn)放在握手階段有一個(gè)巨大的好處——失敗的連接根本不會(huì)被OnOpen接收避免非法連接占用資源。4.3 多實(shí)例部署消息怎么廣播WebSocket 的連接是有狀態(tài)的Session 綁定在某個(gè)實(shí)例上。一旦服務(wù)做水平擴(kuò)容部署了多個(gè)實(shí)例用戶 A 連接在實(shí)例 1用戶 B 連接在實(shí)例 2A 要給 B 發(fā)消息直接遍歷本地 SESSION_MAP 根本找不到 B。解決思路不是讓每個(gè)實(shí)例共享 Session而是引入一個(gè)消息路由層。最經(jīng)典的做法是基于 Redis 的發(fā)布訂閱Pub/Sub實(shí)例 1 收到 A 的消息后把消息發(fā)到 Redis 的指定 Channel所有訂閱了這個(gè) Channel 的實(shí)例都能收到再由持有目標(biāo) Session 的實(shí)例完成推送。核心邏輯大致如下// 推送入口 public void pushMessage(String targetUserId, String message) { // 1. 先查本地 Session 是否存在 if (SESSION_MAP.containsKey(targetUserId)) { sendToLocalUser(targetUserId, message); return; } // 2. 本地不存在通過 Redis Pub/Sub 廣播出去 redisTemplate.convertAndSend(ws:notice, targetUserId : message); } // Redis 消息監(jiān)聽器里接收并處理 public void onMessage(String payload) { String[] parts payload.split(:, 2); String targetUserId parts[0]; String message parts[1]; // 消息可能是發(fā)給本實(shí)例的也可能是發(fā)給其他實(shí)例的統(tǒng)一走本地發(fā)送邏輯 if (SESSION_MAP.containsKey(targetUserId)) { sendToLocalUser(targetUserId, message); } }這樣每個(gè)實(shí)例只需要維護(hù)自己的本地 SESSION_MAP跨實(shí)例的消息通過 Redis 中轉(zhuǎn)。要注意的是Redis Pub/Sub 的消息是即發(fā)即棄的如果某個(gè)實(shí)例當(dāng)時(shí)不在線消息就丟了。對(duì)推送可靠性要求更高的場(chǎng)景可以考慮用 Redis Stream、RocketMQ 這類帶持久化的消息隊(duì)列從“訂閱推送”演進(jìn)為“先存儲(chǔ)后投遞”。還有一種方案是引入專門的網(wǎng)關(guān)層所有 WebSocket 連接都掛在網(wǎng)關(guān)層業(yè)務(wù)后端不直接持有連接網(wǎng)關(guān)負(fù)責(zé)把消息路由到目標(biāo)客戶端。這種架構(gòu)更徹底但實(shí)現(xiàn)成本也更高適合體量更大、微服務(wù)劃分更細(xì)的團(tuán)隊(duì)。4.4 網(wǎng)關(guān)/代理層nginx 配置與連接超時(shí)WebSocket 服務(wù)前面幾乎都會(huì)加一層 nginx 做負(fù)載均衡和域名轉(zhuǎn)發(fā)。nginx 默認(rèn)配置對(duì) WebSocket 并不友好因?yàn)樗枰С?HTTP 升級(jí)。在我的服務(wù)器上一個(gè)可用的 location 配置是這樣的map $http_upgrade $connection_upgrade { default upgrade; close; } upstream ws_backend { server 127.0.0.1:8080; server 127.0.0.1:8081; # 開啟長(zhǎng)連接復(fù)用避免每次握手都新建后端連接 keepalive 32; } server { listen 80; server_name ws.example.com; location /notice { proxy_pass http://ws_backend; proxy_http_version 1.1; proxy_set_header Upgrade $http_upgrade; proxy_set_header Connection $connection_upgrade; proxy_set_header Host $host; proxy_set_header X-Real-IP $remote_addr; proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; # 關(guān)鍵如果 60 秒內(nèi)沒有數(shù)據(jù)交互nginx 會(huì)主動(dòng)斷開連接 proxy_read_timeout 3600s; proxy_send_timeout 3600s; } }上面配置里有幾個(gè)坑都是我實(shí)際踩過的proxy_set_header Connection $connection_upgrade是必須的如果寫成固定的upgrade普通 HTTP 請(qǐng)求也會(huì)被當(dāng)作升級(jí)請(qǐng)求處理導(dǎo)致靜態(tài)資源接口異常。用map做動(dòng)態(tài)映射是最穩(wěn)妥的方式。proxy_read_timeout默認(rèn)是 60 秒如果不調(diào)大當(dāng)客戶端和服務(wù)端之間剛好沒有數(shù)據(jù)交換超過 60 秒nginx 就會(huì)先斷開連接??蛻舳撕蛻?yīng)用層心跳的數(shù)據(jù)能覆蓋這個(gè)超時(shí)時(shí)間但保險(xiǎn)起見我會(huì)把超時(shí)時(shí)間設(shè)置為心跳間隔的好幾倍。另外負(fù)載均衡算法默認(rèn)是輪詢但 WebSocket 連接一旦建立后續(xù)幀都走同一條 TCP 連接所以 nginx 層不需要做會(huì)話保持sticky session只要保證握手中的 Upgrade 請(qǐng)求被轉(zhuǎn)發(fā)到正確后端即可之后的流量都跟著連接走。5. 常見問題與排查技巧實(shí)錄5.1 連接一打開就斷瀏覽器報(bào) 10061006 是 WebSocket 里最讓人頭疼的錯(cuò)誤碼因?yàn)樗恰斑B接非正常關(guān)閉”的統(tǒng)稱瀏覽器不會(huì)給任何具體原因。服務(wù)端日志和瀏覽器 Network 面板往往都沒有有效信息。我遇到這個(gè)問題的排查順序一般是這樣的第一步確認(rèn)握手是否成功。在瀏覽器 Network 面板看 WebSocket 那條請(qǐng)求的 Status Code 是不是 101。如果不是 101說明代理層或后端沒有正確返回升級(jí)響應(yīng)大概率是 nginx 配置少了 Upgrade 頭。第二步確認(rèn)服務(wù)端有沒有在握手之后立刻關(guān)閉連接。常見原因是鑒權(quán)失敗、Session 為空返回了異常。在OnOpen里處理完邏輯后打一條日志確認(rèn)連接是否真的注冊(cè)成功。第三步排查是不是代理層提前斷開了。如果前面有 nginx 或者云負(fù)載均衡先跳過它直連后端測(cè)試。直連沒問題就把焦點(diǎn)放到代理層配置上。第四步看服務(wù)端進(jìn)程是不是有 GC 停頓或者線程阻塞。Full GC 如果造成長(zhǎng)時(shí)間 Stop The World也會(huì)觸發(fā)底層 TCP 超時(shí)表現(xiàn)出來就是 1006。5.2 服務(wù)端消息推送不出去代碼里明明調(diào)用了sendText沒有拋異常但客戶端就是收不到。這種“靜默失敗”比報(bào)錯(cuò)更煩人。根據(jù)我的經(jīng)驗(yàn)先查session.isOpen()。如果連接已經(jīng)斷了但狀態(tài)沒來得及更新發(fā)送接口可能不報(bào)錯(cuò)消息卻發(fā)不出去。其次是檢查是否用了同一個(gè)BasicRemote實(shí)例在多個(gè)線程里同時(shí)發(fā)送。WebSocket 協(xié)議要求同一個(gè)連接的數(shù)據(jù)幀必須串行發(fā)送多個(gè)線程同時(shí)寫會(huì)導(dǎo)致數(shù)據(jù)幀交錯(cuò)發(fā)送接口會(huì)拋異?;蛘呦⒈粊G棄。正確的做法是把發(fā)送操作統(tǒng)一收口到一個(gè)方法里加鎖保證同一時(shí)刻只有一個(gè)線程在寫。在 Netty 或者 Spring 底層同一條連接本身是不允許并發(fā)寫的框架會(huì)在高并發(fā)下觸發(fā)異常。5.3 連接數(shù)持續(xù)增長(zhǎng)內(nèi)存和句柄被吃光這個(gè)問題幾乎每個(gè)做 WebSocket 的人都會(huì)遇到?,F(xiàn)象是線上連接數(shù)一直漲不下降最后服務(wù)端報(bào) “Too many open files” 或者堆內(nèi)存耗盡。原因大多是兩類。一類是客戶端異常斷開拔網(wǎng)線、App 閃退沒有發(fā)關(guān)閉幀服務(wù)端的onClose沒有被調(diào)用Session 一直留在 Map 里。另一類是服務(wù)端業(yè)務(wù)代碼持有 Session 引用即使底層連接已經(jīng)關(guān)閉對(duì)象仍然無法被 GC。方案只有一個(gè)也是最有效的一個(gè)定時(shí)清理。寫一個(gè)定時(shí)任務(wù)每隔一段時(shí)間遍歷SESSION_MAP檢查每個(gè) Session 的最后活動(dòng)時(shí)間。如果超過設(shè)定閾值比如 90 秒沒有收到任何幀就主動(dòng)調(diào)用session.close()并從 Map 中移除。需要注意的是清理任務(wù)本身就是對(duì)宿主機(jī)資源的消耗幾千個(gè)連接還好幾萬個(gè)連接的時(shí)候ConcurrentHashMap的遍歷也會(huì)帶來線程競(jìng)爭(zhēng)。我現(xiàn)在的做法是把 Session 按時(shí)間分桶存放清理時(shí)只掃最近超時(shí)的桶而不是全量掃描。5.4 谷歌瀏覽器高版本無法啟用 WebSocket有不少人遇到這類問題高版本瀏覽器里 WebSocket 連接始終建立不起來控制臺(tái)報(bào)錯(cuò)信息又很模糊。首先要澄清一點(diǎn)現(xiàn)代主流瀏覽器對(duì) WebSocket 的支持是非常成熟的不需要“啟用”什么開關(guān)。所謂“無法啟用”絕大多數(shù)情況下是頁面代碼把ws://和wss://寫錯(cuò)了。如果頁面是 HTTPS 環(huán)境瀏覽器會(huì)強(qiáng)制要求 WebSocket 使用 TLS 加密也就是wss://協(xié)議。如果用ws://瀏覽器會(huì)直接拒絕連接報(bào)錯(cuò)內(nèi)容可能只是WebSocket connection failed。開發(fā)環(huán)境用 HTTP 就配ws://生產(chǎn)環(huán)境只要上了 HTTPS就必須對(duì)應(yīng)改成wss://并且 nginx 層要配置 SSL 證書和代理。另外瀏覽器對(duì) WebSocket 連接數(shù)也有限制。HTTP/1.1 下單個(gè)域名最多 6 條并發(fā)連接如果頁面里同時(shí)開了多個(gè) WebSocket超出的連接會(huì)排隊(duì)甚至失敗。高版本瀏覽器在 HTTP/2 下的連接限制略有放寬但多路復(fù)用對(duì) WebSocket 的支持并不完美仍然建議控制同頁面的連接數(shù)量。5.5 常見問題速查表現(xiàn)象常見原因處理優(yōu)先級(jí)連接一直無法建立協(xié)議前綴錯(cuò)誤、nginx 沒配 Upgrade、端口不通先查 nginx 配置和瀏覽器 Network連接建立后秒斷報(bào) 1006鑒權(quán)失敗、代理層超時(shí)、后端異常關(guān)閉服務(wù)端日志 直連測(cè)試客戶端收不到推送Session 已失效、多線程并發(fā)寫、代理層緩沖檢查 isOpen、統(tǒng)一收口發(fā)送連接數(shù)只增不減沒有心跳清理、onClose 未觸發(fā)增加定時(shí)清理任務(wù)后端多實(shí)例時(shí)消息不互通缺少消息路由層引入 Redis Pub/Sub 或消息隊(duì)列服務(wù)端 CPU 飆升心跳頻繁、全量掃描 Session、同步阻塞發(fā)送優(yōu)化心跳策略、異步發(fā)送把這些場(chǎng)景都過一遍之后再回頭看 WebSocket會(huì)發(fā)現(xiàn)它其實(shí)就是一個(gè)“長(zhǎng)連接 幀協(xié)議 連接管理”的組合體。協(xié)議本身不復(fù)雜復(fù)雜的是把它放進(jìn)真實(shí)系統(tǒng)里的各種約束。我在最初學(xué)習(xí)的時(shí)候總想著把協(xié)議背熟、代碼寫好就萬事大吉后來發(fā)現(xiàn)真正拉開差距的是連接斷沒斷、消息丟沒丟、服務(wù)掛沒掛這幾個(gè)在生產(chǎn)環(huán)境逃不掉的工程問題?,F(xiàn)在手邊每一個(gè) WebSocket 項(xiàng)目我上手第一件事就是先問清楚心跳怎么做、斷線重連怎么設(shè)計(jì)、集群節(jié)點(diǎn)掛了消息怎么兜底這比磨任何框架 API 都重要。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
99操网站| 殴美日韩成人| 色综合色色| 任你操精品免费| 色99色| 99色一| 人人性久久| 婷婷六月激情| 99这里只有精品| 丁香五月开心五月激情| 婷婷激情五月天在线视频| 色九月综合网| 性爱111111| 欧美这里只有精品| 国产亚洲色婷婷久久99精品91| 丁香五月色色| 五月丁香影院| 婷婷五月天情色| 天天草婷婷五月| 天堂久久婷婷| 一区三区视频有限公司| 五月婷婷性爱视频| 久久色吧| 亚洲自拍天堂| 五月丁香婷婷啪啪综合| 色玖玖玖| 五月丁香婷婷久久| 综合久| 综合精品啪啪| 99偷拍视频在线日本| 久久国产一区二区三区| 国产亚洲精品久久久久久久久动漫 | 日韩成人精品一区久久久久| 天天搞夜夜六| 五月婷丁香在线视频在线| 99欧州偷拍视频| 97超碰在线观看免费| 无码少妇高潮喷水A片免费| 夜夜大香蕉婷婷丁香| 99日韩网站| 99热国产这里只有| 另类图片婷婷五月天| 综合激情五月四射婷婷| 婷婷爱综合| 中海油常州环保涂料有限公司| 色色婷| 五月丁香免费视频| 91久久久久久久| 久色| 五月丁香六月激情| 奇米网大香蕉| 92久久| 91色五月| 丁香开心深爱| 色五月婷婷九月| 色五月婷婷视频| 这里只有精品99www| 99这里有精品免费| 热99re| 婷婷五月丁香色情| 狠狠狠狠狠干| 另类在线| 日本黄色三级片内射| 少妇被下春药玩弄A片| 另类在线| 激情久久网 | 精品久久99| 五月婷婷激情综合| 人妻日日日| 婷婷五月丁香综合网| 丁香五月婷婷啪啪视频| 99在线免费视频| 黄色片区子| 久久大香蕉| 狠狠做五月婷婷| 五月丁香婷中文| 婷婷丁香人妻天天久久| 久久综合婷婷| 色9999综合久久| 五月天基地| 亚洲AV日韩无码| 99精品久久| 精品国产人人爱人人| 久久久久综合激动五月天| 国产一区男女| 亚洲AV网站| 啪啪啪综合网| 99玖玖在线视频| www.色五月.com| 影音先锋xfplay资源男人网| 久久色亭亭五月天| 综合色、色综合| www.激情com| 99熟女视频| 精品一区二区三区四区五区六区介绍 | www.婷婷.com| 亚州精品久久久久AV无码| 99热6精品| 天天综合久久| 五月激情另类| 久久久精品色| 五月婷婷日| 成人深爱丁香五月| 激情婷婷丁香五月天| 鲁鲁色五月| 五月丁香综合中文| 亚洲欧美国产高清vA在线播放| 久久杏爱视频| 色综合色色| 亚洲九九99精品视频在线播放| 欧美内射AAAAAAXXXXX| 久青草大香蕉| 狠色狠色综合久久| 欧美日本韩国亚洲| 婷婷五月激情六月丁香| 玖玖精品视频| 欧美久热| 色九月婷婷综合| AV大片在线播放| 97色婷婷五月天| 亚洲亚洲永久无码777777| 91人妻PORNY九色大屁股| 五月婷婷国产| 韩国天天婷婷| 在线综合啪| 天天操夜夜啊| 99热.com| 色99在线| 婷婷婷婷婷婷婷五月丁香| 97婷婷五月| 丁香五月天色| 五月天婷婷基地| 色色色五月婷| 99热99久久| 久久日婷婷| 丁香六月色情| 无码激情AAAAA片-区区| 狠狠干狠狠干狠狠干狠狠干| 欧洲MV日韩MV国产| 色婷婷五月天堂资源| 日本色五月| 91网站黄| 五月天婷婷久久视频| 色色色五月婷| 99综合视频一体| 精品99视频| 亚洲精品激情| 久婷婷五月天影院| AV大香蕉| 亚洲五月六丁香激情| 精品人妻伦一二三区久| 一区二区中文字幕| 99久久超级| 天天舔天天摸天天射| 狠狠干狠狠干| 99福利视频| 国产精品第一国产精品| 毛片毛片毛片毛片| 久久日韩婷婷五月| 色五月天丁香| 日本狠狠爽| 色噜噜狠狠色综合日日| 婷婷激情五月综合丁| 操老逼综合网| 激情五月天婷婷| 婷婷五月天AV在线| www.超碰在线| 五月婷婷丁香色播网| 99久99久| 亚洲天堂爱爱| 婷婷黄色五月天在线视频| 亚洲欧美婷婷五月色综合| 婷婷香香五月| 成人综合视频网址| 99热99美国在线观看| 九九综合网色全集| 99这里有精品| 噜噜噜久久| 久久9精品| 综合久久婷婷| 五月天精品综合在线| 久久丁香网| 五月婷婷av| 日韩高清成人| 任你搞免费视频观看| 国产婷婷色综合AV蜜臀AV| 丁香视频| 欧美性生交XXXXX无码小说| 深爱开心激情网| 亚洲99一级无嗎特制在线| 可以免费观看的AV| 婷婷丁香六月激情综合| 91丨九色丨白浆秘| 天天综合网~91| 丁香综合婷婷五月天| 色婷婷大香蕉| 亚洲成人AV一区在线观看| 婷婷九月在线| 色欲五月婷婷| 青青草a在线| 久久人人添人人爽添人人片αV | 色网站99| 美女激情综合| 大香伊人婷婷| 九月激情婷婷丁香| 99久久极情精品一区| 日韩小视频在线99| 美臀自射自家人妻| av在线观看网站| 草了bav视频在线观看| www.minyis.com【JT】实力收量可预付QQ2101460746 | 伊人丁香五月| 亚洲色色色色色色色色色| 婷婷丁香六月| 婷婷激情图片| 久久婷狠狠色| 婷婷五月天狠狠色| 久久人妻视步| 99热精这里只有精品| 欧美日韩国产一区| 伊人九九综合| 麻豆忘忧草午夜| 日本99视频| 99热这里只有精品最新网址| 能看的av片| 伊人五月婷婷| 任你操精品免费| 开心色色五月天综合| 狠狠干综合| 天天爽天天| 很操日本7| 久久六月天| 99久久婷婷五月| 狼人久草| 99色色| 色噜噜狠狠色综合网| 亚洲五月情| 丁香五月综合色婷婷| 国产成人AV在线| 日日躁夜夜躁狠狠久久AV| 丁香五月成人社区| 狠狠色噜噜狠狠色噜噜噜999| 色10月婷婷视频| 射琪琪| 91国产精品视频播放| 色九月| 这里只有精品1| 99精品视频偷拍| 5月丁香啪啪啪| 欧美噜一噜| 亚洲久久视频| 久色网五月| 色综合五月在线| 激情五月天在线| 欧美五月丁香啪啪响视频| 婷婷自拍| 亚洲啪啪视频| 色色是色N一| 日本99视频| 亚洲av成人在线| 97在线/亚洲| 操97免费超级视频| www,五月天com| 掩去也综合五月视频| 日本啪啪网| 97婷婷丁香| 激情丁香九九五月综合网| 日本久久人| 色玖玖玖| 久久综合激情五月天| 99热福利| 第一区久久网站| 婷婷五月综合啪| 亚洲人人操BD| 人人操人人爰人人一天天碰夜夜拍夜夜爽-中国A级毛片天天看天天谢… | 国产精品成av人在线视午夜片| 久久久91| 国自产拍偷拍精品啪啪一区二区| 亚洲免费观看高清完整版AV线| 婷婷丁香社区网| 五月天五月色婷婷综合| 婷婷丁香综合| 激情综合在线观看| 国外亚洲成AV人片在线观看 | 美女天天艹人人爽| 五月开行婷婷色五月| 夜丁香五月婷婷| 五月天婷综合| 最近中文字幕大全免费版在线 | 天天搡日日搡aaaaⅩ| 操操啪| 99久re热视频精品98| 亚洲第一成人无码A片| WWW.五月com| 丁香五月天.com| 久久天天天| 99热精品9| 国产成人亚洲综合A∨婷婷| 91青娱乐青青草| 丁香五月婷婷基地| 4399在线观看免费高清毛片| 丁香 婷婷 激情 综合 五月| 色色色色色色色色综合网| 婷婷五月丁香啪啪| 99青青草99| 五月丁香啪啪综合网| 直接看的AV| 国产毛片精品一区二区色欲黄A片 极品人妻VIDEOSSS人妻 | 日日噜噜久久婷婷五月天| 9九色首页| 色香蕉影院| 六月香五月婷| 成人AV在线电影| 久久久av久av久片一区二区| 九九色逼| 天天弄天天操| 思思热99er| 日本色道视频网站| 婷婷久久精品| 婷婷五月天丁香综合网| 伊人久久婷婷五月天激情四射| 色综合com| 亚洲 五月 婷婷 成人| 丁香婷婷久久| 五月色丁香| 中文字幕人成乱码在线观看| 九热电影av| 天堂五月婷婷| 香蕉综合网| 99丝袜精品视频网站| 热久久成人| 丁香久久综合| 欧美在线视频免费播放| 亚洲五月天婷婷| 97在线观看| www超碰| 激情五月婷婷视频一区二区三区| 伊人玖玖精品| 色综合久久99色| 欧美色五月天| 激情五月黄色| 久久五月婷天天干| 做爰丰满少妇1313| 久久婷婷五月国产色综合激情| 五月天婷婷色在线视频免费观看| AV九九| 五月丁香六月激情| 午夜成人在线免费视频| 五月天网站亭亭| 97啪在线观看视频| 天天天添天天操| 五月婷婷综合网| 婷婷伊人网| 丁香五月婷婷综合精品素人| 丁香五月在线自慰| 人妻久久久久久久 | 日日日日日| 六月丁香啪啪| 99热这里有精品| 亚洲综合色网站| 丁香五月天社区| 亚洲综合字幕色色| 国产特级毛片AAAAAAA高清| 日韩色色小视频| 亚洲成人五月天| 天搞天天天天天| 超碰在线国产| 婷婷六月综合在线| 99在线视频。| 丁香五月婷婷视频| 五月丁香综合啪啪| 免费看欧美成人A片无码| 婷婷五月天.com| 国产美女无遮挡裸体毛片A片| 亚洲乱码日产精品BD| 久久视频婷婷视频| 欧美日韩一区二区三区四区| 欧美日韩成人在线网| 欧美99视频| 激情另类综合| 丁香五月激情欧欧美| 亚洲性爱AV在线| 这里只有精品网| www:99热视频| 久久这里只有精品热在99| 好好干Av| 九九热内射| 婷婷色爱| 开心婷婷五| 97丨九色丨国产丨PORNY| 99re8这里只有精品99re8热视频| 亚洲欧洲中文日韩久久AV乱码| 色色色婷婷五月天| 国产毛片精品一区二区色欲黄A片| 97碰碰人人| 激情五月天网站| 丁香五月天无码| 无码动漫AV| 久久九九综合| 色婷婷五月天视频在线| 五月天丁香啪啪综合| 婷婷五月欧美综合| 婷婷射丁香| 色婷婷丁香六月| 久9综合| 日本色久| 天天综合永久| 国产成人综合网| 色综合99无码| 色噜噜狠狠色综合日日| 噜噜色婷婷| 丁香五月情色| 色涩影院六月丁香| 性按摩玩人妻HD中文字幕| 五月婷av| 爱草视频在线观看| 婷婷五月天av| 午夜日日| 白度黄视频| 日韩aaaaa| 橾逼网| AV天堂淫乩| www激情网站| 亚洲精品无人区| 综合色影| 婷婷无码五月天| 六月丁香激情最新更新| 五月婷成人| 欧美123区免| 亚洲欧洲另类| 99热只有这里有精品| 婷婷丁香五月激情| 久久久精品色色色| 天天射综合网天天插| 婷婷五月天AV| 色五月激情| 久久99日本精品视频免费观看| A网在线欧洲| 婷婷五月综合色中文字幕| 国精产品一区二区三区| 大香蕉久久伊人网| 丁香五月天大香蕉啪啪| 欧美大片| 丰满少妇乱A片无码| 超碰碰碰碰| 色老久久| 91婷婷丁香五月| 人人草人| 五月宗合激情网| 天天噪夜夜爽| 九九视频精品视频精品| 日操五月婷| 人妻狠狠操| 97色婷婷五月天| 婷婷久久18| 五月天婷婷激情四射综合| 成人无码精品1区2区3区免费看| 天天拍夜夜爽日日| 黄色99网| 色色网站免费观看| 美英法精品无码免费视频| 五月情综合| 婷婷五月天免费小说| 97操视频| 五月天婷婷综合久久| 中文字幕av在线| 超碰在线9| 97操碰碰无码视频| 狠狠舔| 丁香婷婷久久| 99re热| 五月天无码视屏播放| 一夜福利不卡| 五月天激情综合10p| 久久性爱网站| yazhochengrenavwang| 色婷婷av综合网| 影音先锋男人av资源站| www.久9| 91久久免费| 91啪啪啪啪| 日韩精品一区二区亚洲AV观看| 日本色道视频网站| 中文字幕日产A片在线看| 风流少妇A片一区二区蜜桃| 大战熟女丰满人妻AV| 日日操夜夜擼| 色噜噜五月丁香婷婷| 另类专区在线| 激情五月亚洲综合网| 另类丁香五月天区图| 99色最新在线视频网站| 亚洲碰碰碰| 97资源碰碰| 激情五月天视频| 性av| 狠狠狠狠狠狠色| 婷婷五月激情四月综合 | 九九婷婷五月天影视| 五月天婷婷乱| 国产精品久久..4399| 亚洲五月天激情| 久热re视频在线观看网站| 日本三日本三级少妇三级66| 五月丁香狠狠爱| 丁香综合伊人AV| 久久久性爱视频| 九月婷婷综合| 色吧99| 激情婷婷色色| 亚洲色色香蕉| 久久怡红院| 婷久久久| 久久综合这里只有精品1 | 日本九九热| 五月婷婷综合丁香视频| 午夜少妇在线观看视频| 99久久精品国产色欲| 国产色色网站网址| 色五月婷婷91| 欧美十二区| 日日干五月天婷婷| 九九热最新| 少妇高潮A片无套内谢麻豆传| 91黄操| 五月天婷婷色播综合在线| 日日日影院| 久热9| 午夜在线成人网站免费观看| 成人五月天在线观看| 免费观看欧美成人AA片爱我多深| 综合网五月| 乱精品一区字幕二区| 大香蕉大香蕉在线影院| 免费视频这里只有精品| 国产精品99久久久久久久女警| 思思精品视频| 丁香五月天大香蕉啪啪| 久久视频婷婷视频| 人人爱人人草| 五月丁香亭亭操逼| 久久99性爱| 男人操女人高潮91视频| 婷婷6月综合网| av在线中文| 婷婷丁香综合在线| 色婷婷六月天在线| 日韩国产在线精品| 亚洲天天免费| 国产精品18久久久| 色婷婷五月天亚洲| 久久久久人妻精品| 久婷婷五月丁香在线观看| 婷婷五月AV| 婷婷五月激情视频网| 九九久久综合网站| 久久色六月| 色亭亭五月天网扯| 情欲禁地| 99热精品综合| 久久婷婷五月综合色区| 六月婷婷亚洲| 五月丁香亚州综合网| 深爱激情网噜噜色| 五月久久丁香| 色五月色开心开心五月| 婷婷五月色网| av在线免费播放观看| 26uuu91| 久99婷婷色综合| 森林影视大全,最好看的2019年视频 | www狠狠| 亚洲色99综合天堂| 五月丁香在线看| www亚洲无码| 激情丁香五月天| Aα在线免费观看| 日本色视| 色吧婷婷| www.五月天婷婷| 久青青久| 婷婷五月激情黄色| 天天日夜夜曹| 欧美精品999| 激情五月天色网站| 色五月涩涩婷婷蜜桃| 三人荫蒂添的好舒服A片| www.狠狠色.com| www.99精品日操伊人乱碰在线| 婷婷激情四射网| 91精品久久久久| 丁香六月婷婷综合激情欧美 | 99色这里| 色一色综合| 天天日,天天射,天天舔| 黄久久久| 超碰在线99| 色噜综| 色玖玖玖| 九九热精品| 五月天激情婷婷小说| 亚洲爱婷婷| 成人丁香五月天| www.五月天婷婷姐姐| 99九九精品视频推荐| 激情五月综合网| 狠狠搞五月天| 影音先锋一区二区资源站| 九九亚洲| 亚洲激情高潮| 久久久久激情网| 天天干天天做| 丁香六月欧美| 99热精品10| 第四色色六月色综合| 五月婷婷六月天| 天天爽曰日爽| 午夜免费试看| AV网址大全在| 精品一二三区久久AAA片| 六月合五月婷| 色五月激情五月丁香五月婷婷啪啪综合| 久久美女五月天| 蜜桃婷婷五月| 亚洲综合草草| 婷婷综合在线网| 五月天开心激情综合网| 五月六月婷| 婷婷爱综合| 九月av在线| 无遮挡国产高潮视频免费观看| 亚洲综合在线视频| 欧美成人日韩| 激情五月婷婷综合网| 操久久网| 99久久五月婷婷| 婷婷丁香色五月天久久88| 天天综合91入口| 久久久婷婷五月天| 五月丁香久久| 久久久激情视频| 99精品福利视频| 五月天开心婷婷久久| 综激情网| 97五月久久丁香婷婷| 91在线精品一区二区| 99自拍视频| 超碰成人电影| 五月丁香自拍| 五月天婷婷7米| 天天操天天日天天操| 99亚洲综合| 五月天堂色| 在线视频激情网站| www.爱婷婷.com| 清纯唯美 激情四射| 婷婷五月色| 婷婷五月丁香久久| 综激情网| 99在线播放视频| 五月丁香六月婷| 欧美中文五月天| 丁香激情综合| 九九热思思| 色婷婷AV久久久久久久| 婷婷五月天六月| 思思热在线视频99| 丁香激情婷婷网| 99热九九在线| 丁香五月停停av| 思思热久久婷婷五月天| 99热99在线| 亚洲亚洲人成综合网络| 激情深爱五月天| 婷婷中文字幕| 亚洲婷婷性爱| 玖玖综合色区在线观看| 婷婷色五月天色色| 4399在线观看免费高清黄色视频| 婷婷色网站| 九九热欧美| 99热综合| 久久在线视频免费观看| 中文字幕无线久必| 操b视频在线观看一区二区| www.久操| 激情亚洲婷婷| 高清无码.com| 婷婷色五月久久| 99日这里只有精品| 人人视频人人干人人做| 色婷婷五月色| 91狠狠色丁香婷婷综合久久| 久综合4| 久久玖玖99| 五月久久网| 天天综合网、天天综合色 | 日本英国美国欧美亚洲国产精亚洲日韩精品在线观看 | 99爱在线精品视频免费观看| 色婷婷激情| 91久久精品国产91性色TV| 99操网站| 丁香五月综合婷婷| 99色丁香婷婷综合网| 99热在线观看免费| 婷久久| 99久久国产宗和精品1上映| 夜色热久| 九九操操| 巴基斯坦粉嫩无码视频| 五月婷婷丁香综合| 日韩二区搞逼插逼毛片| 91九色中文字幕女在线观看| 亚洲精品操一操、噜一噜、摸一摸、爽| 婷婷五月电影院| ji'qing'luan'ren'lun| 丁香五月天激情免费在线观看AV777| 久久婷婷五月天激情唯美| 91激情五月开心| 国产精品18久久久| 伊人玖玖婷婷| 6080av| 9久热在线视频精品| 欧美成人精品A片免费一区99| 天天日天天干天天操| 久热伊人91| a在线观看| 丁香五月开心五月激情| 色色色热| 91性人人| 99热骚货| 五月丁香在线| www.五月丁香| 丁香色五月婷婷91桃色| 99热精品在线播放| 婷婷情色开心五月天99| 色吊丝永久访问网址| www.操逼comm| 色九月婷婷综合| 久久丁香综合香蕉| 激情婷婷五月天。| 狠狠狠狠狠狠| AV在线不卡播放| 久久久五月天| 色情婷婷五月天| 少妇性按摩无码中文A片| 久久艹99| 亚洲va欧洲va国产va不卡| 成人午夜无码视频| 五月色婷婷影院| www色五月天| 色九月| 97视频.干com| 六月丁香网| 丁香五月-激情综合| 婷婷激情五月吧| 五月婷婷丁香六月| 五月婷中文娱乐综合| 五月婷婷和六月| site:pnnrt.com| 天天插天天射天天干| 天天做天天爱天天做| A片试看50分钟做受视频| 色播五月丁香| 亚洲熟女色| www91在线| 六月丁香VA| 91久女| 午夜不卡成人一区二区| 天天射影院| 热九九在线| 伊人在线视频| 9色在线| 午夜天堂啪啪| 伊人婷婷大香蕉| 成人永久免费视频在线观看| 婷婷激情四射五月天| 天天碰夜夜爽| 潮汕成人AV片在线| 小视频久久久aaa| 国产高潮A片羞羞视频涩涩| 激情五月综合网| 日日日日日| 五月婷婷婷综合网| 五月亚洲| 二级黄色毛片| 婷婷五月激情图片| 色色激情五月| 99久热| 欧美日韩91| 久久99综合| 天天搽天天射| 中文幕无线码中文字蜜桃| 婷久看人爽| 亚洲中字AV电影在线网站| 开心五月深爱五月婷| 高清a片基地| 99热精品在线播放| 97色天堂| 深爱激情五月婷婷| 先锋男人99资源| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | 色色丁香五月天| 91无码视频| 玖玖资源在线视频| 丁香五月综合激情久久潮喷| 亚洲色无码A片一区二区麻豆| 五月丁香激| 99综合视频一体| 激情五月天婷婷久久久久久久久久久| 99久久久久久www| 99激情网| 色婷婷成人做爰A片免费看网站| 99婷婷国产最新视频| 色情婷婷五月天| 五月天播播综合| 万月丁香狠狠爱| 婷婷五月花丁香| 99久在线| 成人精品视频99在线观看免费 | 黄色aaaaa| 婷婷中文字幕| 大香蕉院线| 丁香久久九九99| 色五月色五天色情网| 五月丁香A片| 在线成人va| 五月丁香激情综合网| 大香蕉九九| 97亚洲视频在线| 婷婷五月天社区| 99久久久久| 99精品视频播放| 色婷婷综合影院| 激情综合网婷婷久久| 碰久久精品w| 这里只有精品免费| 色婷五月| 婷婷色亚洲| 伊人影院久久网| 五月丁香婷婷成人网| 九九精品视频在线6| 色综合中文色综合网| 欧美69久成人做爰视频| 五月天天综合| 日日夜夜天天爽| 丁香婷婷六月天| 亚洲AV无码成人电影| 丁香五月色色| 五月开心深爱激情网| 99综合免费视频| 亚洲热久| 偷拍丁香九月激情| 婷婷六月丁| 亚洲综合激情五月久久| 欧美久久五月婷婷| 91超碰九色| 五月丁香A片| 国产做A爰片毛片A片美国| 丁香五月天狠狠| 噜噜噜噜在线| 六月撸婷婷| 色色色五月| 成人AV在线中文版| 五月丁香大香蕉| 激情99| www.五月天。com| 久热只有这里有精品| 色五月中文字幕| 90色免费视频| 丁香成人五月天| 久久六月综合| 亚洲色vA| 狠狠色官网| 开心婷婷五月天综合| 婷婷五月天大香蕉| 免费观看高清无码| 成人做爰黄A片免费看直播室男男 A片试看120分钟做受图片 | 啪啪啪综合网| 丁香五月欧美激情| 色播五月婷婷| 五月草视频| 欧美综合五月丁香五月天| 婷婷五月天无码视频| 午夜爱爱网站| 亚洲无码11| 先锋资源91| 婷色视频| 成人AV中文字幕| 99精品网址| 99久久五月婷婷| 久久婷婷六月综合国际| 大香蕉 婷婷| 伊人婷婷五月天| 丁香五月av| 欧美性做爰大片免费看办公室| 日本激情综合| 99热这里只有精品国产首页| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | 日日夜夜噜噜爽爽| 九九精品自拍| AV九九| 激情五月婷婷免费视频| 婷婷色婷婷亚洲成人| 国产伦理精品高清在线观看网站一区二区| 玖玖热视频| 日韩成人AV在线| 91热在线| 婷婷色五月天在线观看| 九九热99热| 五月婷婷六月色| 九九99精品视频| 婷婷五月丁香久久| 99热在线观看免费精品| 在线99热| 玖玖九九超碰| 婷婷桃色网| 免费操超碰| 极品色丁香| 色五月综合激情| 狠狠88综合久久久久噜噜噜| 色色婷五月天| 99日这里只有精品| 国产婷婷综合| 久久99精品久久只有精品| 久草热8精品视频在线观看| 亚洲情综合五月天| 青青草网武则天| 婷婷五月天激情电影| 热的五码久久精品| 久久精品66| 涩五月婷婷| 五月天com| 大色鬼综合| 中文字幕黄色电影网址| 久久婷综合网| 五月激情在线| 九九中文色色| 91丨九色丨熟女丰满| 色之综合网| 亚洲综合狠狠艹| 丁香五月开心亚洲| 99精品成人无码A片观看金桔| 五月婷婷AV| www.夜夜操| 日本乱子人伦在线视频| 九九热在线99| 六月婷婷之青青草| 人人爽天天爽| 色婷婷久久| 99久久久精品| 婷五月丁香俺| 五月丁香在线综合| 婷婷俺去也| 亚洲狠狠爱婷婷| 婷婷网影院| 丁香五月AV综合激情| 五月综合无码| 无码人妻少妇色欲AV一区二区| 婷婷五月情| 综合久久综合五月天婷婷| 99热9| 五月婷婷六月开心| 超碰国产在线| 操久久精| 五月丁香激情欧洲啪啪| se99视频| 日本情色一区二区| 啪啪干伊人婷婷| 日韩一级网站| 9|人妻人人操| 亚洲综合视频天天精品| 激情五月天社区| 黄急一级视频| 色婷久久| 手机旧版看人妻1025| 婷婷五月丁香亚洲| www.婷婷五月天.com| 婷婷综合色五月天| 99热综合在线| 亚洲黄色操逼| 婷婷五月天少妇| 99热这里只有精品16| 夜夜AVV| 国产熟女日日骚五月丁香爱| 97色婷婷| 天天操B| 五月婷在线| 六月婷婷毛片| 婷婷五月深深的爱| 丁香五月婷婷啪啪啪| 51XX嘿嘿午夜无码| 色综合色综合色综合| 国产成人精品一区二三区熟女在线| 国产又爽又猛又粗的视频A片| 久久大香蕉丁香| 热热久久精品视频| 天天干 夜夜爽| 日韩在线观看亚洲| 99热这里只有精品55| 69人人操人人爽| 婷婷五月天亚洲天堂| 狠狠干,狠狠操| 91碰碰碰| 综合色播| 99色区| 色情综合网| AV在线大香蕉| 大香蕉婷婷丁香天堂AV| 丁香婷婷色情| 久久精品五月天| 成人免费网站免费看| 人人射人人高潮| 综合超碰熟| 婷婷五月天激情网站| 操比激情五月| 色欲AV导航| 国产AV成人精品| 丁香五月婷婷色播艳门照| 九八Av| 玖玖婷婷免费| 亚洲男人的天堂婷婷色五月| 午夜天堂一区人妻| 色婷婷丁香特级性爱视频| 影音先锋 萱萱| 狠狠色狠狠鲁| 国产99久| 日韩欧美一级大黄网站| 五月婷丁香久久综合| 丁香五月婷婷五月| 婷婷综合在线播放| 99性视频| 五月丁香亭亭成人电影| 亚州美女| 人人人操B超碰| 狠狠久综合| 婷婷色在线视频| 九九久久综合| 激情小说五月天| 五月丁香花免费视频| 9久操| 欧美Va婷色| 久久婷婷影院| 黄色三级毛片中字| 婷婷五月花西瓜| 色老久久| 99热网站| 色播婷婷五月天| 天天插天天射天天干| 色婷婷五月天成人网| 99热在线爱| 99热草草| 五月丁香六月激情| xxxx五月激情| 超碰99成人在线| 色婷婷五月综合在线| 热无码A∨| 狠狠综合久久综合| 91色在线/日韩| 开心日韩丁香婷婷五月| 色色九区| 天天插综合网| 久久这里只| 亚洲网视屏| 亚洲亚洲人成综合网络| 天天摸天天舔| 九九精品自拍| 欧类av怡春院| 大香线蕉伊人| 思思99精品视频在线观看| 婷婷伊人视婷婷婷| AV中文在线| 日韩在线婷婷五月天综合| 婷婷在线精品| 91n啪啪| 色激情五月| 99re鈥哸鈥唙| 色婷婷最爱五月| 亚洲天堂有码| 欧美激情性做爰免费视频| 欧美成人精品A片免费一区99| 影音 五月 婷婷 久久| 久久与婷婷| 九九色视频| 婷婷她六月天| 国产超碰人人| 亚洲成人AV高清字幕| 99成人| 日本激情五月天‘| 无码地址| 黄网在线观看免费| 五月丁香 狠狠爱| 色999;丁香五月| 99这里只有精| 国产高清RV综合aVa| 五月婷色| 婷婷伊人五月丁香天堂网| 亚洲日韩乱码一区二区三区四区| 国产精品色色色色| 激情四射网| 九色porny在线观看激情四射| 成人精品人妻| 丁香婷婷成人在线播放| 婷婷激情五月天网站| 婷婷99中文字幕| 色yeye欧美| www.wuyuetian啪啪| 99热精品在线在线| 91玖玖| 久久婷婷亚洲| 99re这里| 丁香五月成人在线| 五月丁香六月婷婷中文版| 狠狠色丁香久久久婷| 97操碰人人| 东北黄色一级| 任我干视频在线观看| www狠狠| 久久久免费精彩视频| 色狠狠综合| 九九热精品视频在线观看| 日本五月天一页| 996热re视频精品视频这里| 久久久er热| 色色色综合视频| 六月丁香婷婷拍拍| 久久丝袜婷婷| 婷婷丁香五月天影院 | 日本不卡一区二区三区| www.99在线| 91九色精品熟女内射| 午夜免费试看| 久色网| 高清无码入口| 亚洲综合另类| 性综合网| 亚洲综合在线播放| 五月丁香婷婷在线| 啪啪99| 337p大胆噜噜噜噜噜91Av| 人妻AV在线| 日本综合色色| 九九热最新视频| 99视频内射三四| 色色五月天婷婷| 涩五月婷婷| 国产内射婷婷| 一起草日本| 中文av在线观看| 日韩精品超碰在线观看| 婷婷五月天精品| 丁香婷婷色情| 激情综合五月| 久1色色| 婷婷综合网伊人| 婷婷娱乐丁香综合网| 婷婷五月天狠狠| 五月天丁香成人| 精品久久婷婷| 日韩无码专区| 狠狠色婷婷| 欧美日韩成人| av免费在线观看0| 婷婷六月偷拍| 26.uuu丁香五月婷婷| 久色网| 丁香六月天婷婷色| 九九精品在线网| 噜噜吧天天爱| 99热在这里只有精品| 九九色热| 九月婷婷综合在线| 99热国内精品| 天天做天天双| 思思久热6| 任你搞网站| 久久久久久人妻| 91日在线视频| 久久人人九| 丁香婷婷激情五月| 五月丁香六月婷婷综合| 99爱视频| 五月婷婷色| 日本专区久久| 国产韩日亚洲美州欧亚综合在线| 99re视频在线精品| 激情久久综合| 一本综合丁香日日狠狠色| site:pnnrt.com| 大香蕉久操| 丁香婷婷午夜| 丁香五月色情| 婷婷五月丁香手机在线视频| 99综合网| 久久久潮喷-久久久九九-成人AV| 五月婷婷色| 日韩欧美一道四区中文字幕| 日本va欧美va精品发布视频| 无码色色| 婷婷啪啪| 99久久.www| 天堂五月婷婷| 99热这里只有精品9| 风流少妇A片一区二区蜜桃| 99热狠狠操| 99精品这里只有免费视频| 这里只有精品视频| 精品亚洲国产成AV人片传媒| 99久热在线精品| 婷婷香五月综合激情| 九九精品免费| 久久 无毛。| 久久久区区一久久久久久| 久久大香蕉同僚| 99国产精品白浆在线观看免费| 五月婷婷AV| 精品九九婷婷| 91婷婷五月天综合视频| 伊人狠狠丁香婷婷综合尤物| 五月婷婷 婷婷五月 一区二区 久久久| 亚洲天堂婷婷丁香| 久久只有精| 日日操天天操| 五月天小说激情| 激情综合网,婷婷| 26uuu精品国产| 免费成人中文字幕| 9999热这里只有精品| 伊人婷婷五月天| 91在线精品一区二区| 五月丁香亭亭成人电影| 色激情五月| 丁香 久久| 99热99re6国产在线播放| 国产精品99久久久久久久女警| 五月丁香六月停停停| 中文aV网| 四色永久成人网站| www.91在线观看| 五月综合激情网| 岛国午夜视频| 六月丁香激情最新更新| 色色色99| 九九人妻福利| 深爱激情综合网| 色欲九区| 五月丁香久久久久| 超级碰碰碰97免费| 这里只有精品视频在线| 第九色区AV在线| 久久久五月婷婷| 99热香港| 婷婷亚洲在线| 夫妇交换刺激做爰| 情欲综合网| 97在线观视频免费观看| 秋霞学生妹一二级| 久操综合| 婷婷五月天久久| 国产67194| 欧美激情丁香五月| 第四色五月婷婷| 另类视屏| 日日干天天射| www,五月天com| 婷婷久久五月天|