欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

基于TCP的Socket文件上傳實(shí)戰(zhàn):協(xié)議設(shè)計與粘包處理

基于TCP的Socket文件上傳實(shí)戰(zhàn):協(xié)議設(shè)計與粘包處理 最近在幫朋友整理內(nèi)部服務(wù)器之間的日志同步方案時遇到一個非常典型的場景兩臺機(jī)器在同一內(nèi)網(wǎng)里需要把幾個GB的數(shù)據(jù)包從一臺傳到另一臺FTP服務(wù)沒搭、專門的HTTP上傳服務(wù)也沒人維護(hù)臨時裝個網(wǎng)盤工具又不現(xiàn)實(shí)。最后又繞回老路子——直接用TCP通信自己寫一個文件上傳工具。這篇文章就把這個綜合案例完整拆開講清楚從應(yīng)用層協(xié)議設(shè)計、服務(wù)端實(shí)現(xiàn)、客戶端實(shí)現(xiàn)到實(shí)測過程中踩過的坑和進(jìn)階思路覆蓋到Socket編程里最容易被忽略、但實(shí)際開發(fā)又一定會遇到的細(xì)節(jié)。無論你是剛開始學(xué)網(wǎng)絡(luò)編程的學(xué)生還是工作中突然要處理內(nèi)網(wǎng)文件傳輸?shù)拈_發(fā)者照著這套邏輯都能快速落地一套可靠的方案。1. 動手前先想清楚這個案例到底在解決什么問題1.1 既要傳得對又要傳得完文件上傳這件事聽上去很簡單但放到TCP通信的場景里難點(diǎn)立刻浮出水面。TCP本身只保證字節(jié)流是可靠有序的它并不理解文件這種業(yè)務(wù)概念。你往Socket里寫一段字節(jié)對端讀到的可能是半段數(shù)據(jù)也可能是兩段數(shù)據(jù)黏在一起。所以這個綜合案例真正要解決的是在TCP提供的原始字節(jié)流之上設(shè)計一套能讓雙方都理解的消息協(xié)議把文件的名字、大小、內(nèi)容、校驗(yàn)信息完整地送達(dá)對端。另一個容易忽略的痛點(diǎn)是傳得完。小文件一次性讀進(jìn)內(nèi)存再write很快就完事但到了幾個GB的日志文件內(nèi)存根本扛不住必須用緩沖流分塊讀取、分塊發(fā)送。再加上網(wǎng)絡(luò)抖動、客戶端斷線、服務(wù)端磁盤寫入失敗這些情況一個看起來簡單的上傳工具實(shí)際上要把連接管理、流處理、異常恢復(fù)、資源釋放全部串起來。1.2 為什么這個場景必須選TCP而不是UDP文件上傳在傳輸層幾乎沒有選擇的余地必須用TCP。UDP雖然發(fā)送快、沒有連接維護(hù)成本但它不保證數(shù)據(jù)包的到達(dá)順序也不保證不丟包。如果基于UDP做文件傳輸要么自己實(shí)現(xiàn)一套復(fù)雜的確認(rèn)重傳機(jī)制要么接受文件內(nèi)容可能損壞的后果。相比之下TCP把擁塞控制、超時重傳、順序校驗(yàn)這些機(jī)制全部內(nèi)置了你要做的只是在流上面劃分消息邊界已經(jīng)省去了最麻煩的部分。不過這也引出一個很多新手會犯的錯誤覺得TCP可靠就可以把文件名、文件大小、文件內(nèi)容一次性write出去然后以為對端一定能原樣收到。這個理解是錯的——TCP的可靠是字節(jié)層面的可靠不是消息層面的可靠。發(fā)送方一次write比如write 1MB數(shù)據(jù)接收方可能分好幾次read才能讀完發(fā)送方連續(xù)write兩次接收方可能一次read就把兩段數(shù)據(jù)一起讀出來了。這就是后面要重點(diǎn)處理的粘包、拆包問題也是整個協(xié)議設(shè)計的最核心動機(jī)。1.3 邊界判斷什么時候該自研什么時候該用現(xiàn)成方案在做這個工具之前我也認(rèn)真想過是不是直接用成熟方案更省事。如果只是偶爾在內(nèi)網(wǎng)傳幾個文件SFTP、NFS、HTTP文件服務(wù)甚至直接掛個網(wǎng)盤都比自己寫Socket要快。但如果你面對的是批量機(jī)器之間的程序化傳輸、需要在傳輸過程中嵌入特殊的業(yè)務(wù)校驗(yàn)比如上傳后觸發(fā)后續(xù)任務(wù)、或者處于一個不允許額外安裝服務(wù)的受限環(huán)境自己實(shí)現(xiàn)一個輕量TCP上傳通道反而是更理智的選擇。自研方案的邊界也很明確單機(jī)吞吐、并發(fā)連接數(shù)、斷點(diǎn)續(xù)傳這些能力都取決于你自己的設(shè)計和代碼質(zhì)量出了問題沒有現(xiàn)成文檔能查全靠對TCP機(jī)制的理解。所以這個案例的定位不是替代FTP而是一種在可控場景下靈活定制的技術(shù)方案。理解清楚這一點(diǎn)你才知道哪些協(xié)議字段要考慮、哪些異常分支要處理程序才不會寫到一半失控。2. 應(yīng)用層協(xié)議設(shè)計先把字節(jié)流翻譯成消息2.1 協(xié)議頭結(jié)構(gòu)固定頭部加變長字段TCP是流協(xié)議沒有天然的消息邊界所以應(yīng)用層必須自己定義幀。我的做法是設(shè)計一個固定長度的協(xié)議頭后面跟著文件名和文件內(nèi)容。固定頭部長度的好處是接收方可以先讀固定字節(jié)解析出各個字段的寬度再按需讀取后續(xù)內(nèi)容。我設(shè)計的協(xié)議頭格式如下字段類型字節(jié)數(shù)說明魔數(shù)int4固定為0x4D41494E用于快速識別合法連接協(xié)議版本int4當(dāng)前為1方便后續(xù)協(xié)議演進(jìn)文件名長度int4文件名字節(jié)長度UTF-8編碼后文件大小long8文件內(nèi)容的總字節(jié)數(shù)支持超過2GB的文件上傳模式int41覆蓋、2追加、3拒絕默認(rèn)1MD5摘要byte[16]16整個文件內(nèi)容的MD5值用于完整性校驗(yàn)固定頭部一共40字節(jié)。文件名是變長字段跟在固定頭部之后隨后才是文件內(nèi)容。接收方拿到前40字節(jié)后解析出文件名長度再精確讀取文件名最后根據(jù)文件大小循環(huán)讀取剩余內(nèi)容。這里有個經(jīng)驗(yàn)文件名長度用int而不是short雖然實(shí)際場景里文件名幾乎不會超過65535字節(jié)但用int可以避免一個很隱蔽的邊界問題。Java的DataInputStream.readUTF內(nèi)部就是用short存長度的文件名稍微長一點(diǎn)就拋UTFDataFormatException排查起來很費(fèi)勁。既然協(xié)議是自己設(shè)計的就不要把這種限制帶進(jìn)來。2.2 粘包與拆包的解決思路定長頭加變長體粘包接收方一次讀到了兩條消息的內(nèi)容和拆包一條消息被分成多次讀取是TCP編程的經(jīng)典問題。網(wǎng)上??吹絻煞N解法一種是約定固定長度消息不足補(bǔ)位另一種是使用特殊的結(jié)束符。固定長度協(xié)議浪費(fèi)帶寬結(jié)束符方案又要求文件內(nèi)容里不能出現(xiàn)結(jié)束符都不太適合文件傳輸。最實(shí)用的還是定長頭加變長體的思路接收方先把40字節(jié)的頭部讀完整通過readFully保證讀取的字節(jié)數(shù)恰好等于頭部長度然后根據(jù)頭部里的文件名長度、文件大小再精確讀取對應(yīng)字節(jié)數(shù)的數(shù)據(jù)。因?yàn)槊看巫x取的量都有明確數(shù)字約束即使消息在底層被拆成了多個TCP包接收方也只需要循環(huán)讀到指定字節(jié)數(shù)即可粘包也不會影響后續(xù)解析——因?yàn)槊織l消息的長度是確定的剩余緩沖區(qū)里的字節(jié)自然屬于下一條消息。在Java里實(shí)現(xiàn)這一點(diǎn)很簡單使用DataInputStream.readFully(byte[])比反復(fù)調(diào)用read()可靠得多。它內(nèi)部幫你循環(huán)讀取直到讀滿指定長度或者流已經(jīng)結(jié)束。很多初學(xué)Socket的代碼里喜歡這么寫byte[] header new byte[40]; in.read(header);這個寫法是有隱患的read不保證一次讀滿40字節(jié)。必須改成byte[] header new byte[40]; in.readFully(header);不要小看這個差異實(shí)測中普通局域網(wǎng)環(huán)境還好跨交換機(jī)、跨網(wǎng)段傳輸時read一次返回不滿的情況非常常見這也是為什么我的接收數(shù)據(jù)總是缺一截的高頻根源。2.3 三個容易被忽略的協(xié)議細(xì)節(jié)第一個細(xì)節(jié)是文件名的編碼問題。文件名在傳輸前用UTF-8編碼成字節(jié)數(shù)組長度是字節(jié)數(shù)組的長度而不是字符串的字符數(shù)。接收方讀出字節(jié)數(shù)組后用UTF-8解碼恢復(fù)文件名。如果不統(tǒng)一編碼發(fā)送端用GBK、接收端按UTF-8解析中文文件名必然亂碼服務(wù)端寫出去的文件名也會出問題。第二個細(xì)節(jié)是目錄穿越。協(xié)議里收到的是客戶端發(fā)來的文件名服務(wù)端如果直接拿它拼路徑比如new File(baseDir, fileName)一旦fileName里包含../服務(wù)端的文件就會寫到baseDir以外這是嚴(yán)重的安全漏洞。服務(wù)端必須對文件名做凈化處理最簡單的方式是取文件名中的最后一個路徑分隔符之后的部分或者用白名單字符集過濾。第三個細(xì)節(jié)是響應(yīng)反饋。協(xié)議不能只允許客戶端向服務(wù)端發(fā)送服務(wù)端也需要告訴客戶端上傳結(jié)果。所以客戶端發(fā)完文件內(nèi)容后調(diào)用shutdownOutput進(jìn)入半關(guān)閉狀態(tài)讓服務(wù)端讀到文件流的末尾隨后服務(wù)端寫一個int類型的狀態(tài)碼比如0表示成功1表示失敗2表示校驗(yàn)錯誤回送給客戶端。這里的半關(guān)閉是關(guān)鍵它告訴TCP我的發(fā)送方向已經(jīng)結(jié)束但連接仍然可以用來接收數(shù)據(jù)。3. 服務(wù)端實(shí)現(xiàn)從accept到落盤的完整鏈路3.1 服務(wù)端骨架ServerSocket加線程池服務(wù)端要做的事情很簡單監(jiān)聽端口、接受連接、為每個連接分配合適的處理器。但簡單的背后有幾處要注意。一是監(jiān)聽的端口要設(shè)置合理過高如65535在生產(chǎn)環(huán)境容易被防火墻攔截過低如1024以下又需要權(quán)限。案例里我用9999這種高位端口。二是處理方式是單線程還是多線程如果只有一個客戶端傳文件單線程也夠用但實(shí)際環(huán)境里總會有多個上傳任務(wù)所以我在最外層放ServerSocket每拿到一個Socket就交給一個獨(dú)立的線程去處理。ServerSocket serverSocket new ServerSocket(9999); ExecutorService pool Executors.newFixedThreadPool(Runtime.getRuntime().availableProcessors() * 2); while (!Thread.currentThread().isInterrupted()) { Socket socket serverSocket.accept(); socket.setTcpNoDelay(true); pool.submit(() - handleClient(socket)); }Executors.newFixedThreadPool在線程數(shù)量上可以控制并發(fā)上限避免因?yàn)榇罅可蟼髡埱髮?dǎo)致服務(wù)端創(chuàng)建上千個線程直接打爆內(nèi)存。生產(chǎn)環(huán)境里我一般推薦用ThreadPoolExecutor手動指定核心線程數(shù)和隊列容量但在教學(xué)案例里固定線程池夠用規(guī)則也簡單。setTcpNoDelay(true)也值得說明它關(guān)閉了Nagle算法。Nagle算法會把小的數(shù)據(jù)包攢在一起發(fā)送以減少網(wǎng)絡(luò)報文數(shù)量但對于文件上傳這種需要頻繁寫入小塊數(shù)據(jù)的場景Nagle帶來的延遲會讓交互式確認(rèn)變得拖沓。文件上傳更看重吞吐關(guān)閉Nagle后小包的發(fā)送延遲明顯降低。3.2 協(xié)議解析與文件寫入的核心邏輯每個客戶端連接進(jìn)來后真正的核心邏輯是固定的幾步讀固定頭部、讀文件名、按文件大小循環(huán)讀文件體、寫磁盤、校驗(yàn)、回送結(jié)果。private static final int HEADER_SIZE 40; private static final int MAGIC 0x4D41494E; private void handleClient(Socket socket) { String filePath null; try (DataInputStream in new DataInputStream(new BufferedInputStream(socket.getInputStream())); DataOutputStream out new DataOutputStream(socket.getOutputStream())) { byte[] headerBytes new byte[HEADER_SIZE]; in.readFully(headerBytes); ByteBuffer header ByteBuffer.wrap(headerBytes).order(ByteOrder.BIG_ENDIAN); int magic header.getInt(); int version header.getInt(); int nameLen header.getInt(); long fileSize header.getLong(); int mode header.getInt(); byte[] expectMd5 new byte[16]; header.get(expectMd5); if (magic ! MAGIC) { out.writeInt(STATUS_PROTOCOL_ERROR); return; } byte[] nameBytes new byte[nameLen]; in.readFully(nameBytes); String fileName new String(nameBytes, StandardCharsets.UTF_8); String safeName sanitizeFileName(fileName); File target resolvePath(safeName, mode); if (target null) { out.writeInt(STATUS_EXISTS); return; } filePath target.getAbsolutePath(); long totalRead 0; try (FileOutputStream fos new FileOutputStream(target); BufferedOutputStream bos new BufferedOutputStream(fos)) { byte[] buffer new byte[64 * 1024]; while (totalRead fileSize) { int need (int) Math.min(buffer.length, fileSize - totalRead); int len in.read(buffer, 0, need); if (len -1) break; bos.write(buffer, 0, len); totalRead len; } bos.flush(); } if (totalRead ! fileSize) { out.writeInt(STATUS_INCOMPLETE); return; } byte[] actualMd5 md5(Paths.get(filePath)); if (!MessageDigest.isEqual(expectMd5, actualMd5)) { out.writeInt(STATUS_MD5_ERROR); return; } out.writeInt(STATUS_OK); } catch (IOException e) { if (filePath ! null) { new File(filePath).delete(); } e.printStackTrace(); } }一定要注意文件體的讀取循環(huán)。因?yàn)閕n.read(buffer, 0, need)在一次調(diào)用中不一定能把need個字節(jié)全部讀滿所以循環(huán)條件是基于totalRead fileSize每個分片按剩余字節(jié)數(shù)取need這樣既避免讀了下一幀的數(shù)據(jù)如果還有的話也保證了大文件能被完整讀完。3.3 路徑處理與服務(wù)端的安全考慮sanitizeFileName和resolvePath這兩個方法雖然代碼不多卻是服務(wù)端最值得花心思的地方。sanitizeFileName的邏輯是把傳入文件名的所有路徑分隔符替換為下劃線或者提取最后一個分隔符后面的部分。因?yàn)槲募膩碓词蔷W(wǎng)絡(luò)對端永遠(yuǎn)不能信任。同時還要過濾掉Windows下不合法字符比如:/\\|?*否則服務(wù)端落在Windows目錄時文件寫入會拋IOException。resolvePath則處理上傳模式。如果模式是覆蓋直接返回baseDir下的目標(biāo)文件如果是追加返回目標(biāo)文件并準(zhǔn)備好以追加方式寫入如果是拒絕且文件已存在就返回null通知客戶端上傳被拒絕。基本邏輯是private File resolvePath(String fileName, int mode) { File baseDir new File(System.getProperty(user.home), uploads); if (!baseDir.exists()) baseDir.mkdirs(); File target new File(baseDir, fileName); if (mode MODE_APPEND) return target; if (mode MODE_REFUSE target.exists()) return null; return target; }這個邏輯的好處是覆蓋模式天然支持重復(fù)上傳適合批處理場景拒絕模式則避免了不小心覆蓋重要文件。你完全可以根據(jù)自己場景調(diào)整但安全邊界一定不能省。3.4 完整性校驗(yàn)與異常清理MD5校驗(yàn)放在文件全部寫入磁盤之后執(zhí)行。理論上應(yīng)該在內(nèi)存里邊收邊算摘要節(jié)省一遍文件的完整讀取但這樣對內(nèi)存的占用太高大文件場景不可行。案例里選擇的是接收完成后對落盤文件重新計算MD5再與協(xié)議頭攜帶的預(yù)期MD5比較。代價是文件會被讀第二遍增加了耗時好處是邏輯簡單、可靠性高。如果文件特別大可以折算一下耗時能接受就用不能接受就把校驗(yàn)機(jī)制降級為只校驗(yàn)文件大小。校驗(yàn)為什么重要我在一開始就強(qiáng)調(diào)TCP是可靠傳輸?shù)玊CP的可靠不等于端到端的內(nèi)容不變。中間設(shè)備改寫、服務(wù)端磁盤壞道、程序緩存沒刷干凈都可能導(dǎo)致落盤文件和原始文件不一致。有了MD5對比至少能發(fā)現(xiàn)絕大多數(shù)數(shù)據(jù)損壞的情況。也不要忘了totalRead ! fileSize這種最基本的判斷在客戶端還沒發(fā)完就斷開連接時文件往往只有原始大小的一部分這時候必須把半成品文件刪除并回送錯誤碼。4. 客戶端實(shí)現(xiàn)連接、按協(xié)議發(fā)送、等待反饋4.1 客戶端骨架與連接超時設(shè)置客戶端的實(shí)現(xiàn)和服務(wù)端恰好互逆它的職責(zé)是把本地文件轉(zhuǎn)換成協(xié)議頭加文件體的字節(jié)流發(fā)送到服務(wù)端然后等待確認(rèn)。代碼的第一步是建立連接。這個步驟有幾個常見的坑。用的是Socket()無參構(gòu)造加上connect方法可以在建立連接前設(shè)置超時時間Socket socket new Socket(); socket.connect(new InetSocketAddress(host, port), 5000); socket.setSoTimeout(30000);connect方法的第二個參數(shù)是連接超時毫秒。不設(shè)置的話new Socket(host, port)遇到不可達(dá)地址時會卡很久用戶體驗(yàn)極差。setSoTimeout(30000)設(shè)置的是讀超時也就是等待服務(wù)端響應(yīng)結(jié)果時的最大阻塞時間防止服務(wù)端一直不返回導(dǎo)致客戶端線程永久掛掉。這兩個超時是網(wǎng)絡(luò)編程里最容易漏掉、但生產(chǎn)環(huán)境又一定必須加的配置。4.2 大文件分塊發(fā)送不要一次性讀進(jìn)內(nèi)存很多初學(xué)者的代碼喜歡這樣寫byte[] data Files.readAllBytes(file.toPath()); out.write(data);這種寫法處理幾MB的小文件問題不大但文件一旦到了幾百M(fèi)B甚至幾GBreadAllBytes會直接把內(nèi)存撐爆。正確做法是分塊讀取并循環(huán)發(fā)送建議的緩沖區(qū)大小是64KB到1MB之間。實(shí)際傳輸中我習(xí)慣用64KB這是一個在性能和內(nèi)存占用之間比較平衡的值。緩沖區(qū)太小系統(tǒng)調(diào)用次數(shù)變多吞吐上不去緩沖區(qū)太大單個TCP分片也裝不下反而增加內(nèi)存壓力。try (FileInputStream fis new FileInputStream(file); BufferedInputStream bis new BufferedInputStream(fis)) { byte[] buffer new byte[64 * 1024]; int len; long sent 0; while ((len bis.read(buffer)) ! -1) { out.write(buffer, 0, len); sent len; long percent sent * 100 / fileSize; if (percent lastPercent 5) { System.out.printf(已發(fā)送%d / %d%d%%%n, sent, fileSize, percent); lastPercent percent; } } out.flush(); }out.write(buffer, 0, len)里的len來自bis.read的返回值這個返回值決定了本次寫入的實(shí)際字節(jié)數(shù)。絕大多數(shù)情況下一次read返回的量不會超過64KB所以out.write一次也會把這個緩沖區(qū)的數(shù)據(jù)盡可能推入Socket發(fā)送緩沖區(qū)。由于網(wǎng)絡(luò)擁塞write本身可能導(dǎo)致線程阻塞但這是正常的流量控制不需要額外處理。4.3 半關(guān)閉連接與讀取服務(wù)端響應(yīng)文件內(nèi)容發(fā)送完畢后客戶端不能直接調(diào)用close關(guān)閉連接因?yàn)槿绻B接直接關(guān)閉服務(wù)端可能還沒有機(jī)會把處理結(jié)果回傳客戶端就收不到了。正確做法是調(diào)用shutdownOutput()這會讓TCP連接進(jìn)入半關(guān)閉狀態(tài)告訴服務(wù)端我的發(fā)送方向已經(jīng)結(jié)束但仍然保留接收方向可以繼續(xù)等待服務(wù)端返回結(jié)果。socket.shutdownOutput(); DataInputStream din new DataInputStream(socket.getInputStream()); int status din.readInt(); if (status STATUS_OK) { System.out.println(上傳成功服務(wù)端已校驗(yàn)MD5一致); } else { System.out.println(上傳失敗狀態(tài)碼 status); }這里服務(wù)端也要配合好。服務(wù)端讀取到文件流末尾read返回-1后才會寫結(jié)果給客戶端。如果數(shù)據(jù)還沒讀完就寫結(jié)果客戶端那邊會因?yàn)樵谕粋€Socket里先收到了結(jié)果字節(jié)而把結(jié)果誤當(dāng)成文件內(nèi)容的一部分導(dǎo)致協(xié)議錯亂。所以服務(wù)端一定要保證文件內(nèi)容讀取循環(huán)結(jié)束后再調(diào)用out.writeInt(status)。有一個小細(xì)節(jié)是客戶端這邊的DataInputStream也需要設(shè)置超時。我在前面設(shè)置了setSoTimeout(30000)這樣即使服務(wù)端因?yàn)楫惓?ㄔ谖募x取階段客戶端最多等30秒就會收到SocketTimeoutException不會永遠(yuǎn)阻塞下去。4.4 進(jìn)度感知與回滾提示進(jìn)度反饋并不是協(xié)議的一部分但卻是用戶體感的重要部分。一個上傳任務(wù)跑十分鐘沒有進(jìn)度提示用戶的第一反應(yīng)是程序卡死了。我這邊實(shí)現(xiàn)的方式是每發(fā)送5%就打印一次日志同時記錄最后的百分比避免重復(fù)打印。日志的粒度沒必要太細(xì)5%已經(jīng)足夠。如果打印太頻繁大量日志輸出本身也會消耗CPU和磁盤IO。實(shí)測下來5%到10%的粒度最舒服。進(jìn)度日志的另一個作用是可以作為故障排查的線索。如果一次上傳卡住了日志停留在某個百分比位置不動你就能判斷問題出在哪個階段是發(fā)送過程中網(wǎng)絡(luò)斷開還是服務(wù)端處理卡住還是等待響應(yīng)超時??床坏竭M(jìn)度時排查這種問題只能靠猜體驗(yàn)完全不一樣。5. 實(shí)測踩坑有些問題不跑一遍大數(shù)據(jù)根本想不到5.1 粘包半包的真實(shí)復(fù)現(xiàn)案例剛跑通的時候我用一個100MB的文件測試一切正常。然后換成一個1.2GB的文件第一次傳輸就出了問題服務(wù)端接收文件到一定大小后拋異常提示文件提前結(jié)束。排查后發(fā)現(xiàn)客戶端在發(fā)送文件內(nèi)容的同時我把服務(wù)端的響應(yīng)邏輯寫在了文件內(nèi)容讀取完成之前。服務(wù)端一旦讀了幾個字節(jié)作為響應(yīng)看待整個消息結(jié)構(gòu)就亂了。這個坑的本質(zhì)是TCP的字節(jié)流沒有邊界如果你在接收文件內(nèi)容時還試圖從同一個輸入流里提前讀響應(yīng)那讀到的其實(shí)是文件內(nèi)容的一部分。根源是因?yàn)槲募?nèi)容很大在底層會被拆成多個TCP包發(fā)送read第一次拿到的可能只有一部分導(dǎo)致代碼邏輯把后面的某些字節(jié)誤判為標(biāo)志位。解決方式也很簡單嚴(yán)格執(zhí)行協(xié)議順序。文件內(nèi)容的讀取循環(huán)必須跑完totalRead fileSize然后才允許服務(wù)端從輸入流讀取后續(xù)內(nèi)容??蛻舳艘脖仨氂胹hutdownOutput明確表示發(fā)送結(jié)束才能進(jìn)入等待響應(yīng)階段。順序?qū)憣α苏嘲氚鼏栴}就從設(shè)計上被壓住了剩下交給readFully去兜底。5.2 long和int的選擇2GB限制第一次設(shè)計協(xié)議頭時我圖省事文件大小用的是int。測試到1.8GB一切正常但傳到2.3GB時客戶端報告發(fā)送了-1字節(jié)服務(wù)端那邊還沒收到數(shù)據(jù)就已經(jīng)報錯。后來查了一下問題就是int溢出2.3GB換算成字節(jié)已經(jīng)超過了int的最大值約21.47億算出來的字節(jié)數(shù)變成了負(fù)數(shù)整個發(fā)送循環(huán)直接崩潰。教訓(xùn)很清楚凡是和文件大小相關(guān)的字段一律用long。Java的數(shù)組下標(biāo)仍然是int限制但你真正要寫進(jìn)Socket的是分片不是整個文件的byte數(shù)組。用long記錄總大小、用int記錄每次的分片大小兩者組合起來就沒問題了。這個教訓(xùn)也提醒我協(xié)議設(shè)計階段最好把字段寬度一次性想清楚。文件大小、偏移量這些天然有變大趨勢的字段寧可用8字節(jié)的long也不要為了省幾個字節(jié)埋雷。5.3 客戶端斷網(wǎng)之后服務(wù)端留下一堆半成品有一輪測試我模擬了客戶端中途斷開上傳到一半直接切斷了網(wǎng)絡(luò)。服務(wù)端那邊沒有及時感知到客戶端斷開read方法在等著數(shù)據(jù)直到TCP超時重傳徹底失敗后才拋出SocketException。這個過程中服務(wù)端已經(jīng)創(chuàng)建了目標(biāo)文件并寫入了一部分?jǐn)?shù)據(jù)異常發(fā)生后這部分就是殘留的半成品文件。處理方案分兩步第一步在handleClient方法里記錄本次任務(wù)的目標(biāo)文件路徑第二步在catch塊中捕獲所有IOException后把記錄的目標(biāo)文件刪除。刪除動作本身也可能失敗文件被占用或權(quán)限不足那就再想辦法做一次補(bǔ)償或者至少輸出一條足夠顯眼的日志提醒人工介入。另一個很實(shí)用的技巧是給服務(wù)端設(shè)置SO_TIMEOUT也就是讀超時。如果一定時間內(nèi)沒有字節(jié)到達(dá)就直接拋異常結(jié)束任務(wù)而不是無限等待。文件上傳的場景里客戶端長時間不發(fā)送任何數(shù)據(jù)基本可以判定連接異常等待沒有意義。5.4 Windows和Linux路徑分隔符差異這個坑很隱蔽客戶端在Windows下把文件路徑D:\logs\access.log直接拼到協(xié)議里服務(wù)端在Linux下按/分割路徑文件名變成了D:\logs\access.log整個字符串。Windows下執(zhí)行File寫入時反斜杠會被當(dāng)作轉(zhuǎn)義字符的一部分結(jié)果文件名異常打不開目標(biāo)文件。我給的方案是在sanitizeFileName里統(tǒng)一過濾所有\(zhòng)\和/提取最后一個分隔符之后的部分作為文件名。這樣客戶端傳D:\logs\access.log過來服務(wù)端寫出的文件名就是access.log。如果確實(shí)需要保持目錄結(jié)構(gòu)那就讓協(xié)議再增加一個字段顯式表示相對路徑而不是依賴文件名里的分隔符自動解析。6. 進(jìn)階方向并發(fā)、續(xù)傳與更高效的數(shù)據(jù)通道6.1 多客戶端并發(fā)上傳的線程池參數(shù)如果同時上傳的客戶端有好幾個服務(wù)端的線程池參數(shù)就不能隨便寫了。前面用availableProcessors() * 2只適合CPU密集型的推算文件傳輸其實(shí)是IO密集型任務(wù)線程數(shù)可以略多。一個比較穩(wěn)的起步配置是ThreadPoolExecutor pool new ThreadPoolExecutor( 4, 16, 60, TimeUnit.SECONDS, new ArrayBlockingQueue(100), new ThreadPoolExecutor.CallerRunsPolicy() );核心線程數(shù)4最大線程數(shù)16隊列容量100。超出隊列容量時CallerRunsPolicy讓提交任務(wù)的線程自己執(zhí)行這比直接拋拒絕異常更溫和至少不會讓客戶端瞬間收到失敗。但也要注意如果并發(fā)太高IO和磁盤會成為瓶頸線程再多也沒有收益反而增加上下文切換的成本。實(shí)測幾GB大數(shù)據(jù)并發(fā)時磁盤寫入速度通常是第一瓶頸并發(fā)數(shù)控制在磁盤能承受的范圍內(nèi)才是對的。6.2 斷點(diǎn)續(xù)傳協(xié)議加offset服務(wù)端改用RandomAccessFile斷點(diǎn)續(xù)傳的關(guān)鍵是讓服務(wù)端知道這次從哪里繼續(xù)寫。在協(xié)議頭里增加一個8字節(jié)的offset字段客戶端發(fā)送前先和服務(wù)端確認(rèn)已有文件大小然后從偏移位置開始讀取并發(fā)送文件剩余部分。服務(wù)端接收時改用RandomAccessFile打開文件后先seek(offset)再按循環(huán)寫入文件體。這里要注意校驗(yàn)策略也要跟著變?nèi)绻募粋髁艘话刖蛿嗔苏募﨧D5還沒算出來續(xù)傳后的MD5計算必須在文件補(bǔ)齊之后才能做。另一種做法是傳輸時對每個分片計算CRC32服務(wù)端每收到一片校驗(yàn)一片這樣不用等整個文件送完就能及時發(fā)現(xiàn)損壞。代價是協(xié)議頭里需要再增加分片序號和分片CRC字段復(fù)雜度上了一個臺階。如果只是作為學(xué)習(xí)案例先把offset機(jī)制實(shí)現(xiàn)出來就夠理解了。真正的生產(chǎn)級續(xù)傳還要解決服務(wù)端如何知道文件已有多少數(shù)據(jù)的問題常見做法是客戶端先發(fā)一個查詢請求或者協(xié)議頭里帶上服務(wù)端文件的舊大小服務(wù)端比較后決定是覆蓋、跳過還是續(xù)傳。6.3 零拷貝數(shù)據(jù)通道FileChannel.transferTo前面的代碼用的是傳統(tǒng)InputStream/OutputStream復(fù)制每個字節(jié)都要在用戶態(tài)和內(nèi)核態(tài)之間拷貝多次。如果數(shù)據(jù)量極大這部分的CPU消耗非常明顯。Java NIO提供的FileChannel.transferTo可以借助操作系統(tǒng)內(nèi)核的sendfile機(jī)制Linux直接把文件內(nèi)容從文件系統(tǒng)發(fā)送到Socket緩沖省去用戶態(tài)拷貝。發(fā)送端的核心代碼可以簡化為FileChannel channel FileChannel.open(file.toPath(), StandardOpenOption.READ); long position offset; long count fileSize - offset; while (count 0) { long transferred channel.transferTo(position, count, socketChannel); if (transferred 0) break; position transferred; count - transferred; }需要留意的是transferTo并不是每調(diào)用一次就把count全傳完它返回的是實(shí)際傳輸?shù)淖止?jié)數(shù)所以必須用循環(huán)。另外SocketChannel要設(shè)置為阻塞模式默認(rèn)就是transferTo才能正常工作。我實(shí)測過使用零拷貝之后同文件傳輸?shù)腃PU占用幾乎下降了一半對于大批量文件同步的場景提升非常明顯。零拷貝也不是銀彈如果文件特別小、或者網(wǎng)絡(luò)非??於疟P很慢收益就無法體現(xiàn)。但作為一種進(jìn)階優(yōu)化思路它確實(shí)是值得了解的經(jīng)典技術(shù)。6.4 還能往哪里擴(kuò)展這個案例做完之后可以延伸的方向很多。最容易想到的是加密用TLS替換裸的Socket或者對文件內(nèi)容做AES加密后再傳輸解決明文數(shù)據(jù)在網(wǎng)絡(luò)上被截獲的問題。其次是壓縮在客戶端讀文件時用GZIPOutputStream包一層文件變小了傳輸自然變快代價是CPU占用增加。再往下就是秒傳客戶端先發(fā)送文件MD5服務(wù)端如果已經(jīng)有相同摘要的文件就直接返回成功不需要真的傳輸數(shù)據(jù)。還有一個值得嘗試的方向是傳輸限速和失敗自動重試。限速可以防止一個上傳任務(wù)占滿整個出口帶寬影響其他服務(wù)失敗重試則要和斷點(diǎn)續(xù)傳結(jié)合才能做到斷網(wǎng)恢復(fù)后自動接著傳。把這些機(jī)制一個個加進(jìn)去一個簡單的文件上傳Demo就會慢慢變成一個真正能扛生產(chǎn)環(huán)境的小型分發(fā)系統(tǒng)。這個案例本身不算復(fù)雜核心就是一段清晰的協(xié)議、一個按部就班的接收循環(huán)、加上對異常邊界的處理。但把它真正跑通、跑穩(wěn)你會發(fā)現(xiàn)對TCP通信的理解會扎實(shí)不少以后再碰到消息隊列、RPC框架里的傳輸設(shè)計和粘包處理背后都是同一套原理。如果實(shí)際操作中遇到了奇怪的問題優(yōu)先從消息邊界是否分明順序是否嚴(yán)格異常是否被吞掉這三個角度排查大概率能很快找到答案。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
天天草女人| 免费成人va| 伊人婷婷大香蕉| 玖热精品综合视频| 色噜噜狠狠狠狠色综合久欧美| 六月激情网| 婷婷月综合| 九九热这里只有精品556| 激情五月天网站| 婷婷五月色網站| 99精品久久久| 综合久久五月天| 五月激情丁香五月| 91久久综合亚洲噜噜成人在线 | 色婷婷88| 丁香五月六月激情| 丁香六月天AV| 五月婷婷狠狠久久| 久久免费少妇高潮99精品| 亚洲欧美丁香五月天亚洲欧美| 亚洲夜五月| 伊人九九九久| 欧洲第一无人区观看| 丁香五月在线| 激情婷婷网| 4399在线观看免费高清黄色视频| 婷婷五月丁香人妻无码高清| 三级毛片视频| 99精品成人无码A片观看金桔| 丁香五月婷婷偷拍| 日本丁香五月| 九九热在线视频观看| 国产乱码久久| 五月综合无码| 婷婷五六日| 五月婷婷偷拍| 五月婷中文字幕| 色情激情五月婷婷| 沈娜娜av| 香蕉色色网| 色婷婷激情| 狠狠久久婷五月| 17.c黄色| 五月丁香激情欧洲啪啪| 婷婷五月天论坛| 91精品婷婷国产综合| 久久97久久99久久综合欧美| 最近免费中文字幕大全高清大全1| 99激情网| 国产性爱亚洲是图| 成人丁香五月天| 亚洲AV网站在线观看| AV五月丁香| 91玖玖| 婷婷色基地在线看 | 就爱射中文字幕资源网| 五月综合激情综合久| AAA久久| 久综合| 亚洲操操| 婷婷六月丁香五月图区| 99热老司机| 色玖玖网| 91爱操| 无码九九九九| 亚韩在线视频| 这里只有精品日韩| 激情亚洲五月| 五月婷激情| 综合啪啪| 欧美色图天堂网| 五月丁香久久网| 一本色道久久综合狠狠躁小说| 亚洲日韩欧美综合VA| xxx综合在线| 婷婷五月天在线综合导航| 色婷婷操逼| 五月丁香六月婷婷成人| www.99色| 开心五月天激情| 九九爱看亚洲| 777色色色| 激情综合网五月天| 99热在线观看免费精品| 超碰狠狠干99| 五月丁香毛片| 99国产er热视频| 天天综合情| 五月香蕉婷婷| 亚洲婷婷免费| 桃色五月天| 天天操比比| 五月天婷婷基地| 久久精品99国产精品日本| 激情丁香五月婷婷| 亚洲AV影片在线观看| 超碰亚洲欧美| 婷婷五月激情欧美| 丁香综合伊人AV| 五月涩涩网| 精品久久久人妻| 亚洲综合99| 欧美色久| 97丨九色丨国产丨PORNY| 色爽干| 五月色网| 五月天成人小说| 开心五月色婷婷综合开心网| 丁香五月天天| 婷婷丁香高潮了| 久久一二三视频| 五月天婷婷综合免费| 国产精品日日躁夜夜躁| 日曰躁夜夜躁2026| 91狠狠色| 久色欧美| 狠狠五月天| 久久玖玖99| 91超级碰在线| 丁香婷婷五色月| 色色色色色综合| 婷婷午夜天| 又大又粗九一在线| 激情丁香婷婷六月天| 五月婷婷六月基地| 婷婷精品视频| 婷婷五月综激情| 狠狠999| 97九色视频| 北京熟妇搡BBBB搡BBBB| 久久婷婷啪啪视频| 爽天天天天天天天| 91色综合网站在线| 五月天免费色| 婷婷六月色| 草草色情综合网| 色五月综合97| 噜噜噜噜噜色| 国产成人精品一区二三区熟女在线| 九月婷婷激情久久| 日本三级大片| 丁香五月婷婷六月丁香| 欧美十二区| 午夜丁香婷婷| 六月婷婷综合激情| 在线综合91| 五月婷中文字幕| 国产伦亲子伦亲子视频观看| 丁香五月性爱| 欧美色色色色色| 丁香五月天堂亚洲社区| 狠狠色综合网站| 天天色色天天| 91Chinese在线| 性生活久久朋友人妻| 色情五月婷婷| 99热最新地址在线| 六月婷婷激情| 高清国产一级婬片a免费| 5月婷婷六月丁香| 成人短视频在线观看| 九九色黄色| 五月婷伊人| 日本色99| 九热...av| 日本五月天网站| 日韩成人无码| 99热国产国产| 亚洲视频在线观看| 色婷婷最爱五月| www.色综合| 婷婷综合av| 久久这里只有欧美| 九九久99免费视频| av性爱网站| 熟女人妻一区二区三区免费看| 女婷久久| 天天干天天日天天操| 伊人婷婷色| 婷婷丁香色无五月| 2013AV天堂| 开心五月婷婷99| 国产又爽又猛又粗的视频A片| 综合天天综合| 激情5月婷婷| 婷婷六月综合基地| 五月玖玖| 久久狠狠欧美| 久久精品国产一区二区三区四区| 日日夜夜青青草| 九九在线视频| 日本五月丁香| 99综合色色色| 玖玖婷婷五月天| 国产婷婷久久| 97干欧美| 99精品视频免费在线播放| 中文无码婷婷| 五月丁香在线婷婷美女| 丁香六月婷婷激情| 日日操天天操| 丁香五月婷婷色播艳门照| 国产婷婷久久| 思思热在线观看| 天天拍夜夜爽| 91夫妻视频| 久久视这里只有精品| 操一操干一干| 五月婷婷色情| 99超碰人人| 超碰二区| 久久只有精品| 丁J香六月首页| 亚洲视频伍月婷婷| 96丁香六月婷婷蜜桃综合久久| www.激情| 日本成人小说婷婷六月| 婷婷欧美激情综合| 9久精品| 五月婷婷和六月| 婷婷五月天综合网| 婷婷五月av| 色玖玖综合| av色婷婷| 天天日天天色| 五月丁查人人| 九九热在线亚洲免费视频| 国产成人精品123区免费视频| 青青草日本亚洲| 91精品综合久久久五月天| 99在线免费视频| 思思久久99热| 97艹| 国产精品久久久爽爽爽麻豆色哟哟 | 亚洲天码视频www蛋播视频| 狠狠色狠狠爱| 精品无码久久久久久久久| 日韩操逼小电影| 97操碰在线视频| 色综合婷婷| 激情五月丁香六月婷婷| 激情婷婷丁香五月天小说| 4438亚洲欧美| 五月激情六月综合| 狠狠色噜噜狠狠狠狠综合| 婷婷五月天av| www.精品久9| 色综合激情| WWW.桔色成人.COM| 玖热精品综合视频| 99热全是精品| 激情综合网激情五月俺也去| 超碰91在线| 久久久久久五月天| 日韩成人AV在线| 99se丁香| 丁香五月天堂网| 99免费热视频在线| 青青草日本亚洲| 色综合色综合网| 开心五月婷婷伊人| 日日.c| 狠狠干无码| 日本色婷婷综合| 久9视频免费播放| 国产精品久久久久久久久久| 五月丁香婷婷综合| 欧洲亚洲免费视频9| 国产精品久久7777777精品无码| 一区二区成人电影| 色人久夂| 99久久五月丁香野外| 亚洲乱码日产精品BD| 91狠狠色丁香| 五月天另类激情在线| 激情亚洲五月| 五月丁香拍拍激情综合| 天天干,天天舔| 婷婷丁香www视频日本韩国| 99视频| 狠狠色综合网站久久久久| 人人看人人摸人人| 99热这里只有精品无码| 色狠狠色狠狠| 色婷婷五月天小说网| 丁香色五月婷婷17C| 婷婷性爱视频在线| 综合色视频| 丁香五月婷婷激情四射深爱激情| 搡BBBB搡BBB搡18 | 狠狠插.com| 天天插天天插| 亚洲成人网站在线观看| www.婷婷六月天| 五月综合色| 日韩欧美四五区| 五月天婷五月天综合网小说首页-五月天激激婷婷大综合,婷婷亚洲综合五月天小说 | 色色色色色网| 天天干夜晚夜操| 97五月天婷婷| 99久久综合| 色五月婷婷五月丁香五月| 色天天综合色| 日撸夜撸日操| 色色色无码| 精品亚洲VA网站| a久久免费视频| 99热这里只有精品33| 26uuu国产色| 依人大香蕉| 国产激情AV| 色婷婷成人网| 五月开心婷婷中文字幕| 天天婷婷操| 热热久久精品视频| 天天日夜夜爽。| 66精品成人免费网站在线观看| renrencaoav| 亚洲开心激情网| 天天日日天天| 五月丁香六月婷婷视频| www.天天日| 97色啪| 9热精品| av在线激情| 亚洲欧洲另类| 日日夜夜综合| 99精品视频在线观看| 婷婷性爱综合| 伊人五月天婷婷| 超碰成人电影| 国内久久久精品99| 久久99热精品a片在线观看| 草五月| 99精品偷自拍| 丁香五月自拍| 久色| 天天射色五月天| 丁香无五月网| 99热伊人| 婷婷成人AV| 婷婷免费无视频| 99热老网站| 天天久久婷婷| 国精产品久久| 五月丁香六月激情| 丁香五月成人| 99热成人| 99热销国产这里有精品| 夜夜骑夜夜撸| 亚洲韩国日产综合AV| 久久综合热17c| 久久久久久欧美精品se一二三四| 9久久久| 婷婷五月天a| 欧美婷婷| 丁香五月婷婷少妇| 欧美色婷婷| 综合AV在线| 99操免费视频| 日本九九视频| www.yw色| 五月婷在线影院| 深爱激情四射| 被男人添B超爽视频| 五月丁香大香蕉| 婷婷久久五月天丁香| 婷婷五月综合网激情| 亚洲九九99精品视频在线播放| 99热网站| 婷婷久久五月天亚洲欧美国产日韩在线观看 | 色五婷婷| 九九精品婷| 丁香五月冃欧美| 欧美搡BBBBB摔BBBBB| 亚洲成人网无码| 丁香五月天啪啪| 爆乳熟妇一区二区三区爆乳| 超碰人人操在线| www.97碰碰com| 91九色欧美| 久久综合中文字幕| 丁香五月婷婷啪啪啪| 久热欧美| 五月天激情国产综合婷婷婷| 99思思热只有在这里看| 99九九热视频免费| 色色色五月婷| 99re99热| 婷婷99综合| 男人综合网| 综合欧美五月婷婷| 六月丁香婷婷综合在线| 97精品综合| 色久天| 精品久久99| 99热这里只有精品8| 99在线免费视| 99玖玖精品| 丝袜激情网| 丁香成人五月天| 91久久久久久| 狠狠色婷婷777| 色婷婷综合影院| 99精品久久久久久久婷婷| 亚洲区,视频区,视频区免费| 青草视频在线观看视频| 天天澡天天狠天天天做| 日韩aaa| 操操操www.com| 亚洲精品第一色色色色色色| 婷婷99热| 六月天六月婷| AV无码免费| 欧美激情综合色综合啪啪五月| 激情丁香网| 91主播在线| 色婷婷激情| 婷婷欧美偷拍综合| 久久XX日本综合| 亚洲va成人va成人va在线观看| 丁香婷婷黄网站| 中文字幕日产A片在线看| 丁香五月色欲| 丁香五月AV综合| 大香久久综合网| 九九热视频在线观看| 99热福利| 99久视频| 精品99爱免费视频在线观看| 激情综合网五月丁香| 婷婷六月啪啪| 色激情五月天| 色 五月婷婷基地| 色五月婷婷操逼| 国产精品久久久久9999小说| 91精品久久久久久| 婷婷激情图片| 99热99这里有免费的精品| 日本少妇AA一级特黄大片| 天天肏视频| 婷婷色日本| 另类丁香综合| 人妻视频一区而且二区| 欧美99热| 激情五月综合婷婷| 丁香五月欧美色综合| 99热大全在线观看| 思思色播| eeuus五月婷| VA色婷婷| 秋霞A V毛片| 9久热在线视频| 五月婷婷五月天| 色婷婷AV在线观看| 一级黄色尤物综合视频手机在线观看| 久久婷婷久久| 国产肥白大熟妇BBBB视频| 激情伊人六| 九色综合网| 色日本网| 五月丁香无码| 免费看欧美成人A片无码| 精品色色色| 国产女生爱爱AA| 色在线99| 五月婷婷久久爱| 欧美天堂婷婷日韩| 久九色| 99热九九在线| 欧美色图天堂网| 丁香五月亚洲综合丝袜| 色色婷| 婷婷五月天a| 伊人婷婷大香蕉| 精品一二三区久久AAA片| 狠狠色成人影片| 婷婷五月天天天日日夜夜| 99久久国产综合精品五月天喷水\| 激情亚洲婷婷| 黄色笑话深爱激情网丁香五月婷婷啪啪啪啪啪 | 涩综合婷婷| 丁香五月婷婷六月婷婷| 九月av在线| 99色在线| 色色丁香婷婷综合| 五月天激情www| 丁香五月婷婷综合视频| 综合99久久天天综合| 国产乱子轮XXX农村| Av九九| 五月丁香婷婷三级| 婷婷五月天成人动漫| 91超级碰在线| 岛国午夜视频| 国产精品色| 五月激情综合网| 人人摸人人搞| 七七久久综合| 先锋五月婷婷丁香草草| 久热最新视频| WWW99热| 色婷婷丁香| 黄色中文字目| 情色婷婷五月天| 免费色色色| 91精品综合久久久久久五月丁香| 婷婷五月天精品| 丁香网五月天| www.色五月.com| 五月丁香六月婷婷在线小说视频| 天天色天天| 日日杆天天| 人人操超碰| 97色在线视频| 丁香五月激情在线| 夜夜操狠狠操| 啪啪黄页网| 激情网 五月天| 天天做天天爽| 日本色色视频| 亚洲激情 久久| 激情五月婷婷五月| 色综合久久之分久久| 色综合天堂| www.热99热| 五月天综合在线| 色婷婷亚洲综合天堂| 另类天堂| 五月天久久网站| 国产肏屄大片| 天天综合天天玩夜夜玩天天玩夜夜玩 | 亚洲九九夜夜| 天天操五月天| 性生活久久朋友人妻| 99亚州综合精品成人网| 久久综合网桃花| 深爱五月天 开心网| 99热日韩| www.91在线观看| 午夜无码精品色综合久久| 久久久激情视频| 在线sebiav精品视频| 婷婷五月天色综合翘| 99热最新| 色狠狠综合网| 九九婷婷综合| 婷婷五月天网址| 五月花婷婷丁香| 精品亚洲国产成人A片在线鸭王| 日韩久热| 97操视频| 黄网在线播放| 婷婷亚洲天堂| 婷婷亚洲综合| 六月丁香啪啪| 亚洲超碰在线| 亭亭五月色男人| 日本色图综合| 色婷婷久久久| 99色色网| 激情综合网激情五月天| 天天玩夜夜操天天爽| 99热偷拍| 九九精品在线视频观看| 九九热视频在线观看| 五月婷婷欧美| 婷婷丁香久久| 激情久久四色| 九九成人| 天天射天天射一道本日本社区| 五月丁香六月激情综合| 色。 日日日| 亚洲无AV在线中文字幕| 天天综合图片| 日韩不卡123| 狠狠色噜噜| 大香蕉伊然在亚洲90| 99热中文字幕久久| 六月婷婷九月丁香| 欧美熟女99| 狠狠色婷婷7777久| 色色色综合网| 激情九九综合网| 国产97在线日韩亚洲女人被黑人巨大| 久久五月激情| 九九超日本| 国产精品电影网| 99操视频| 国产偷人爽久久久久久老妇APP| 97色伦另类图片小说视频 | 91久久日日| 五月婷婷自拍| 一区二区免费看| 婷婷99狠狠躁天天躁| 欧美天天爽| 黑人巨粗进入警花疼哭A片| 影音先锋人妻出差| 色久影院| 国产精品99久久久久久久女警| 99精品在线下载| 亚洲五月天色色| 久久久久婷婷| 夜夜撸天天日| 六月丁香啪啪| 国产性爱大片久久| 日本色色色| 天天做天天干天天综合网| 亚州欧美黄色电影| 九九Av| 亚洲尤物在线| www.五月天色色.com| 成片免费播放| 精a品a| 欧美婷婷六月丁香综合色| 亚洲网综合在线| 婷婷五月婷婷| 婷婷深爱五月亚洲综合| 99视频在线播放大全| 亚洲V国产V欧美V久久久久久| 亚洲夜夜操| 综合激情婷婷| 97综合视频在线| 久久久久9| 99在线精品免费视频| 翔田千里 50岁 无码| 婷婷十月激情综合网| 久久伊人五月天| 久久五月天视频| 97啪在线观看视频| 色青青五月| 在线不卡视频| 99碰碰视频| 亚洲天天操| 激情五月天婷婷播播久久综合91| 婷婷五月天无码视频| 欧美久久婷婷| 日韩欧美成人片| 激情综合网五月激情网| 久久久潮喷-久久久九九-成人AV| 91dy.av| 色五月婷婷五月天| 99色在线观看免费| 夜夜骑夜夜撸| 九九精品网站| 婷婷五月丁香六月| 九九这里只有精品在线视频| 亚洲九区| 99黄色性生活| 色色色综合色| 色婷婷婷av| 久久丁香五月天| 日本精品在线噜噜噜| 五月激情婷婷综合| 婷婷五月大香蕉| 91视频精品99| AV在线资源| 婷婷天堂综合| 大香蕉久久伊人婷婷五月丁香| 日本片日本片祼观看网站在线看中文版网页在线看 | 夜夜夜夜做天天天做无码视频| 婷婷五月天av| 婷婷五月天激情网址| 伊人婷婷五月天| 91操操| 久久婷婷亚洲| 婷婷丁香77777| 丁香成人五月天| 亚州激情网| 丁香五月影院| 五月丁香狠狠爱婷婷综合| 99激情视频| 69五月天视频| 久久色大香蕉| 丁香六月色婷婷综合| 去色色五月天| 午夜婷婷久久| 亚洲中文字幕AV| 五月停亭六月,六月停亭的英语| 日本色婷婷| 综合色播| 丁香五月天激情综合网| 久777| 婷婷五月天中文字幕| 99免费青青蜜臀| 婷婷五月天综合亚洲| 久久久久人妻精选| 69精品人人人人人人| 伊人狠狠丁香婷婷综合尤物| 色色色色五月天| 婷婷五月天伊人| 深爱丁香激情| 五月婷天堂视频| 婷婷丁香97| 毛片网站谁有| 91午夜婷婷狠狠久久综合9色| 五月丁香婷婷成人综合网| 激情五月丁香六月综合AVXXXX| 99热精品99| 99亚洲综合| 婷五月天影院| 九九色欲网| 思思久久网| 香蕉人妻AV久久久久天天| 久久少妇视频| 色99在线视频| 国产,欧美,学生妹,视频| 色狠狠综合入口| 大香蕉久久久久| 免费精品99| 丁香婷婷成人网| 婷婷五月丁香综合| 色综合婷婷99| 99自拍视频在线| 天天干天天日日| 激情婷婷五月少妇| 五月综合久久| 丁香婷婷激情五月天无毒不卡蜜桃| 色五月激情| 激情综合网激情五月婷婷| 丁香五月天婷婷中文字幕| 欧美久草在线日本一级特黄大片做受9在线观看韩国电影《两个女人》未删减-毛片 | 婷婷十月丁香| 99熟女视频| 免费视频WWW在线观看网站| 天天综合天综合| 五月丁香啪啪激情| 婷婷99视频全集高清| 在线观看亚洲视频影院| 丁香五月六月久久综合| 日韩aⅴ视频| 九九伊人网| www.色擼擼.com| 精品99这里有| yazhochengrenavwang| 九九热在线精品视频| 婷婷综合激情| 激情五月六月丁香| 婷婷六月色开| 99久久五月天| www.色五月| 另类在线| 思思久久精品| 激情98色婷婷五| 欧洲不卡视频| 丁五月激情视频免费| 五月天婷婷六月| 91久久久久久| 九九99在线| 婷婷大香焦| 五月丁香啪啪啪| 久久久久久久97| 五月天激情无码| 久久综合伊人综合在线| 五月丁香婷婷色| WWW,五月| 色婷婷久久7777| 丁香五月天天久久综合小说| 久久精彩视频| 99久久大片| 99精品无码网站| 超碰在线看| 91成人看片| 天天综合色99| 丁香五月天堂亚洲社区| 国产精品涩涩涩视频网站| 可以看的av网站| 1024操逼视频| 色婷婷精品视频| 天天色色天天| 久久色五月天综合网| www.爱操com.| 五月丁香久久综合精品| WWW五月婷婷| 九玖视频这里只有精品| 99re热在线视频| 久久五月婷婷丁香| 亚洲综合成人网站| 久啪欧美| 国产a视频| 婷婷99丁香| 婷婷久久天堂网| 久久99免费视频| 69久久久| 97久久超级| 五月婷婷丁香五月| 色婷婷色综合激情91| 五月天丁香花婷婷| 99久久.www| 五月丁了香蕉综合| 婷婷婷久久久| 91丁香五月| 色九网| 婷婷色婷婷| 丁香无五月网| 色色综合日韩| 亚洲九九99精品视频在线播放| 婷婷六月丁香激情综合| 五月丁激情| 五月婷婷精品视频| 五月天激情网开心网| 女人天堂 AV| 婷婷色综合| 婷婷五月色综合| 激情四射五月天| 99免费在线| 最近中文字幕大全免费版在线 | 色色色色五月天| 九九热色视频| 激情综合网婷婷久久| 色综合久久88色综合中文字幕| 婷婷五月天人妻| 99热在这里只有精品| 色婷久| 丁香色婷婷五月天| 9久热| 操操综合网婷婷| 97热超碰| 五月激情啪啪| 激情五月婷婷网在线观看| 逼逼AV| 色综合射婷婷| 欧美精品18| 色色日本| 久这里只有精品99| 日日噜狠狠色综合久久| 免费观看欧美成人AA片爱我多深 | 色色无码| 激情AV| 五月婷婷影视| 99热www| 久久多色| 天天爽天天爽夜夜爽| 色婷婷激情五月天| 久久9久| 一本道在线电影| 夜夜爱爱亚洲| 久久只有精| 天天插天天插天天插| 99视频在线播放大全| 激情五月天色色网| 丁香五月婷婷老师网站| 91久久婷婷| 五月天伊人日日噜影片AV| 五月天成人在线视频网站| 婷婷色色五月天| 超碰色热| 丁香婷婷五月激情| 天天日天天日天天搞| 色婷婷亚洲婷婷| 99超超碰| 日本九九九九| 狠狠干思思热| 五月丁香婷婷基地| 日韩久久日| 婷婷亚洲五| 九九激情视频| 欧美大肥婆大肥BBBBB| 亚洲成人无码片| 五月情四婷婷| 丁香美女五月天婷婷| 色婷婷狠狠| 狠狠久综合| 色五月丁香一区在线| 五月婷婷啪| 欧美在线| 久久9视频| 久久激情五月天| 99亚洲天堂| 五月婷婷激情日本| 亚洲久久婷婷| 人人爱国产| 天天综合91入口| 狠狠肏综合网| 丁香桃色网| AV在线收看| 99色爱| 丁香五月婷久久| 亚洲另类av| 五月丁香六月婷婷综合| 91chinese在线| 九九99九九99| 激情小说 五月天| 香蕉久久国产AV一区二区| 99热这里只有精品33| 丁香婷婷六月婷婷六月婷婷六月婷婷| 《久久综合九色综合97婷婷| 精品九九婷婷| 玖玖激情网| 丁香花综合永久入口| www.9797国产| 婷丁香五月天| 久久人妻视频| 亚洲综合视频网| 天天爱天天狠天天透| 91在线观看九区| 日韩六六久久电影| 婷婷天天色| 国产欧美第五十五页| 五月丁香综合| 亚洲啪啪精品| 婷婷丁香五月高清| 曰韩五月丁香色婷婷无码| 天天粽合合合合| 激情第四色| 五月天综合在线| 99色色网| 狠狠se| 99热都是精品| 色色综合热| 开心五月网 | 亚洲啪啪啪啪| 99久精品视频| 91丁香五月| 99热热热国产超碰| 五月婷婷色| 亚洲另类毛片| 婷婷五月天福利| 丁香狠狠操| 色色a| 亚洲超级碰| 天天日 天天草| 五月香蕉婷婷| 99色 | 五月丁香拍拍激情综合| 五月婷婷色激情| 综合在线丁香五月| 天天色综网| 99∨VTV| 俺去也综合| 中文字幕精品无码一区二区| 久久人人做人人妻人人玩精品va| 禁欲电影完整版在线播放| 五月婷婷丁香综合| 天天天天干| 爱之国产色情综合| 国产看真人毛片爱做A片| 九九热视频免费的| WWW.亚洲无码| 开心激情五月天网| 久久国产高清| 狠狠色噜噜狠狠狠狠综合| 色综合久久44| 爱射综合| 亚洲激情免费视频| 亚洲视频另类| 天堂久久性| 中文无码婷婷| 五月丁香在线| 婷婷九月丁香久久| WWW久| 婷婷五月天精品| 色色亚洲无码| 九九婷| 亚洲99精品欧美一区| 99超级碰碰| 日hao1区| 丁香五月电影| 99久久99热这里只有精品| 猫咪伊人AV| 99热天堂| 99热综合在线| 中文字幕成人版| 天天肏高清在线| 亚洲小视频免费播放| 丁香,开心成人,久久| 六月婷婷久久| 五月天激情黄色小说在线观看| 丁香激情网| 天天爽天天爽视频| 日本色频| 丁香五月婷婷av影院| 激情婷婷五月天丁香| 美女黄频aⅴ视频| 天天色综合网1| 激情婷婷丁香| 婷婷爱五月| 色五月婷婷丁香婷婷| 欧美日比视频| 九九综合五月欧美| 久久电影4399| 青草五月天| 夜夜操天天干| 少妇激情基地| 青青草婷婷久久| 久久狠狠干| 丁香五月综合AV在线| 99re99热| 久久网址99热| 熟妇无码乱子成人精品| 五月丁香色| 日本va欧美va精品发布视频| 日本天堂免费99| www.婷婷五月天| 热99在线精品| 五月激情视频网| 9999三级片| 男人的天堂在线婷婷| 91操人| 久久久久人妻网址| 这里只有精品视频在线观看免费| 一级二级色大片| 日比网免费国产| 五月丁香琪琪| 狠狠插日日干撸| 男人的天堂999| 人人操人人爽成人AV| 日韩av在线播放综合网| 99爱视频在线| 五月丁香六月婷| 涩涩五月天综合| 另类图片激情五月| 婷婷五月综合免费在线| 91综合在线| 婷婷天堂站| 九九热精品在线| 99热在线中文字幕| 婷婷五月天成人五月天| 亚洲午夜Av| 久热精品免费视频4| 狠狠穞A片一區二區三區| 五月天丁香综合久久国产| 俺也去在线视频| 99热这里只有精| 婷婷六月激情| 99久视频| 激情六月下句是什么| 少妇2做爰HD韩国电影| 五月婷婷在线网站| 91se精品国产| ai97re99一本| 久久久久久久久久人妻| 色婷婷导航| 五月花婷婷丁香| 99久热这里有精品| 五月天激情播播网| 综合亚洲六月婷婷在线| 在线中文亚洲| www.综合久久.com| 五月色婷婷夜色| 五月做爱| 一本婷婷丁香久久 | 五月天婷婷在线播放免费| 插插网爽妇五月丁香| 五月婷婷五月天激情视频| 天天操天天日天天爱| 99热综合在线| 91大神操美女| 97干欧美| 日本激情91| www.henhenl| 久re在线| 成人一区在线观看| 亚洲色色五月| 97ai婷婷| se99热久久一本| 亚洲色综久久五月| 青青草婷婷久久| 天天干,天天操,天天射| 色九月欧美| 五月丁香色综合| 99热综合网| 操比激情五月综合| 日韩av在线电影| 久草久青福利| www.com.色色| 狼人婷婷综合| 91碰| www.99婷婷| 六月丁香婷婷视频综合在线观看| 永久无码色| 久久这里都是精品免费| 99热这里只有精品98| 在线综合婷婷| 狠狠色丁香婷婷综合久久97AV| 五月婷在线色视频| 狠狠狠五月婷婷六月丁香| 另类综合婷婷五月天欧美视频| 九九色热| 久久久久9999| 五月天电影网| 黄色片区子| 六月婷婷狠狠| 五月天大香蕉视频| 久久婷婷五月| 婷婷五月天av| 激情五月天免费视频| 99噜噜| 国产AV一区二区三区最新精品 | 日本色色色| 超碰在线50| 五月天久久小说| 蜜桃婷婷狠狠久久| 开心五月天私房婷婷| 激情综合五月.....| 亚洲视频伍月婷婷| 99热这里都是精品| 亚洲综合五月天| 久久九久久| 九九热在线99| 久久婷五月| 99视频这里只有久久精品| 五月久视频| 五月久久婷婷| 国产午夜精品一区二区三区四区| 伊人五月天久久| 九九热视频99| 99热这里有精品24| 99热这里只有精品8| 色五月天丁香| 丁香综合日产精品久久| 黑人熟妇一区二区三区| 天天五月丁香五月| 亚洲AV成人无码久久精品老人法拉利| 久久久99免费视频| 日本色婷婷| 丁香色影院| 99热这里只有精品国产免费| 五月天艹天天| 五月婷婷导航| 五月天婷婷成人网| 丁香花成人区| 高清激情av在线观看| 《蜘蛛女》梁铮1995| 人人摸人人干| 狠狠久综合| 華人性愛AV在線| 五月久久婷婷成人网| 五月婷婷六月激情| 婷婷之玖玖| 五月色 亚洲| 97人凄人人操人人爽| 国色天香成人网| 婷婷丁香花五月天| 欧美色欲色欲天天天www| 狠狠五月激情丁香六月| 五月综合激情啪啪啪啪啪| 九九自拍网| 五月丁香婷中文| 尔尔AV一区| 99热超| 怕怕av| 亚洲不卡欧洲| 色综合婷婷99| 国产熟女一区二区三区五月婷| 国产肥白大熟妇BBBB视频| 色999五月色| 亚洲视频在线观看| 免费观看全黄做爰的视频| 亚洲视频在线网站| 99操不停| 久久午夜丁香| 婷婷97碰碰| 热99精品视频在线观看| 狠狠五月激情在线| 天天插夜夜爽| 天天夜夜操| 色婷婷久综合久久一本国产AV| 夜夜骑天天操| 97在线/亚洲| 大香蕉久操| 激情影院丁香五月| 乱精品一区字幕二区| 伊人天堂婷婷| 91丨九色丨国产在线| 免费啪啪亚州视频| 激情桃色网 | 99热99日…..| 激情五月婷婷综合网| 丁香六月色婷婷| 成人版视频在线观看| 亚洲啪啪啪啪| 夜精品无码A片一区二区蜜桃| 久久久aaa| 日hao1区| 五月天无码| 五月丁香婷婷激情澎湃四射| 欧美性爱一区| 亚洲色频| 五六月婷婷久久| 内射综合网| 欧美在线骚货| 五月天另类图片| 激情久久综合| 这里只有精品久久| 九九爱精品网站| 亚洲午夜av| 久色五月| 五月丁香好婷婷A片网| 国产人妻777人伦精品HD| 欧美人人女女精品综合五月天| 色婷丁香| 丁香五月天网友自拍啪啪啪视频| 欧美熟女99| 开心婷婷五月综合| 美女黄频aⅴ视频| 婷婷五月婷婷五月| 激情AV| 密着浓厚中出乚交尾GvG935| 色五月天丁香婷婷| 伊人婷婷激情| 亚洲愉拍99热成人精品| 拍真实国产伦偷精品| 六月婷婷啪啪| 丁香欧美| 日韩在线视频中文字幕| 亚洲激情四射色| 99热精品在线观看| 日本高清久| 丁香五月桃花在线激情综合| 啊V视频在线观看| 亚洲 五月 婷婷 成人| 91碰碰视频| 婷色综合| 免费99情趣网视频| 五月丁香综合激情网| 午夜成人片400| 伊人激情啪啪| 九九热在线观看视频| 免费视频无码| 色综合久久天天综合网| 怡红院视频| 五月天开心网| 日韩亚洲视频| 婷婷丁香六月| 五月婷婷久久爱| 99这里有精品久久97| 欧美99视频| 伊人丁香五月婷婷潮吹| 久久婷婷婷婷伊人| www色色com| 婷婷丁香五月色偷偷| 五月婷av| 婷色五月天| 日日操夜夜操无码免费| 婷婷激情五月天在线| 日本不卡一区二区三区| av在线免费播放| 五月天成人在线视频网站| 九九在线91| 五月丁香婷婷激情澎湃四射| 成人午夜无码视频| 97超碰综合| 中文字幕综合网| 婷婷色五月开心五月| 婷婷五月天综合色| 日韩久久系列| 婷婷色日本| 香蕉AV777XXX色综合一区| 激情AV| 中文AV在线播放| 丁香婷婷色九月| 丁香婷婷色情| 久久五月天丁香花| 99热这里只有精品最新网址| 九九热视频精品999| 久久99热精品a片在线观看| 日本三级韩三级99久久| 99re99热| 91精品久久久久久77777| 丁香五月婷婷五月天在线| 久久色情| 五月丁香综合啪啪| 色情婷婷| 狠狠操天天日| 四川女人毛多水多A片|