欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

銀行大文件上傳控件選型:分片、斷點(diǎn)與工程實(shí)踐

銀行大文件上傳控件選型:分片、斷點(diǎn)與工程實(shí)踐 在銀行系統(tǒng)待久了就明白大文件上傳從來不只是“把文件丟到服務(wù)器”那么簡單。柜面掃描的影像件、批量對賬的流水包、信貸審批的合同附件、遠(yuǎn)程辦公要傳的報(bào)表隨便一個(gè)就奔著幾百M(fèi)B甚至幾個(gè)GB去。選錯(cuò)了上傳控件內(nèi)網(wǎng)里看起來一切正常一旦用戶換到外網(wǎng)、跨運(yùn)營商甚至用手機(jī)熱點(diǎn)就開始各種超時(shí)、斷傳、服務(wù)端內(nèi)存飆升。我在銀行系統(tǒng)的運(yùn)維和架構(gòu)崗位上待了快十年前前后后經(jīng)手過三個(gè)上傳組件的選型替換踩過的坑能列一長串。這篇內(nèi)容就把銀行場景下選擇高效大文件上傳控件這件事掰開揉碎從需求分析、技術(shù)方案對比、落地實(shí)操到問題排查完整過一遍。適合正在做選型評估的架構(gòu)師也適合被上傳問題反復(fù)折騰的開發(fā)同學(xué)參考。先亮明一個(gè)觀點(diǎn)選上傳控件本質(zhì)上是選一套“傳輸協(xié)議加服務(wù)端處理策略”而不是挑一個(gè)花哨的前端組件。進(jìn)度條、拖拽上傳這些是面子分片、斷點(diǎn)續(xù)傳、失敗重試、服務(wù)端合并、完整性校驗(yàn)才是里子。銀行系統(tǒng)尤其講究穩(wěn)定、安全、可審計(jì)所以下面所有內(nèi)容都會(huì)圍繞這幾點(diǎn)展開不繞彎子。1. 銀行場景的上傳需求先把賬算清楚1.1 銀行文件上傳的特殊性不只是“大”這么簡單銀行系統(tǒng)里的文件上傳和其他行業(yè)的差別非常大。最大的差異在于文件本身的業(yè)務(wù)價(jià)值和風(fēng)險(xiǎn)。一筆信貸審批的影像材料傳輸中途少了一個(gè)分片事后審計(jì)調(diào)檔發(fā)現(xiàn)材料缺失就是風(fēng)險(xiǎn)事件。所以銀行對上傳的要求從來不只是“越快越好”而是要在保證完整、可追溯的前提下盡量快。具體來看銀行系統(tǒng)里的文件上傳有幾個(gè)典型特征。第一是文件類型多樣除了常見的圖片和PDF還有批量導(dǎo)入的賬務(wù)文件、格式固定的對賬單、加密壓縮包、甚至柜面錄制的視頻。不同類型的文件對傳輸和存儲(chǔ)的要求完全不一樣視頻對實(shí)時(shí)性要求低但對完整性要求極高批量賬務(wù)文件則可能在導(dǎo)入后馬上被下游跑批上傳慢一分鐘整條業(yè)務(wù)鏈就往后推一分鐘。第二是網(wǎng)絡(luò)環(huán)境極端復(fù)雜柜面走內(nèi)網(wǎng)帶寬穩(wěn)定延遲低客戶自助端走公網(wǎng)可能處于弱網(wǎng)環(huán)境行員移動(dòng)辦公走的內(nèi)網(wǎng)接入通道也可能不穩(wěn)定。第三是并發(fā)和峰值明顯月末、季末、年末批量處理期間大量網(wǎng)點(diǎn)同時(shí)上傳報(bào)表瞬間流量可能比平時(shí)高出一個(gè)數(shù)量級。這些特殊性決定了選型不能簡單照搬互聯(lián)網(wǎng)公司的方案?;ヂ?lián)網(wǎng)公司可以接受一定失敗率靠重試和補(bǔ)償保證最終一致但銀行系統(tǒng)對失敗必須提前設(shè)計(jì)降級方案和手工補(bǔ)傳通道。選型時(shí)如果只盯著“快”很容易忽視這些前提。1.2 選型前必須回答的八個(gè)問題在做任何技術(shù)對比之前我強(qiáng)烈建議先做一輪需求梳理。我每次參加選型評審都會(huì)要求業(yè)務(wù)方和開發(fā)一起回答下面八個(gè)問題答完再談控件選型。第一個(gè)問題是單個(gè)文件的最大值是多少。很多業(yè)務(wù)方張口就說“一般也就幾十兆”但實(shí)際生產(chǎn)環(huán)境里出現(xiàn)過單文件4GB的影像合集。最大值直接決定要不要上分片以及分片大小怎么設(shè)計(jì)。第二個(gè)問題是日傳輸總量和峰值并發(fā)是多少這決定控件要不要支持并發(fā)上傳以及服務(wù)端需要預(yù)留多少處理能力。第三個(gè)問題是終端環(huán)境固定柜面PC、行員自帶筆記本、客戶手機(jī)瀏覽器這三類終端的瀏覽器版本和系統(tǒng)能力差異很大有些老終端根本跑不動(dòng)新特性。第四個(gè)問題是網(wǎng)絡(luò)環(huán)境內(nèi)網(wǎng)還是公網(wǎng)帶寬大概多少是否跨運(yùn)營商是否需要支持弱網(wǎng)和斷線重連。第五個(gè)問題是安全合規(guī)要求文件要不要加密傳輸落盤后要不要做病毒掃描上傳日志要不要留存這些必須在選型前明確否則后面全是返工。第六個(gè)問題是后端現(xiàn)有技術(shù)棧Java、其他語言還是混合架構(gòu)存儲(chǔ)用本地磁盤、分布式文件系統(tǒng)還是對象存儲(chǔ)接口風(fēng)格是RESTful還是別的上傳控件必須和后端無縫對接。第七個(gè)問題是團(tuán)隊(duì)對開源組件的掌控力有沒有人能讀懂源碼、會(huì)修bug如果出了問題是找商業(yè)廠商支持還是自己扛。第八個(gè)問題是使用環(huán)境是否有信創(chuàng)適配要求有些銀行要求控件必須在特定的國產(chǎn)芯片、操作系統(tǒng)和瀏覽器環(huán)境下正常運(yùn)行這一步不確認(rèn)前面做得再多也可能全部推翻。這八個(gè)問題看起來很基礎(chǔ)但幾乎每次選型失敗追根溯源都是因?yàn)槟骋粋€(gè)問題的答案和實(shí)際不符。比如只想著文件挺大沒想到有弱網(wǎng)結(jié)果上傳控件沒有斷點(diǎn)續(xù)傳客戶用手機(jī)傳一個(gè)200MB的文件眼看著到99%斷了全部重來投訴電話很快就會(huì)打進(jìn)客服。需求整理清楚接下來才進(jìn)入技術(shù)方案對比階段。2. 主流上傳方案對比選型前先看清楚路2.1 三類基礎(chǔ)傳輸方式表單直傳、二進(jìn)制流、分片上傳先講技術(shù)底層的傳輸方式因?yàn)樗猩蟼骺丶谋举|(zhì)都跑不出這三類。第一類是傳統(tǒng)的表單直傳也就是瀏覽器提交multipart/form-data把整個(gè)文件一次性POST到服務(wù)器。這種方式的優(yōu)點(diǎn)是實(shí)現(xiàn)極其簡單后端一個(gè)上傳接口就能接住兼容性最好缺點(diǎn)也很明顯文件稍大就容易觸發(fā)網(wǎng)關(guān)超時(shí)傳輸過程沒有進(jìn)度條一旦失敗就要整體重傳。在銀行內(nèi)網(wǎng)環(huán)境里10MB以內(nèi)的文件用表單直傳問題不大但超過這個(gè)量級就不建議了。第二類是AJAX二進(jìn)制流上傳用XMLHttpRequest的send方法直接把文件二進(jìn)制發(fā)過去。相比表單直傳它的進(jìn)步在于可以實(shí)時(shí)拿到上傳進(jìn)度也能在傳輸過程中取消請求。但本質(zhì)上還是一次性把整個(gè)文件讀入內(nèi)存再發(fā)送對大文件來說內(nèi)存占用高而且依然沒有斷點(diǎn)續(xù)傳。我在實(shí)際項(xiàng)目里見過有人用這種方式傳500MB的文件前端頁面直接卡死服務(wù)端內(nèi)存被打滿最后整個(gè)應(yīng)用容器都受影響。第三類是分片上傳把文件按固定大小切成若干片逐片或并發(fā)上傳到服務(wù)器最后在服務(wù)端合并。這是當(dāng)前解決大文件上傳的主流方案核心價(jià)值有三點(diǎn)支持?jǐn)帱c(diǎn)續(xù)傳某一分片失敗后只需重傳該分片支持并發(fā)傳輸可以同時(shí)傳多個(gè)分片充分利用帶寬能夠?qū)崟r(shí)計(jì)算總體進(jìn)度用戶體驗(yàn)要好得多。代價(jià)是協(xié)議變復(fù)雜前端要做切片邏輯后端要負(fù)責(zé)分片接收、校驗(yàn)和合并整體工作量上一個(gè)臺(tái)階。銀行系統(tǒng)選擇上傳控件我?guī)缀醪豢紤]表單直傳直接用分片上傳作為基座因?yàn)樗娜蒎e(cuò)能力是所有方案里最適合生產(chǎn)環(huán)境的。2.2 商業(yè)控件、開源框架、自研組件三種供給方式怎么選確定技術(shù)路線是分片上傳之后接下來要回答的問題是組件從哪里來市面上大致有三條路商業(yè)控件、開源框架、自研組件。商業(yè)控件的優(yōu)點(diǎn)是一站式交付前端控件、服務(wù)端SDK、技術(shù)支持都齊了功能上通常還附帶秒傳、批量上傳、壓縮預(yù)覽等增強(qiáng)能力。銀行選用商業(yè)控件的謹(jǐn)慎點(diǎn)在于授權(quán)費(fèi)用的持續(xù)性以及源碼不可見帶來的排查障礙。在信創(chuàng)環(huán)境下不是所有商業(yè)控件都能適配國產(chǎn)瀏覽器和國產(chǎn)服務(wù)器這個(gè)要提前拿到廠商測試報(bào)告或者做一輪實(shí)際驗(yàn)證。我參與過的一個(gè)項(xiàng)目中廠商承諾適配某國產(chǎn)瀏覽器結(jié)果現(xiàn)場演示時(shí)控件直接加載不出來場面相當(dāng)尷尬。開源框架是很多團(tuán)隊(duì)的首選好處是免費(fèi)、源碼開放、社區(qū)案例多出了問題可以自己看代碼。但“免費(fèi)”不等于“沒成本”。引入開源上傳組件實(shí)際上承擔(dān)了維護(hù)責(zé)任包括版本升級、安全漏洞修復(fù)、瀏覽器兼容性調(diào)整這些都需要有人力投入。銀行如果完全沒有前端和后端的技術(shù)儲(chǔ)備建議謹(jǐn)慎引入否則遇到問題連求助都不知道怎么描述。自研組件看起來最可控實(shí)際上也最容易被低估成本。一套基本可用的分片上傳體系前端要處理切片、并發(fā)、進(jìn)度、重試、秒傳后端要處理元數(shù)據(jù)、分片存儲(chǔ)、合并、一致性校驗(yàn)還要考慮負(fù)載均衡多節(jié)點(diǎn)下的文件合并和臨時(shí)文件清理按三到六個(gè)人年估算并不夸張。如果只是為一兩個(gè)上傳場景自研成本太高。我的建議是有明顯的強(qiáng)需求例如超大文件、極致弱網(wǎng)要求且團(tuán)隊(duì)有技術(shù)底子的優(yōu)先基于成熟開源框架做二次封裝沒有技術(shù)底子的直接買商業(yè)控件把錢花在服務(wù)上只有數(shù)據(jù)量特別龐大、業(yè)務(wù)定制要求極高的場景才認(rèn)真考慮自研。銀行選型最怕的就是什么都自己造最后留下一堆無人維護(hù)的技術(shù)債。另外要提醒一點(diǎn)不管選商業(yè)還是開源都要把“可替換性”寫進(jìn)評價(jià)指標(biāo)。上傳控件應(yīng)該是業(yè)務(wù)系統(tǒng)的一個(gè)外部適配層接口設(shè)計(jì)成可插拔的最好不要讓上游業(yè)務(wù)代碼直接依賴控件的內(nèi)部對象。這樣將來因?yàn)楹弦?guī)、成本、性能原因換掉底層實(shí)現(xiàn)時(shí)業(yè)務(wù)代碼可以不動(dòng)只替換適配層。這個(gè)原則等于給系統(tǒng)上了一層保險(xiǎn)時(shí)間越久價(jià)值越明顯。2.3 把“高效”量化成可打分的評估表說完供給方式再講怎么評估。很多銀行在選型時(shí)容易犯的錯(cuò)是把“高效”理解成“傳得快”。實(shí)際上對上傳控件而言“高效”至少包含傳輸性能、穩(wěn)定性、資源占用、開發(fā)效率和運(yùn)維友好度五個(gè)維度。我列一張?jiān)u估表每項(xiàng)按0到5分打分總分高的不一定就選它但至少把主觀印象變成可比較的數(shù)據(jù)。評估維度考察要點(diǎn)建議權(quán)重穩(wěn)定性重試機(jī)制、斷點(diǎn)續(xù)傳可靠性、意外斷網(wǎng)恢復(fù)能力30%安全合規(guī)加密傳輸、審計(jì)日志、權(quán)限控制、防濫用能力25%傳輸性能單文件速度、批量效率、大文件并發(fā)性能20%資源占用瀏覽器端內(nèi)存/CPU、服務(wù)端內(nèi)存/磁盤IO15%開發(fā)與運(yùn)維API設(shè)計(jì)、文檔完整度、日志與監(jiān)控接入難度10%傳輸性能要看真實(shí)網(wǎng)絡(luò)環(huán)境下的實(shí)測數(shù)據(jù)不要看文檔里的理論值。測的時(shí)候分內(nèi)網(wǎng)、跨運(yùn)營商、弱網(wǎng)環(huán)境分別記錄拉一張對比表。穩(wěn)定性方面重點(diǎn)驗(yàn)證重試機(jī)制是否完善、斷點(diǎn)續(xù)傳是否準(zhǔn)確、意外斷網(wǎng)后能否恢復(fù)。資源占用方面用同一臺(tái)低配PC分別跑不同控件觀察任務(wù)管理器里的內(nèi)存和CPU數(shù)據(jù)差異可能非常大。開發(fā)與運(yùn)維方面看控件API設(shè)計(jì)是否清晰、文檔是否完整、日志能否方便接入監(jiān)控告警一個(gè)黑盒上傳組件運(yùn)維團(tuán)隊(duì)是不敢接的。權(quán)重分配也是門學(xué)問。我習(xí)慣把穩(wěn)定性和安全合規(guī)權(quán)重調(diào)高傳輸性能只占兩成。道理很簡單對銀行來說一次上傳失敗造成的時(shí)間成本和合規(guī)風(fēng)險(xiǎn)遠(yuǎn)大于傳輸峰值快幾秒帶來的收益。這個(gè)評分表做完再結(jié)合商務(wù)條件和團(tuán)隊(duì)情況選型結(jié)果往往已經(jīng)很清楚了。3. 實(shí)操過程與核心環(huán)節(jié)實(shí)現(xiàn)落地一個(gè)可用的分片上傳方案3.1 協(xié)議設(shè)計(jì)先行前端后端各自要做什么選型最終要落到實(shí)現(xiàn)。不管選的是商業(yè)組件還是開源框架都需要理解分片上傳的協(xié)議設(shè)計(jì)否則出了問題根本無從下手。一個(gè)標(biāo)準(zhǔn)的分片上傳協(xié)議至少包含三個(gè)接口創(chuàng)建上傳任務(wù)、上傳分片、合并文件。創(chuàng)建上傳任務(wù)的接口入?yún)⒁话闶俏募?、文件大小、分片大小和文件唯一?biāo)識(shí)后端根據(jù)這些信息生成一個(gè)上傳任務(wù)ID并在存儲(chǔ)端創(chuàng)建臨時(shí)目錄。這個(gè)接口同時(shí)承擔(dān)初始化工作如果文件已經(jīng)存在可以直接返回“秒傳”標(biāo)記省去整個(gè)傳輸過程。上傳分片的接口入?yún)⑹侨蝿?wù)ID、分片序號(hào)和分片數(shù)據(jù)。后端把分片寫入臨時(shí)目錄文件名按規(guī)則命名例如任務(wù)ID加序號(hào)加擴(kuò)展名。這里必須做冪等處理如果同一分片被重復(fù)上傳應(yīng)該直接覆蓋或者返回成功而不是報(bào)錯(cuò)因?yàn)榍岸耸≈卦嚂r(shí)很可能把同一個(gè)分片提交兩次。合并文件的接口入?yún)⑹侨蝿?wù)ID后端把所有分片按順序讀出來以流式方式拼接成完整文件然后做一次完整性校驗(yàn)。校驗(yàn)通過后再轉(zhuǎn)入業(yè)務(wù)存儲(chǔ)目錄進(jìn)入病毒掃描、內(nèi)容審核這些下游環(huán)節(jié)。前端的核心邏輯主要有四塊文件切片利用瀏覽器的文件讀取能力把File對象按指定大小切出分片并發(fā)控制同時(shí)啟動(dòng)N路上傳任務(wù)每路負(fù)責(zé)一個(gè)分片進(jìn)度計(jì)算用已成功上傳的分片數(shù)除以總分片數(shù)得到百分比異常處理分片失敗時(shí)自動(dòng)重試達(dá)到重試上限后標(biāo)記為失敗并允許用戶手動(dòng)續(xù)傳。這里要特別說明分片上傳不等于必須自研底層協(xié)議。用開源成熟框架時(shí)這些接口基本都實(shí)現(xiàn)好了只需要理解協(xié)議原理然后在后端SDK基礎(chǔ)上做業(yè)務(wù)適配。選商業(yè)控件的更是開箱即用。但我仍然強(qiáng)烈建議至少自己動(dòng)手寫一遍簡化版這樣當(dāng)生產(chǎn)環(huán)境出現(xiàn)“合并的文件不完整”“重試后產(chǎn)生臟數(shù)據(jù)”這類問題時(shí)能快速定位是協(xié)議設(shè)計(jì)問題還是實(shí)現(xiàn)缺陷。拿一個(gè)簡單的偽代碼來說明前端切片邏輯// 簡化示例切分文件并逐個(gè)上傳 const CHUNK_SIZE 5 * 1024 * 1024; // 5MB let start 0; let index 0; while (start file.size) { const blob file.slice(start, start CHUNK_SIZE); const formData new FormData(); formData.append(taskId, taskId); formData.append(index, index); formData.append(chunk, blob); await uploadChunk(formData); // 并發(fā)場景下可改為批量發(fā)起 start CHUNK_SIZE; }這只是一個(gè)最簡模型真實(shí)系統(tǒng)還要加并發(fā)控制、進(jìn)度回調(diào)、錯(cuò)誤重試和任務(wù)狀態(tài)持久化但協(xié)議骨架就是這個(gè)樣子。想清楚這三個(gè)接口前端后端各司其職選型時(shí)就多了不少底氣。3.2 幾個(gè)關(guān)鍵參數(shù)的計(jì)算邏輯分片大小、并發(fā)數(shù)、重試策略分片大小和并發(fā)數(shù)的設(shè)置直接決定上傳體驗(yàn)和后端壓力。很多團(tuán)隊(duì)直接照搬網(wǎng)上某個(gè)方案用5MB分片加10并發(fā)結(jié)果內(nèi)網(wǎng)環(huán)境跑得很歡一旦遇到弱網(wǎng)小分片反而被大量反復(fù)重傳拖慢。正確的做法是根據(jù)實(shí)測帶寬和目標(biāo)延遲來計(jì)算而不是拍腦袋。先說分片大小。一個(gè)樸素的目標(biāo)是讓單個(gè)分片的傳輸時(shí)間控制在0.5秒到3秒之間。假設(shè)實(shí)測帶寬是10Mbps也就是約1.25MB/s那么5MB分片約4秒傳完對弱網(wǎng)偏大改成2MB分片差不多1.6秒一片體感會(huì)好很多。反過來帶寬是100Mbps時(shí)10MB分片傳輸時(shí)間約0.8秒服務(wù)端合并次數(shù)又少更合適。所以分片大小要和帶寬匹配弱網(wǎng)用小分片強(qiáng)網(wǎng)用大分片。成熟的框架支持動(dòng)態(tài)調(diào)整分片大小銀行場景我建議把這一點(diǎn)加入選型要求。再說并發(fā)數(shù)。并發(fā)太高瀏覽器容易把連接占滿服務(wù)端也扛不住并發(fā)太低帶寬利用率上不去。我的經(jīng)驗(yàn)值在3到6路之間具體要看后端處理能力和網(wǎng)絡(luò)情況。一個(gè)簡單的估算方法是把期望取得的傳輸帶寬除以單分片傳輸帶寬再加一點(diǎn)冗余。例如目標(biāo)是要跑滿20Mbps帶寬單分片在2Mbps下工作并發(fā)4到6路基本足夠。并發(fā)不是越大越好超過一定閾值吞吐量反而下降因?yàn)榉制喜?、網(wǎng)絡(luò)握手本身也要消耗資源。重試策略也很關(guān)鍵。分片上傳失敗的原因很多網(wǎng)絡(luò)抖動(dòng)、服務(wù)端臨時(shí)不可用、請求超時(shí)。一個(gè)健壯的重試機(jī)制應(yīng)該采用指數(shù)退避第一次失敗后等1秒第二次等2秒第三次等4秒最多重試五次。這里有兩個(gè)容易忽略的細(xì)節(jié)一是重試必須攜帶相同的分片序號(hào)和服務(wù)端給出的上傳任務(wù)ID否則重試會(huì)變成新增分片合并時(shí)數(shù)據(jù)就亂了二是前端斷開網(wǎng)絡(luò)后頁面即使刷新也要能通過本地記錄的任務(wù)狀態(tài)繼續(xù)上傳剩余分片實(shí)現(xiàn)真正的斷點(diǎn)續(xù)傳。有些控件只做了內(nèi)存級的斷點(diǎn)刷新就失效這種不算真正的續(xù)傳。3.3 服務(wù)端接收與合并的設(shè)計(jì)重點(diǎn)服務(wù)端的設(shè)計(jì)容易被低估。很多人在前端花了大量時(shí)間后端只給個(gè)簡單的接收接口就上線結(jié)果生產(chǎn)環(huán)境一跑問題全在后端。第一個(gè)重點(diǎn)是臨時(shí)目錄的管理。分片文件不應(yīng)該直接寫業(yè)務(wù)存儲(chǔ)區(qū)而是先落在臨時(shí)目錄。臨時(shí)目錄要有命名規(guī)范和生命周期同一個(gè)上傳任務(wù)的所有分片放同一個(gè)子目錄。還要有一個(gè)守護(hù)任務(wù)定期清理超時(shí)未合并的臨時(shí)分片。我早期沒做清理某次批量上傳任務(wù)失敗后幾萬個(gè)分片留在臨時(shí)磁盤上差點(diǎn)把存儲(chǔ)空間打滿。清理策略要考慮正在上傳中的任務(wù)不能誤刪建議用上傳任務(wù)創(chuàng)建時(shí)間和活動(dòng)時(shí)間共同判定而不是只看任務(wù)創(chuàng)建時(shí)間。第二個(gè)重點(diǎn)是合并方式。合并時(shí)要求按分片序號(hào)嚴(yán)格排序用流式讀寫逐片寫入目標(biāo)文件而不是一次性把所有分片讀入內(nèi)存。假設(shè)一個(gè)4GB的文件分成800個(gè)5MB分片如果全部讀入內(nèi)存再合并內(nèi)存開銷是災(zāi)難性的。正確做法是每讀一片寫一片邊讀邊寫這樣內(nèi)存占用始終很小。合并完成后還要做完整性校驗(yàn)。前端在創(chuàng)建任務(wù)時(shí)可以傳一個(gè)文件哈希值后端合并后重新計(jì)算一遍哈希不一致就返回錯(cuò)誤由前端決定是否重新上傳。這一步是銀行場景必須有的不能省因?yàn)槲募趥鬏?、斷點(diǎn)續(xù)傳過程中任何一步出錯(cuò)都可能產(chǎn)生一個(gè)“能打開但內(nèi)容錯(cuò)誤”的文件這種錯(cuò)誤比完全失敗更隱蔽更危險(xiǎn)。第三個(gè)重點(diǎn)是防濫用。銀行系統(tǒng)的上傳接口要防止被惡意請求刷爆。常見措施包括限制單次請求上傳分片的大小、限制單個(gè)上傳任務(wù)的總大小、對同一客戶端的上傳頻率做限流。另外上傳接口必須走統(tǒng)一認(rèn)證體系不能把臨時(shí)目錄路徑暴露給前端避免用戶通過構(gòu)造請求非法訪問他人未合并的分片。這些雖然是安全基線但不少開源控件的示例里默認(rèn)都沒做接入時(shí)一定要加上。3.4 UI交互和安全審計(jì)的落地細(xì)節(jié)傳輸層的方案對齊后UI交互也不能忽視。銀行柜員每天要傳大量文件交互不好會(huì)直接拖累業(yè)務(wù)效率。一個(gè)合格的上傳控件至少要有進(jìn)度條、批量上傳、拖拽上傳、失敗提示和重試入口。進(jìn)度條要精確到百分比如果前端能做到按分片粒度計(jì)算百分比的精度就會(huì)很高不會(huì)出現(xiàn)“卡在99%不動(dòng)”的情況。卡99%的常見原因是最后一片沒傳完但前端已經(jīng)顯示所有分片完成這種隱藏問題在驗(yàn)收時(shí)很難發(fā)現(xiàn)一定要用大文件實(shí)測。秒傳功能在銀行場景里很實(shí)用。同一客戶上傳同樣的身份證影印件如果系統(tǒng)已經(jīng)存在完全相同內(nèi)容的文件就沒必要重新傳一遍。實(shí)現(xiàn)秒傳的關(guān)鍵是文件哈希比對在創(chuàng)建上傳任務(wù)時(shí)先計(jì)算文件哈希去服務(wù)器查詢是否已存在。這個(gè)功能能極大減少重復(fù)傳輸尤其適合批量掃描件的重復(fù)提交場景。但從合規(guī)角度要小心哈希比對本身不泄露文件內(nèi)容可用于去重不過要明確文件內(nèi)容相同不等于業(yè)務(wù)權(quán)限可復(fù)用是否允許復(fù)用由業(yè)務(wù)規(guī)則決定。安全審計(jì)方面銀行對上傳動(dòng)作有明確要求。每次上傳事件要記錄操作人、操作時(shí)間、文件名、文件大小、任務(wù)結(jié)果、失敗原因日志要防篡改并留存足夠長時(shí)間。如果控件支持回調(diào)可以讓前端上傳成功后自動(dòng)觸發(fā)審計(jì)日志記錄而不是依賴后端日志拼湊。傳輸過程是否加密要看業(yè)務(wù)分類敏感數(shù)據(jù)必須在傳輸層啟用加密協(xié)議同時(shí)文件落盤后還要加密存儲(chǔ)。選型時(shí)要確認(rèn)控件支持自定義請求頭過濾器方便接入統(tǒng)一加密和審計(jì)組件避免上線時(shí)再打補(bǔ)丁。4. 常見問題與排查技巧實(shí)錄4.1 四個(gè)高頻故障的排查過程第一個(gè)高頻問題是“上傳到一半突然失敗刷新頁面后進(jìn)度丟失”。這種問題十有八九是前端沒有做持久化的任務(wù)狀態(tài)。排查時(shí)先看本地存儲(chǔ)里有沒有記錄任務(wù)ID和已完成分片數(shù)如果沒有說明控件沒有真正實(shí)現(xiàn)刷新續(xù)傳。如果是自己二次開發(fā)的要檢查斷點(diǎn)信息寫入的時(shí)機(jī)是在分片成功回調(diào)里同步寫入還是等整個(gè)任務(wù)完成后一次性寫入。第二個(gè)高頻問題是“并發(fā)高了以后服務(wù)端頻繁報(bào)錯(cuò)”。通常不是上傳接口本身的問題而是后端臨時(shí)目錄寫入沖突或連接數(shù)超限。排查時(shí)先看錯(cuò)誤日志如果集中在分片保存失敗或連接池滿就要回到并行度設(shè)置上看是否超過后端承受能力。這種情況建議把并發(fā)數(shù)調(diào)低比持續(xù)報(bào)錯(cuò)再重試更劃算。第三個(gè)高頻問題是“弱網(wǎng)環(huán)境下小文件反而比大文件更容易失敗”。原因是小文件通常走普通表單上傳而不是分片上傳弱網(wǎng)上更容易觸發(fā)網(wǎng)關(guān)超時(shí)。解決方法是設(shè)置文件大小閾值超過閾值的文件走分片上傳小于閾值的也要走帶超時(shí)配置的普通上傳不要單純依賴控件默認(rèn)行為。我習(xí)慣把閾值設(shè)為2MB這個(gè)值可以根據(jù)業(yè)務(wù)實(shí)際調(diào)整。第四個(gè)高頻問題是“多節(jié)點(diǎn)部署后分片合并失敗或者文件內(nèi)容殘缺”。這是典型的臨時(shí)目錄不共享問題。兩個(gè)節(jié)點(diǎn)同時(shí)接收同一個(gè)任務(wù)的分片分片A存到了節(jié)點(diǎn)一的臨時(shí)目錄分片B存到了節(jié)點(diǎn)二合并請求被負(fù)載均衡轉(zhuǎn)發(fā)到節(jié)點(diǎn)二節(jié)點(diǎn)二找不齊分片合并必然失敗。解決辦法是讓所有節(jié)點(diǎn)共享一個(gè)網(wǎng)絡(luò)存儲(chǔ)目錄來放臨時(shí)分片或者把分片寫入對象存儲(chǔ)保證任何節(jié)點(diǎn)都能訪問同一份數(shù)據(jù)。也可以通過負(fù)載均衡會(huì)話保持讓同一個(gè)上傳任務(wù)的請求固定到一個(gè)節(jié)點(diǎn)但這種方案容錯(cuò)性差節(jié)點(diǎn)一旦重啟任務(wù)就斷了不建議。4.2 性能調(diào)優(yōu)的實(shí)測方法論做完故障排查再分享一套性能調(diào)優(yōu)的實(shí)測方法論。換控件或者調(diào)參數(shù)之前先建一個(gè)和業(yè)務(wù)環(huán)境一致的測試環(huán)境包括同樣的服務(wù)器配置、同樣的網(wǎng)絡(luò)帶寬、同樣的客戶端機(jī)器。然后準(zhǔn)備一組測試文件建議覆蓋小文件、中等文件、大文件、超大文件分別跑一遍基線測試?;€測試要記錄三個(gè)數(shù)據(jù)平均傳輸速度、失敗率、服務(wù)端峰值內(nèi)存。參數(shù)調(diào)整時(shí)每次只改一個(gè)變量例如先固定并發(fā)數(shù)分片大小從1MB一路試到16MB記錄不同分片下的傳輸速度和失敗率再固定最優(yōu)分片大小并發(fā)數(shù)從1試到10。最后畫一張簡單的對比表大概率能看出來最佳區(qū)間。我在一個(gè)真實(shí)項(xiàng)目里遇到過這種情況默認(rèn)參數(shù)下用戶從遠(yuǎn)程網(wǎng)點(diǎn)上傳一個(gè)800MB的視頻素材平均速度只有8Mbps失敗率20%。我把分片從5MB改成2MB并發(fā)從8降到4結(jié)果平均速度提升到15Mbps失敗率接近于零。原因就是現(xiàn)場網(wǎng)絡(luò)抖動(dòng)大大分片一旦失敗重傳代價(jià)太高并發(fā)太高又加劇擁塞。這類問題不改業(yè)務(wù)代碼只改參數(shù)就能解決前提是你得做實(shí)測。另一條重要經(jīng)驗(yàn)是對銀行系統(tǒng)不要只看平均值還要看P95和P99耗時(shí)。因?yàn)樯蟼魇敲嫦蛴脩舻牟僮髯畲蟮耐袋c(diǎn)不是平均速度慢而是個(gè)別請求長時(shí)間卡住。如果把P99控制在用戶可接受的范圍內(nèi)即使平均值不是最優(yōu)整體的用戶滿意度也會(huì)提升。4.3 容易被忽略的隱藏坑最后列幾個(gè)我在文檔里基本沒見過的坑個(gè)個(gè)都是實(shí)戰(zhàn)踩出來的。第一臨時(shí)目錄清理任務(wù)的時(shí)間設(shè)置。如果你在凌晨跑批前做清理恰好有業(yè)務(wù)在凌晨傳輸大文件清理任務(wù)可能會(huì)把正在活躍的任務(wù)分片誤刪。解決方法是把“最后活動(dòng)時(shí)間”作為清理依據(jù)而不是“創(chuàng)建時(shí)間”。一個(gè)分片只要在最近30分鐘內(nèi)有活動(dòng)就不能清理。第二容器環(huán)境下的臨時(shí)存儲(chǔ)。如果服務(wù)端跑在容器里臨時(shí)目錄要掛到持久化存儲(chǔ)卷上。否則容器重啟所有未合并的分片全部丟失前端已經(jīng)顯示上傳完成用戶只能重傳。這個(gè)問題的隱蔽之處在于它不是必然發(fā)生只在容器滾動(dòng)更新時(shí)概率出現(xiàn)。第三瀏覽器兼容性降級。現(xiàn)在主流瀏覽器對分片切割和并發(fā)上傳支持都不錯(cuò)但銀行網(wǎng)點(diǎn)偶爾還能碰到老版本瀏覽器。如果控件不做降級老瀏覽器可能直接不支持分片API連上傳入口都打不開。選型時(shí)要把目標(biāo)瀏覽器清單列給廠商現(xiàn)場驗(yàn)收時(shí)安排老舊終端跑一遍。第四代理和網(wǎng)關(guān)的超時(shí)機(jī)制。不少銀行內(nèi)網(wǎng)有代理網(wǎng)關(guān)默認(rèn)空閑超時(shí)可能是60秒或120秒。如果分片上傳請求在網(wǎng)關(guān)層被判定為空閑連接而中斷前端無論如何重試都是白搭。排查技巧是看用戶上傳失敗的時(shí)間點(diǎn)是否穩(wěn)定在一個(gè)固定值附近把抓包工具接到服務(wù)器端確認(rèn)請求是否到達(dá)應(yīng)用服務(wù)器如果到達(dá)且沒有超時(shí)記錄再回頭查網(wǎng)關(guān)配置。關(guān)于服務(wù)端合并時(shí)的哈希校驗(yàn)順序我再補(bǔ)一句。最好在合并過程中就同步計(jì)算哈希不要合并完成后再單獨(dú)讀一遍文件算。文件越大第二遍讀取的時(shí)間成本越高合并過程同步計(jì)算哈希能省出接近一倍的IO時(shí)間。這套東西我前前后后在不同項(xiàng)目里驗(yàn)證過三輪最深的體會(huì)是選上傳控件不能光看墻上貼的測試數(shù)據(jù)一定要在自己的網(wǎng)絡(luò)環(huán)境里跑真實(shí)業(yè)務(wù)文件。供應(yīng)商給的演示環(huán)境永遠(yuǎn)是理想網(wǎng)絡(luò)生產(chǎn)環(huán)境的復(fù)雜程度遠(yuǎn)超想象。另外無論最終選了哪家都要保留好替換的接口設(shè)計(jì)不要把業(yè)務(wù)代碼和某個(gè)具體控件的API焊死。我在一次組件升級中就是因?yàn)榈讓訌姆桨窤切換成方案B業(yè)務(wù)代碼幾乎沒動(dòng)只改了適配層整個(gè)切換耗時(shí)不到一天。這一點(diǎn)比控件本身多一兩個(gè)花哨功能有價(jià)值得多。如果你正在頭疼選型建議先從列需求清單開始把八個(gè)問題答完再看任何一份產(chǎn)品資料能少走一半彎路。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
色综合五月| 一区二区三区四区牛| 5月婷婷6月丁香aV| 丁香久月| 欧美色色色色色| 国产永久一黄| 亚洲情综合五月天| 人人摸人人干| 超碰二区| 夜夜夜夜夜骑撸| 五月婷婷啪啪网| av网站不卡在线| www.婷婷六月天| 久久五月婷婷开心网| 日韩另类在线观看| 婷婷酒色网| 99热6精品| 人妻精品久久久久久久| 国产综合激情五月久久| 色噜噜伊人| 九色在线观看91av| 国av网| 热久久91| 激情五月天天狠狠久久| 五月丁香六月欧美| 丁香五月激情六月综合| 99这里只有免费的精品| 9+1视频网址| www.色色com| 亚洲乱码日产精品BD| 亚洲情色一区| 婷婷狠狠18禁久久| 99爱视频在线观看这里只有精品| 伊人婷婷五月天av| 天天操天天操综合| 亚洲日韩人妻操逼| 91vip在线观看| 99热999| 天天干天天拍| 五月婷婷五月天| 99热在线观看免费精品| 亚洲视频99| 99精品无码网站| 色五月琪琪| 任你干嘛免费视频播放| 三人荫蒂添的好舒服A片| 97人人草| 激情99| 婷婷丁香五另类网站| 色婷婷成人五月| 成人色情五月天婷婷丁香| 丁香婷婷成人在线播放| 婷婷色丁香六月| 丁香五月天导航| 婷婷色色丁香五月天| 超碰A V在线| 婷婷综合中文| 欧美日韩国产成人在线| 另类国产区| 九九热内射| 天堂久久丁香| 色色网91| 生活片五区| 碰人人操| 99热r| 67194成I人在线观看线路1| 婷婷五月天丁香社区| 99小视频在线观看| 97热精品| 中文字幕丰满乱孑伦无码专区| 伊人碰碰碰| 久操激情| 五月天婷婷黄色视频| 色五月xxx| 国外亚洲成AV人片在线观看| 色噜噜婷婷| 婷婷五月天桃花网| 久久九九免费视频| 伊人久久婷婷| 9+1视频网址| 九九美女视频| 成人短视频在线观看| 丁香五月综合狠狠| 中文字幕成人日韩| 婷婷色网站| 888精品福利地址| 激情综合婷婷五月| 五月婷婷六月丁香激情深爱| 麻豆123区| 精品九九视频| 天天激情欧美美女| 天天做天天爱天天高潮| 67194中文在线| www.99操| 午夜丁香| 久色国产| 激情色色| 91综合视频丁香| 超碰在线观看caop| site:jszngf.com| 色青青视频| 人人视频色| 色性日本| 99久热| 丁香五月天啪啪| 8090在线影视少妇| www久久久久| 大香蕉啪啪| 九九热10| 婷婷五月天在线视频网站| 九九综合九九| 丁香婷婷成年| 五月激情综合网| 色小说婷婷五月天天天| 色婷另类| 五月天婷婷青青草| 丁香婷婷精品视频| 色婷婷AV在线| 丁香六月婷婷激情| 久久这里只有精品5| www,五月丁,com| 天天爱天天做天天| 秋霞少妇AV网站| 热热99爱爱| 激情五月婷黄版| 都市激情小说婷婷| 日本色婷婷| 激情超碰网| 大香蕉手机视频| 天天碰天天插天天操| 五月丁香在线| 亚洲成人在线五月天| 久综合色| 久久婷婷亚洲无码一起| 亚洲一区二区无码蜜乳av| 色婷婷激情| 国产婷婷色综合AV蜜臀AV | www.色九月| 高清无码 一区 二区 三区| 丁香色婷婷五月天| 天天色情站| 日本97在线| 日日爽日日操| 欧美在线97| 日本激情综合| www,欧美干干干干干干| 亚洲九九视频| 91婷色| 666555。COm毛片| www.91久久| 天天爽综合网| 97caop| 久草性爱| 大香蕉婷婷久久| 九九热视频精品999| 日本99热| 99日本黄站| 1024欧美看片| 五月丁香无码| 婷婷碰碰| 这里只有国产精品在线| 国产成人精品亚洲线观看| 欧美日韩国产一区| 99久久这里只有精品| Blackedraw视频一区二区| 激情性爱五月天| 俺去也在线www色官网| 1024人妻| 天天日日天天| 丁香五月天啪啪| 五月婷婷黄网站大全| 色婷婷五月天中文字幕| 国产精品美女| 国庆精品久久| 超碰v| 99久久这里只有精品免费官网| 色五月综合| 九九色大香蕉| 丁香花五月天激情| 五月丁香六月久久| 亚洲精品婷婷| 综合99在线| 999热在线视频| 欧美怡红院黄站| 五月天色五月天| 天天干,天天日| 丁香六月婷婷综合色| 五月天婷五月天综合网在线观| 亚洲视频一区| 婷婷激情六月中文| 99碰碰碰| 综合视频久久| 91丨九色丨熟女高潮| 91性高潮久久久久久久久| 欧美VA视频| 久久人妻人人| AV在线免费播放| 久久婷婷五月综合啪| 碰碰碰91| 欧美人妻一区二区| 五月婷婷 六月丁香| 色婷婷丁香五月| 日日色五月天| 日韩综合久| 人妻操逼视频。| 99这里只有| 中文网AV| 影音先锋91网站在线观看| 亚洲噜色| 成人欧美日韩| 风流少妇A片一区二区蜜桃 | 激情九九六月激情免费视频| 99精品在线播放| 色婷婷WWW| 九九热视频在线观看| 涩涩五| 中文字幕无码人妻少妇免费视频| 婷婷色爱| 五夜婷婷| 五月花综合| 嫩草AV久久伊人妇女超级A| 99er视频在线| 婷婷激情五月综合| 欧美成人猛片AAAAAAA| 99热这里只有在线| 大香蕉久艹| 五月婷婷激情网| 高潮毛片遮挡费高一百度| 婷婷色色五月天| 26uuu国自产精品| 丁香五月天大香蕉啪啪| 久操大| 色综合色欲综合天天免费| 日日鲁鲁鲁夜夜爽爽狠狠视频97| 天天爱天天操| 五月丁香日本片| 99九九精品视频推荐| 国产视频婷婷| 色色婷五月天| 99热最新精品| 色都都狠狠色都都色综合色| 亚洲天堂久久| 日韩爱操视频| 五月天激情图片| 亚洲V国产V欧美V久久久久久| 久久免片| 五月天激情日色在线| 亚洲有码在线视频| 日韩精品视频中文字幕| 99热资源在线| 五月婷久久在线| AV成人在线播放| www.婷婷| 九九色婷婷| 狠狠插狠狠| www999日韩精品| 欧美成人AAA片一区国产精品| 婷婷五月丁香六月天亚洲综合| 婷婷色五月丁香六月欧美啪| 九九人人看| 99久热| 九色无码| 丁香五月婷婷在线| 国产在线另类五月婷婷| 日日日日做夜夜夜夜无码| 亚洲日韩欧美综合VA| 91ncom.色| 婷色综合| 丁香六月激情综合| 婷婷色片| 丁香5月婷婷| 天天婷婷综合| 日本超碰在线| 国产五月天婷婷| 色婷婷精品视频在线播放| 99视频内射三四| 14色综合婷婷| 天天舔天天摸| 九热视频| 91精品久久久久久综合五月天| 996er在线观看| 日本色色网站| 黄网在线免费播放| 亚洲婷婷久久综合| 五月丁香花视频| 99热亚洲只有色| 丁香五月AV| 色色五月天激情| 五月丁香六月婷婷无码| 婷婷丁香人妻天天| 天天色,天天日,天天做| 久色欧美| 开心网五月色婷婷| 人人操人| 美欧日韩国产成人在战| 欧美黄色韩日网| 少妇人妻凹凸视频| 激情久久综合网| 五月天久久婷婷婷| 99在线观看| 久久婷婷丁香视频网| 大香伊人婷婷影院| www.99操.com| 六月丁香成人| 六月丁香婷婷色狠狠久久| www.91AV.com| 亚洲顶级VA在线观看-高清完整版在线影院观看-S022AV | 激情网五月婷婷| 逼逼AV| 婷婷舔| 五月丁香婷婷五月色| 婷婷五月成人色综合| 九九99免费视频| A在线观看| 天天日夜夜欢| 激情五月深爱五月| 九九爱看亚洲| 久草热视频在线观看| 五月婷婷五月天| 中文av网站| 99热精品在线观看| 91性交在线播放| 99视频热99| 中文字幕不卡网站| 婷婷亚洲久久| www色色com| 色婷婷手机在线| 久色视频在线| 思思热久久久在线| 色噜噜狠狠色综合成人网| 五月天丁香成人| 色五月激情综合| 另类图片天天影视在线观看| 天天拍天天操| 日本波多野结衣视频| 五月天伊人久久| 丁香婷婷性久久| 婷婷涩五月| 五月开心婷婷网| 无码网| www夜夜操wwwcon| 婷婷亚洲在线| 亚洲免费99| 天天日天天摸| 丁香 婷婷 激情 综合 五月| 久久婷五月天| 色五月色综合| 丁J香六月首页| 人橾人| 国产综合丁香五月天| 亚洲无线视频| 天天 青草 丝袜制服 在线| 可以看的AV网站| 91日本在线| 亚洲日韩一页精品发布| 婷婷成人av| 国产成人在线精品| 午夜婷婷五月天在线| 人人草人| 国产成人精品亚洲线观看| 激情婷婷五月在线合集| 99九九视频| 激情五月天色| 五月天色丁香| 欧美成人精品A片免费一区99| 丁香花大香蕉婷婷综合| 超碰在线人妻| 99热只有精| 色五月激情综合网| 9色免费网| 亭亭丁香aV| 亚洲亚洲永久无码777777| 久婷| 思思热这里只有精品视频666| 岛国AV网| 伊人影音无码一区二区三区| 色婷婷天堂| 最近免费中文字幕大全高清大全1| 色综合久久综合中文综合网| 97人人搞| 国产欧美日韩性爱| 婷婷五月情| 中文字幕丰满孑伦无码专区| 天天操天天插天天射| 亚洲AV成人无码精品| 香焦网五月天| 伊人超碰| 丁香婷婷五月人体| 丁香激情六月天婷婷| 婷婷丁香小说| 久久激情视频| 色五月综合在线| 91干视频| 性爱综合网| 五月丁香九九| 五月激情婷婷女| 婷婷九月亚洲| 香蕉婷婷五月| 五月丁香综合伦理片| 五月婷啪| 91婷婷伊人牛牛| 丁香五月天天高清在线| 97人碰人操| 激情精品久久| 五月天精品| 五月婷婷丁香大陆免费| 丁香婷婷婷五月| 国产成人精品123区免费视频| 94干大香蕉| 婷婷伊人久久综合| 国产操B| 99re这里只有精品免费| 色色免费网站| 天天操天天国产三级片处女学生妹| 亚洲AV成人精品日韩在线播放| 人人草人人爱手机视频看看 | 成人 在线观看国产| 永久99免费视频网站| 亚洲天堂99| 五月婷婷偷拍| www.色9| 欧美成人精品A片免费一区99| 五月婷在线| 日本美女上人| 丁香六月综合激情| 五月亭亭开心网| 五月天激情四射| 色五月综合在线| 久久99综合网| 猫咪伊人久久| 婷婷五月天色色| 日韩av在线电影| 97久人人| 久久视频这里有精品99| 都市激情蜜桃婷婷五月天 | 亚洲综合1024| 久热久色| 免看黄大片AA | 清色五月天| 成人精品视频99在线观看免费| 99精品国产在热久久| 99综合在线| 99视频色在线观看| 天堂成人A片永久免费网站| 五月婷色丁香| 看逼中文字幕| 午夜亚洲国产精品av一区二区| 99自拍视频网站| 人人爱操| 五月天自拍视频| 国产激情久久| 婷婷久久图片| 开心五月激情网| 天天日天天狠狠操| 无码AV大香线蕉伊人| 久久九九热视频| 亚洲人妻Av| 中文资源在线a| 色色五月天婷婷| 亚洲成av人影院| 五月天激情开心网| 五月婷婷很很色| 久久怕怕视频| AV九九| 强壮的公次次弄得我高潮A片日本 | 很很干五月天| 久久久婷婷色五月资源网| 久久久久久久久99精品| 天天综合情| 色婷婷呢狠禁久禁| 丁香五月天.com| 国产99热| 欲求不满的人妻| 97人人搞| 99九九视屏| 九九色天堂| 五月丁香亚洲综合| 五月天婷婷丁香社区| 成人电影AV在线观看| 日韩啪啪网| 丁香五月激情视频| 五月婷婷无码| 九九99精品免费播放| 另类小说五月天| 深爱五月激情网| 久久精品日| 五月婷婷啪啪| 丁香五月大香蕉| 岛囯综合激情网| 久久三级视频| 亚洲五月色| 婷婷综合激情| 色色丁香色五月| 五月丁香婷婷欧美| 色五月婷婷在线| 丁香六月av| 99ri视频在线观看| 色99视频| 九九精品热播| 99爱精品视频| 狠狠88综合久久久久噜噜噜| 亚洲成人超碰| 99草在线免费观看视频| 人妻体体内射精一区二区| 玖玖婷婷色五月| 无码婷婷五月天| 欧美熟女99| 久久久aaa| 婷婷成人五月天成人文学| 五月天亚洲综合网| 色婷婷九月综合| 亚洲综合在线视频| 婷婷色五月激情强奸四射| 亚洲六月色| 99精品视频免费观看| 五月激情婷婷国产精品久久久久久| 午夜婷婷丁香| 色五月婷婷在线| 欧美日本99| 99色爱| 99性色| 国产精品视频免费看| 日韩99色99| 五月丁香婷色| 天天搽天天射| 99色婷婷视频| 亚洲综合婷婷| 久久多色| 无码动漫AV| 婷色影院| 琪琪布丁香社区激情五月天| 狠狠干狠狠干| 五月天婷婷综合| AV中文在线| 色你久久| 亚洲啪啪视频| 另类A片| 丁香六月综合激情| 99热在线播放| 五月天婷婷免费视频| 97色色在线视频| 色高清无码视频| 国产五月丁香在线| 九九热这里只有精品5| 91丨九色丨熟女|新版| 啪啪操操| 影音先锋一区| 色婷操逼| 婷婷激情五月天网站| 五月天丁香六月综合| 殴美日比视频| 99福利导航| 欧美久久网| 亚洲性爱电影| 色婷婷成人| 日本精品在线噜噜噜| 亚洲色五月| 久久机热这里只有精品免费视频| 久热这里只有精品3| 色,激情五月天| 99色精品视频| 丁香五月aV| www.91有码.com| 武汉美女啪啪视频免费一级片| 狠狠撸激情综合丁香五月天俺来啦| 伊人狠狠干| 色婷婷丁香五月天| 日日操夜夜爽天天天| 五月婷婷无码专区| 天天操夜夜橾| 五月丁香琪琪| 成人综合网站| 天天视频精品9| 婷婷五月a| 丁香六月狠狠干| 99碰网站| 成人超碰AV| 五月丁香六月色婷婷| 五月婷婷网五月在线| 五月综合无码| 在线99热| 日日色综合| 五月丁香婷婷综合| 亚洲成人日韩无码精品| 性爱五月丁香| 丁香色六月婷婷| 狠狠操.COM| 99爱视频在线观看这里只有精品| 99热青青草| 天天干天天色综合| 亚洲成人在线观看av| 热久久999| 六月激情丁香一道本7777| 久久精典| 五月丁香 啪啪啪| 五月丁香六月婷婷网站| 大香蕉网站,大香蕉综合| 中文av网站| 久草九一| 在线播放成人网站| 天天看夜夜看| 色99视频| 午夜微拍福利| 午夜丁香婷婷| 丁香五月天在线| 久久久久婷婷| 国产亚洲99久久精品熟| 日韩啪啪网| 五月婷婷婷婷婷| 99精品久久久久久久婷婷| 无码成人AAAAA毛片AI换脸| 亚洲精品成人片在线播| 国产婷婷综合| 另类激情五月在线视频欧美| 精品香蕉99久久久久网站| 九九99热久久精品66中文字幕| 激情综合网五月天天| 天天色天天日| 深爱五月激情| 丁香五月色情av| 精品久热| 狠狠五月激情丁香六月| 久久性视频| 金品在线视频99| 婷婷在线操| 天天色99| 婷婷色综合网日韩国产| 99热最新| 五月六月婷| 裸睡玩奶头(高H)| 在线观看免费狠狠色丁香香综合| 天天檫天天爽| 99热成人| 久久久婷婷| 丁香激情五月天| 青青草轻轻操| 6月丁香婷婷激情| 婷婷五月天首页激情| 超碰色婷婷| 亚洲永久免费| 日日做天天操夜夜爽| 五月丁香六月婷婷免费| 五月天开心网| 操逼三区| 无码少妇高潮喷水A片免费| 久久精品99国产精品日本| 欲色人妻| 第五色色色婷婷| 欧美电影在线播放| 东北黄色一级| 激情WWW| www.狠狠| 亚洲不卡| 99热最新精品| 久草视频大香蕉99| 婷婷丁香五月天小说| 九九热在线视频| 五月激情综合网| 婷婷情色五月| 色婷五月丁香久亚洲| 亚洲精品亚洲人成人网| 色婷婷WWW| 丁香六月婷| 新男人天堂人妻| 五月丁香六月婷婷网站| 99riAV成人在线视频| 在线五月色播| 97精品人人A片免费看| 激情视频网址| 99性色| 三级三久久线久久99久目本WW| 五月丁香激情综合久久| 艹天天射| 91人操| 91精品久久久久久久久 | 这里只有精彩视频| 六月婷婷啪啪| 久久伊人婷婷| 五月婷视频久久| 五月天色社区| 伊人青草成人| 免费无码毛片一区二区A片| 色10月婷婷视频| 色五月综合| 色婷婷4| 无遮挡国产高潮视频免费观看| 丁香激情久久| 中文中文在线| 丁香成人色情五月天| Caoub青青超碰| 五月婷婷福利| www.九月婷婷丁香.com| 99人妻碰碰碰久久久久视| 色射7856五月天激情四射| 婷婷五月成人| AV在线免费网站| 激情图片五月天| 天天在线久久综合 | 色五月丁香激情| 丁香五月综合狠狠| 狠狠色婷婷丁香六月| 五月Huangsewang| 成人综合伍月天| 日本精品干| 五月婷婷综合丁香视频| 五月婷婷狠狠干| 天天精品视频免费观看| wwccc久久久| 极品五月天| 五月天四色房丁香亭亭| 九九色人| 亚洲午夜成人av电影网| 久草热在线视频| 色情综合| 久久九九热38| 亚洲色激情| 99福利导航| 91蜜桃婷婷狠狠久久综合9色| 国内婷婷丁香社区在线播放| 偷拍99在线视频观看| 香蕉国产2013| 天天干天天干天天干天天干天天| 婷婷五月,偷窥偷拍网| 五夜婷婷| 夜夜操激情| 婷婷精品在线| 丁香五月亚洲综合丝袜| 97色片| 五月天色导航| 亚洲婷婷久久综合| 色欧美一级| 97热精品| 五月丁香婷婷啪啪综合网| 激情5月婷婷| 婷婷的99视频网站| 亚州性爱99| 激情AV| 伦乱人妻| 久草热在线视频| 99爱最新免费视频在线观看| 色吧五月婷婷| 啪啪九九色| 午夜色婷婷| 青草热视频这里只有精品| 日本99在线视频| 大香蕉AV电影在线| 九九激情网| 66精品成人免费网站在线观看| 99日本黄站| 超碰永久在线| 青青草免费公开视频| 99热综合在线| 国产五月天欧美色| 26uuu欧美亚洲日韩| 97香蕉碰碰人妻国产欧美| 九热网站| 嫩BBB搡BBBB榛BBBB| 亚洲综合1024| 丁香婷婷五月天在线视频| 极品 少妇 内射| 精品成人无码A片观看香草视频 | 26uuu成人网| 欧美成人网婷婷综合在线| 成人电影AV在线观看| 久婷婷久草| 综合久久综合久久| 大香蕉五月婷婷| 色综合99无码| 一起草无码视频| www色色com| 99免费视频在线观看爱| 欧美性爱特黄一级aaaassss| 婷婷黄色网| 五月婷婷色色| 五月天婷婷丁香社区| 丁香五月婷婷少妇| 99网| 激情五月天网站| 白天AV月月| 日日操夜夜爽| 丁香婷婷啪啪啪| 成人色图情色成人网 www.5b5b5bcom 五月天 | 碰人人操| 99无码黄色视频| 亚洲乱码w在线观看| 日韩狠狠色婷婷| 91色五月| 婷婷午夜丁香| 日本99视频| 久久婷婷欧美| 丁香 婷婷五月| 91婷婷色 | 婷婷9月天| 国产精品99久久久久久久女警| 婷婷五月天堂| 色五月琪琪| 99热99色| 亚洲在线操| 亚韩在线视频| 人人草人人爱| 日日噜噜久久婷婷五月天 | 激情图片久久| 激情丁香五月天图片| 国产精品久久久久久五月天加勒比| 婷婷五月丁香狠狠| 99热欧美在线观看| 色婷婷五月天激情久久| 思思热思在线精品视频| 电影蜘蛛女| 思思热思在线精品视频| 人人干天天操五月丁香| 很很干在线视频| 丰满人妻一区三区三区| 战争与艾拉电影免费观看| 婷婷深爱五月丁香网| 天天色综合综合| 久久婷婷五月免费视频| 色色色五月婷| 久久久久久综合88| 天天插天天干| 精品国产AV色一区二区深夜久久| 丁香五月天AV在线 | 2025超碰| 五月香蕉网| 91色综合网| 婷婷五月69| 色五月丁香激情| 99国产小视频| 这里只有精品久久| 色婷婷丁香五月| 天天插天天干| 91美女艹逼网站| 日本WWW九九九| 久热超碰| 色婷婷六月激情| 色婷婷狠狠干芒果TV| 日日夜夜天天| 五月婷婷六月丁香综合| 亚洲乱码精品久久久久.. | 免费视频在线观看的网站| 九九中文色色| 久草五月婷婷| 婷婷涩涩网| 狠色狠色综合久久| 狠狠狠夜夜夜| 亚洲1区| 欧美成人AAA片一区国产精品| 久热A片| 久久免费操| 久久久久久草黄色片AV在线观看| 日韩啪啪网| 严洲天天插| 五月天激情无码| 这里只有精品免费| 久久这里只有精品视频15| 日韩AV在线免费观看| 五月天婷婷午夜丁香| 亚洲色无码| 久久99久久99精品免观看粉嫩| 婷婷中文字幕| 99热69| 婷婷丁香色五月天久久88| 亚洲色色香蕉| 五月婷婷中文字幕| 久久99免费视频网站| 99er这里只有精品视频| 99在线观看视频蜜臀| 色99在线视频| 99热这里只有精| 免费人人操| 五月婷婷偷| 激情五月婷婷在线观看| 国产做A爰片毛片A片美国| 色色色区| 六月丁香好婷婷| 五月天婷婷色色| 毛片九九九九九九| 综合久久丁香婷婷,五月婷婷六月丁香,开心激情综合网,六月丁香在线观看,婷婷丁 | 思思热久久阴99| 99爱视频免费| 9久热精品在线视频| se.久久视频在线观看| 日韩一66精品| 日韩人妻无码专区| www.99热精品99.com| 综合久久丁香婷婷,五月婷婷六月丁香,开心激情综合网,六月丁香在线观看,婷婷丁 | 午夜日韩久久久网站| 婷婷五月天免费小说| 337午夜福利| 五月天婷婷久久| 丁香五月婷婷综合激情哟哟哟| 久天综合| 青青草成人网| 亚洲情欲久久| 伊人婷婷激情| 九九色色| 激情啪啪五月| 99热99热在线| 九九九九九999999| 天天做天天爱天天日| 91九色丨国产丨爆乳| 久草婷婷视频| 99热这里只有精品50| 99ri在线观看视频| 日本天堂免费99| 国产日韩亚洲欧美在线观看| 中文字幕日产A片在线看| 久久er免费视频| 高清不卡一区| www.97碰碰com| 丁香五月婷婷在线| 激情五月婷婷丁香综合网| 超碰99热| 天天日,天天插| 97影院一级片| 开心五月婷婷| 婷婷在线观看五月天在线视频| www.婷婷.com| a片在线免费观看一区| 六月丁香婷婷在线波多| 婷婷精品视频| 182TV大香蕉| 亚洲第一精品成人999久久精品| 无码日本精品XXXXXXXXX | 婷婷色色综合| 久久在线人妻| 日韩青青| 久久99美女精彩视频| 色婷插| 97好吊操| 色婷婷激情| 婷婷五月天成人动漫 | 国外亚洲成AV人片在线观看| 欧美日韩大黄| 五月婷婷激情五月| 超碰久热| 久久99网站| 久久天天天| 九九激情| 久久综合综合久久| 欧美高潮9| 九九热在线精品视频| 夜夜爽日日躁| 色五月在线观看| 夜夜夜夜撸夜夜操| 久久久8| www.婷婷五月.com| 日本欧美成人片AAAA| 人人操Av| 亚洲乱码日产精品BD在线观看| 欧美婷婷五月无砖| 婷婷五月丁香第四色超碰在线| 久热超碰| 中国丰满熟女A片免费观| 久久狠色噜噜狠狠狠狠97| 久九男女天堂| 久久久久思思热| 国产小网站| 五月六月伦理| 欧美三级欧美一级| 伊人五月综合网| 人人舔人人色人人高潮| 久久5 9视频免费观看| 性天天中文网| 五夜丁香| 久色网| 麻豆五月丁香婷婷| 九九偷拍网| 美女网黄| 久久99久久99精品免观看粉嫩| 人人摸人人搞| 日夜夜天天| 六月综合婷婷开心伊人| 日本99久久| 亚洲成人综合在线| 无码AV免费精品一区二区三区| 五月丁香花激情综合网| 色五月婷婷激情基地| 六月综合婷婷开心伊人| 大香蕉AV在线| 激情五月丁香五月综合| 天天干,天天日| 久久视屏这里只有久久| 操91| 99九九精品| 亚洲色五月婷婷| 操日视频| 在线国产精品色| 国模淫穴色图| 久久久亚洲成人无码A片| 影音先锋91| 成人五月天在线视频在线观看| 日本欧美999久久久三级片| 色色网站| 婷婷干五月综合在线播放| 99久在线观看| 国产精品电| 欧美黄色韩日网| 色婷婷亚洲婷婷| 久久婷婷青青| 99婷婷| 人人摸人人干人人做| 色呦呦免费观看| 97精品人人A片免费看| 日本婷婷| 日本3级片偷拍网站| 亚洲 在线 另类| 99久在线观看| 激情综合网,婷婷五月天| 久久久久久久久99精品| 在线中文AV| 色五月丁香网| 99精品性爱| 亚洲综合激情五月天婷婷| 五月婷婷色白丝| 欧美性色A片免费免费观看的| 99噜噜| 99综合激情久久精品久久| 色五月婷婷婷婷婷婷婷婷婷婷| 五月婷婷9| 五月天色婷婷综合| 影音先锋天天日| 久久五月婷综合网| 免费亚洲婷婷中文字幕| 色综合色综合色综合| 久久精品婷婷| 丁香五月天论坛| 天天日人人爽| 久久五月视频| www.久久爱.com| 婷婷激情五月天激情小说| 97色色婷婷| 夜夜躁爽日日| 丁香五月婷婷骚视屏| 五月天 综合 在线| 婷婷啪啪| 月色色综合婷婷网| 五月丁香久久久| 国产精品VIDEOSSEX久久发布| 99色免费视频| 99秘 在线| 色婷视频| 无码橾| 久久久久久久久久久久久久久久久精典| 色综合色| 五月天色不卡| 久热9| 在线天堂9| 丁香六月激情综合| 色婷婷www| 天天爽夜夜爽天天爽夜夜爽| 丁香五月天在线直播观看| 亚洲欧洲99| 日本人人干| 色九月国产| 最熟少妇乱码| 国产精女同一区二区三区久| 第四色在线观看| 国产亚洲精品AAAAAAA片| 另类五月激情| 伊人干练久| 狠狠舔| 亚洲婷婷视频| 婷婷六月丁综合| 中文字幕在线视频播放| 97爱艹婷婷开心丁香激情综合| 午夜69成人做爰视频| 久久久婷| 99热在线播放| 超碰91在线| 婷婷五月天av| 九九色热| 极品少妇XXXX精品少妇偷拍| 婷婷五月色| 激情九月婷婷| www.99热| 一区二区成人电影| 99九九精品| 噜噜视频| 色五月婷婷在线| 风流少妇A片一区二区蜜桃| 色久九| 99热这里只有精品66| 久九色| 深爱激情五月网| 操一区| 熟妇内谢69XXXXXA片| 95精品区一区二| 丁香婷婷综合影院| 免费成片在线观看| 亚洲一区二区色图-亚洲精品国产精品乱码-成人AV | 欧美激情VA永久在线播放| 婷婷五月天激情影片| 激情五月婷婷综合色播小说| 日韩久久色| 欧美丰满熟妇BBB久久久| xx久久| 日日噜噜久久婷婷五月天 | 97人人操在线| 99五丁香月| 丁香五月色激情| 在线综合91| 殴美激情综合网| 九九热99re8热免费观看| 午夜丁香| 欧美草久久五月天91| 久久9久| 亚洲av网站| 在线播放中文字幕| 婷婷五月丁香六月| 婷婷五月天国产传媒| 亚洲 综合中文| 丁香五月婷婷偷拍| 中文人妻AV久久人妻18| 国产在线中文字幕| 一级二级色大片| 91国产精品视频播放| 天天天操天天天爰| 五月停停色色丁香| 中文字幕丰满孑伦无码专区| 人人摸人人操人人爱| 狠狠色中色| 激情啪啪五月天| 4399人妻无码久久久| 亚洲激情电影五月天色婷婷丁香一起草| 天天操天天日天天操| 婷婷99狠狠| 丁香婷婷浪潮AV久久综合| 99热这里只有精品1025| 伊人丁香花综合影院| 色综合久久88色综合天天99| 99这里都是精品| 色播激情| 国产成人网| 欧美丁香六月在线观看视频| 99色在线视频| 9999热在线观看| 六月婷婷久久大全| 日本人妻伦在线中文字幕| 99ri精品视频在线观看| 91啪级电影| 亚洲人妻av| 欧美、日韩、中文、制服、人妻| 婷婷色播六月无码| 久热超碰| 中文字幕在线免费看线人| 色就是色婷婷五月亚洲激情| 伊人久久五月天| 成人国产欧美大片一区| 六月丁香五月激情亚洲AV| 亚洲中文乱字字幕在线永久| 亚洲九区| www.婷婷.com| 国产免费一区二区在线A片视频| 日本啪啪天堂| 另类A片| 久久综合五月天| 五月天激情综合网| 99热国产免费| 奇米影视777在线_在线观看午夜_h小视频在线观看_岛国大片 | 日日干日日| 99视频只有精品| 这里只有精彩小视频视频网站| 超碰操网| 天天爽在线视频| 五月丁香影院| 色综合播放| 丁香五月五月婷婷欧美大香蕉| 久久黄色免费视频| 欧美色综合天天久久综合精品 | www.婷婷| 大香蕉 伊人夜| 久99在线视频| 五月婷婷激情啪啪| 一级性爱视频| 日本色超碰| 婷婷五月天福利| 成人短视频在线免费观看| 久久天天| 激情四射网| 激情四射五月天| 丁香六月啪啪啪| 天天日夜夜爽| 激情丁香婷婷五月天| 影音先锋四区| 亚洲日韩国产黑丝黑丝AVAV一区二区三区| 婷婷五月情| 久久精品婷婷五月丁香| 99婷婷| 人妻系列久久久久久久久久久| 丁香五月播播| 婷婷 激情 五月| 婷婷五月丁香综合瑟瑟| 99视频网| 99久超碰| 色五月 五月婷婷| 亚洲操人| 国产AV一区二区三区最新精品| 丁香六月亚洲综合| 婷婷丁香社区| 久久久久久久97| 99热这里有精品6| 色亭亭九月| 超碰日日操| 色婷丨日丨天丨综合久久| 艹色18p| 99日本黄站| 成人在线不卡| 婷婷五月天影院| 精品久久久久久久人妻| 人人97碰| 久久激情综合| 五月天激情开心网| 婷婷五月丁香色色| 久久 婷婷 五月天| 棕合影院色色| 图片区 小说区 区 亚洲五月 | 可以看的AV| 六月婷婷亚洲| 97干在线观看视频| 99re6在线视频精品免费| 综合色五月| 五月天激情综合网俺也去| 99热网精品| 日本99在线| 色九月激情综合网| 中文av在线观看| 一本色道久久综合狠狠躁小说| 婷婷六月激情啪啪| 天天透天天干| 可以看的AV| 79色色| 色婷婷香蕉| 淫视馆av三区| 天天日天天摸| 大地资源色婷婷视频在线| 婷婷99视频精品| 五月婷婷六月激情| 亚洲av成人在线| 婷婷激情综合色五月久久,色婷婷丁香花,丁香婷婷五月情天,久久婷婷五月综合色 | 超碰97在线观看免费| 99视频精品| 天天精品视频在线观看视频| 丁香六月久久| 亚洲一二三网| 99激情| 伊人色综合网| 精品99网站| 亚洲愉拍99热成人精品| 激情四射亚洲| www.99热这里只有精品| 五月色亚洲| m色激情网| 婷婷丁香人妻天久久| 一起草aV| 99热个人在线| 亚洲六月色婷婷| 热的无码综合视频| 99婷婷| 9有码中文| 五月色综合| 五月天社区| 天天狠狠六月婷丁香影院| 狠狠干在线视频| 色婷视频| 婷婷五月,偷窥偷拍网|