欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

邊緣網(wǎng)關如何解耦遺留系統(tǒng):新能源出海項目通信架構升級實踐

邊緣網(wǎng)關如何解耦遺留系統(tǒng):新能源出海項目通信架構升級實踐 凌晨兩點庫爾勒那邊的風電場項目打來電話說數(shù)據(jù)采集服務又串包了。原因還是老一套——上位機每隔幾秒就輪詢一遍幾十臺設備的Modbus寄存器老的通信服務程序每處理完一輪請求就要重新初始化一次串口句柄現(xiàn)場有臺設備偶爾響應慢整個鏈路就卡死了。這已經(jīng)不是我第一次在新能源項目的現(xiàn)場聽到類似的問題尤其是那些帶著“老底子”出海的裝備問題會成倍放大。傳統(tǒng)裝備制造企業(yè)做新能源出海有個很容易被忽視的坎設備本身是新的BMS、PCS、EMS也都是新采購的可一旦要把這些設備接入到原有的生產(chǎn)管理系統(tǒng)、監(jiān)控后臺、運維平臺就立刻暴露出老系統(tǒng)的各種“不服”。這些遺留系統(tǒng)可能是十年前用C#寫的桌面服務程序跑在一臺Windows工控機上也可能是早期采購的嵌入式通信管理機只支持一路Modbus主站升級一個點位都要廠家遠程改固件。你帶著一臺非常先進的儲能變流器出海最頭疼的反而可能是這套老掉牙的通信底座。我在好幾個項目里被這個問題反復折磨之后徹底明白了“解耦”這兩個字的分量。這篇文章不聊怎么把遺留系統(tǒng)推倒重來那種事大概率不現(xiàn)實也沒必要。我想說的是怎么用一臺邊緣網(wǎng)關把那些跑了幾十年還不得不用的遺留系統(tǒng)從新能源裝備的高速演進中“摘”出來讓老的繼續(xù)按老的方式活讓新的用新的節(jié)奏跑兩邊互不拖累。先說個直白的結論邊緣網(wǎng)關在解決這個問題上不是錦上添花的“加個盒子”而是體系層面的“翻譯官隔離艙數(shù)據(jù)池”。它能同時解決協(xié)議不同、周期不同、數(shù)據(jù)結構不同、物理接口不同這幾個層面的糾纏。而“解耦”這個動作也不是一次性工程它分成代碼解耦、硬件解耦、數(shù)據(jù)解耦、部署解耦四個層次真正的項目經(jīng)驗恰恰是這一點最容易被忽略。1. 出海項目里的遺留系統(tǒng)到底“遺留”在哪個環(huán)節(jié)1.1 不是所有老系統(tǒng)都該拆但要先找“卡脖子”的依賴做海外新能源項目的人都知道設備出口不同于國內項目最大的變化是“邊界條件”變了。國內你可能只需要對接電網(wǎng)調度、省市級平臺協(xié)議固定、平臺固定、響應要求明確。到了海外每個國家的電網(wǎng)標準、通信規(guī)約、當?shù)乇O(jiān)管要求、業(yè)主運維習慣都不一樣有些地方甚至要求同時上送兩個甚至三個國標協(xié)議還要支持本地私有協(xié)議對接。問題就出在這里。你的新能源設備儲能集裝箱、光伏逆變器、風電變流器本身通信能力很強新的是Modbus TCP、IEC 61850、IEC 60870-5-104隨便選。可是老的遺留系統(tǒng)不是這樣它可能只能接受一種協(xié)議格式而這種格式還是十年前的一個項目組定死的字段長度、枚舉值定義、刷新頻率全都寫死在代碼里。我見過最典型的一個項目儲能集裝箱配套的老監(jiān)控系統(tǒng)底層通信程序把采集周期寫死成1秒但EMS的遙測數(shù)據(jù)是3秒才刷新一次結果老監(jiān)控界面上的SOC值每秒都在跳看起來就好像數(shù)據(jù)異常實際上老通信程序在拿3秒未更新的緩存數(shù)據(jù)反復上報。要解決這個問題常規(guī)思路是改監(jiān)控系統(tǒng)的代碼但這家廠家告訴我們這套系統(tǒng)是從歐洲某廠商買的源碼核心工程師已經(jīng)離職代碼注釋還是荷蘭語——想改根本無從下手。這是遺留系統(tǒng)的第一種“卡脖子”接口定義和業(yè)務邏輯深度耦合改任何一個字段都可能影響整套系統(tǒng)的穩(wěn)定性。1.2 老舊上位機通信程序的三大通病拋開代碼層面一個跑了五年以上的遺留系統(tǒng)在實際運行中普遍存在三個通病而這些通病在新能源出海場景下會被顯著放大。第一是單點輪詢瓶頸。老的上位機通信服務程序多數(shù)是單線程輪詢設計一臺主機掛幾十臺設備就接近上限了一旦總線里有一臺設備響應慢后續(xù)所有設備的輪詢都會阻塞。海外項目通常要求接入更多的設備節(jié)點比如整車車隊、多臺儲能柜、分布式光伏陣列老系統(tǒng)根本扛不住。第二是協(xié)議單一死板。老系統(tǒng)往往只支持64點以內的點位表或者只支持一種規(guī)約比如只有Modbus RTU主站面對海外項目動輒幾百上千的點位以及IEC 61850、DL/T 645、MQTT等多協(xié)議需求完全沒有擴展能力。第三是硬件綁定嚴重。老通信程序往往和工控機綁定依賴串口中斷、依賴操作系統(tǒng)版本、依賴特定廠商的USB轉串口驅動。一旦出海換了一臺新電腦或者客戶指定要裝在某款國產(chǎn)操作系統(tǒng)上程序就聯(lián)調不過去。這三個通病放在一起本質上說明了一件事遺留系統(tǒng)的軟硬件生命周期已經(jīng)跟不上海外新項目的迭代速度。如果你硬著頭皮讓老系統(tǒng)去適應新需求要么尋求原廠支持大概率要付費且周期漫長要么自己改代碼風險不可控要么就是在這種困境里反復消耗現(xiàn)場工程師的時間。我見過太多海外項目電氣工程師是在業(yè)主群里的Chat記錄和十幾個微信群里被遠程協(xié)調拉鋸戰(zhàn)折磨到崩潰的。1.3 邊緣網(wǎng)關介入的底層邏輯做中間層而不是改造者這些困境疊加在一起催生出了一個非常實際的需求——不指望老系統(tǒng)變得更聰明只求它能繼續(xù)穩(wěn)定輸出原來的數(shù)據(jù)同時讓新系統(tǒng)的接入工作不被它拖住。邊緣網(wǎng)關在這套邏輯里扮演的不是“改造者”而是“中間層”。它向下接管所有新老設備的通信向上統(tǒng)一對外提供標準的數(shù)據(jù)接口。老的遺留系統(tǒng)不需要知道外邊來了多少個新設備、換了什么協(xié)議它只需要按照自己熟悉的節(jié)奏跟邊緣網(wǎng)關這一臺“設備”打交道就夠了。這么做有個非?,F(xiàn)實的好處對遺留系統(tǒng)的改動量可以降到零。我們后續(xù)的項目里甚至有不少老系統(tǒng)本身硬件已經(jīng)壞掉了我們直接用邊緣網(wǎng)關的串口服務器功能模擬出一個以原IP和端口號存在的虛擬設備老平臺以為自己在跟原來的設備通信其實鏈路已經(jīng)被網(wǎng)關改道了。這就是解耦的精髓——不讓任何一端為了另一端犧牲特性和節(jié)奏所有變化都收斂在網(wǎng)關這一層處理。聽起來簡單真正落地要做到什么程度下一節(jié)展開說。2. 解耦的完整設計斬斷四層糾纏2.1 代碼解耦從“硬編碼”到“配置驅動”先聊軟件工程師最關心的代碼解耦。遺留系統(tǒng)里面最糟糕的代碼不是寫得亂而是邏輯全寫死在業(yè)務代碼里。舉幾個我在新能源項目里遇過的真實例子Modbus寄存器地址直接散落在業(yè)務代碼的各個角落改一個點位要全局搜索。串口參數(shù)、超時時間、重試次數(shù)寫在配置文件中但代碼里到處都是open()前臨時修改全局變量。業(yè)務邏輯和通信邏輯混在一個回調函數(shù)里收到一個遙測幀就直接更新界面、寫入數(shù)據(jù)庫、觸發(fā)報警中間沒有任何中間層。在一個出海項目里這種代碼耦合幾乎是致命的。因為海外業(yè)主的驗收往往要求提供協(xié)議一致性測試報告而字段每次調整都要重新編譯、發(fā)版、現(xiàn)場部署一輪一個項目下來光版本更新就二十多次。我們用邊緣網(wǎng)關做代碼解耦時核心手段是“配置驅動”。在網(wǎng)關里維護一個點位映射表把設備側的點位比如PCS的直流母線電壓寄存器地址30001映射成業(yè)務側的標準數(shù)據(jù)點比如dc_bus_voltage所有協(xié)議轉換、地址翻譯、格式轉換全部由網(wǎng)關完成。業(yè)務平臺對接的不再是某款設備的私有寄存器而是一份標準的JSON/Modbus/MQTT數(shù)據(jù)模型。這樣做完之后代碼改動被收斂成“配置修改”。新增設備時你只需要在網(wǎng)關的模板庫里選一個相似設備的模板改一下設備IP和點表不用重新寫代碼變更點位屬性時正常一個點位的配置修改在兩分鐘之內就能完成不用再做版本發(fā)布。2.2 硬件解耦把應用從物理硬件上“摘下來”代碼層面的解耦做完下一個棘手的問題是硬件。很多遺留系統(tǒng)跑在特定的硬件上比如一個老式的工業(yè)平板、一臺帶PCI串口卡的工控機。這些硬件要么停產(chǎn)要么因為海外項目需要通過EMC、高低溫、鹽霧測試而根本過不了檢。硬件解耦的本質是讓上層應用不再依賴特定硬件特性把它們封裝起來讓程序跑在任何一臺邊緣網(wǎng)關上都一樣。在我做的邊緣網(wǎng)關方案里這一步通常用容器化來實現(xiàn)。我們把老系統(tǒng)的通信服務程序比如那個Modbus輪詢程序打包成Docker鏡像跑在網(wǎng)關的容器運行時里。老程序對外表現(xiàn)不變——它還是監(jiān)聽5000端口但實際通信鏈路已經(jīng)被虛擬化網(wǎng)關的容器網(wǎng)絡把宿主機物理串口映射成容器內的虛擬串口老程序在容器里去訪問/dev/ttyS1其實訪問的是網(wǎng)關物理RS485口之后接的設備。硬件層面的“解耦”這個詞在項目里我通常講三層含義應用不再關心跑在哪個物理設備上容器可以遷移、重啟、備份。應用不再需要認識真實物理端口虛擬串口、虛擬網(wǎng)口讓“接線”變成“配置”。數(shù)據(jù)不再依賴物理鏈路存活斷網(wǎng)時數(shù)據(jù)緩存在本地恢復后自動補傳。這套做法最受益的場景是海外項目的遠程運維。老系統(tǒng)一旦在海外現(xiàn)場掛了過去你只能請客戶拍日志、寄硬盤回來現(xiàn)在容器方案可以遠程把整個容器打包下載回來放到本地測試環(huán)境里復現(xiàn)問題甚至可以直接在網(wǎng)關側做遠程容器替換。這種調試效率和傳統(tǒng)模式是完全不同的兩個層次。2.3 數(shù)據(jù)解耦標準模型 vs 私有協(xié)議代碼和硬件解耦做完必須面對數(shù)據(jù)模型的統(tǒng)一。新能源設備的數(shù)據(jù)有兩個極端一方面是IEC 61850、IEC 60870-5-104這類標準化程度很高的規(guī)約字段定義、數(shù)據(jù)類型、時標格式都有國標規(guī)范另一方面很多海外項目用的還是廠家私有Modbus協(xié)議點位表五花八門SOC的縮放系數(shù)可能是0.1%也可能是0.01%溫度單位可能是攝氏度也可能是華氏度甚至同一個廠家不同批次設備的數(shù)據(jù)格式都不一致。數(shù)據(jù)解耦的方案是“雙軌制”網(wǎng)關向上輸出標準數(shù)據(jù)模型向下適配私有協(xié)議。翻譯成人話就是我只讓網(wǎng)關內部處理那些復雜的、不統(tǒng)一的、私有化的轉換對外暴露給上層業(yè)務平臺的永遠是一份一致的數(shù)據(jù)模型。實際操作中我們采用了一個比較輕量但管用的方案基于JSON Schema定義統(tǒng)一數(shù)據(jù)模型。每臺設備在網(wǎng)關里都有一份配置文件里面規(guī)定了設備基本信息、參數(shù)點定義、映射規(guī)則、縮放系數(shù)、偏移量。業(yè)務平臺通過MQTT/HTTP接入網(wǎng)關時讀到的數(shù)據(jù)永遠是經(jīng)過網(wǎng)關處理后的標準格式。這里分享一個參數(shù)映射的小細節(jié)很多Modbus設備的狀態(tài)值用枚舉定義比如0x01表示停機0x02表示運行。海外項目業(yè)主可能希望看到的是stopped和running而國內平臺可能更習慣直接用數(shù)字。這個轉換在遺留系統(tǒng)里往往要靠上位機程序去映射代碼里寫一堆if判斷。在邊緣網(wǎng)關里我們只需要在配置里維護一個枚舉映射表網(wǎng)關在數(shù)據(jù)采集上報時自動轉換。等于把原來需要寫代碼的事變成了填表格。上面說的都是軟件層面的事。如果部署層面沒有理順前面所有解耦工作都會變成白費。下一節(jié)我們進入實操。3. 實操過程從老系統(tǒng)到新架構的遷移與接入3.1 先給老系統(tǒng)“做體檢”盤點遺留接口與資產(chǎn)動手改架構之前我強烈建議先做一次系統(tǒng)的“資產(chǎn)盤點”。具體做三件事梳理遺留系統(tǒng)的對外通信接口有哪些網(wǎng)口、串口、總線分別跑什么協(xié)議波特率、IP、數(shù)據(jù)位校驗位是什么。梳理點位表系統(tǒng)里維護了多少個數(shù)據(jù)點每個點的刷新周期、數(shù)據(jù)類型、縮放系數(shù)、讀寫權限。標注業(yè)務依賴關系上層哪些功能強依賴遺留系統(tǒng)的實時數(shù)據(jù)哪些允許延時哪些一旦中斷會影響安全或合同考核。這一步看著瑣碎但它決定了遷移方案是“全量替換”還是“混合對接”。比如有一個老系統(tǒng)承載了消防聯(lián)動信號這種涉及安全的鏈路遷移時我會盡量避免大改讓老系統(tǒng)直接對接網(wǎng)關的一個I/O點網(wǎng)關再把這些信號疊加到新平臺的告警模型里兩路并行一段時間。盤點結果出來了要畫一張簡單的數(shù)據(jù)流圖不是架構圖就是實際鏈路標清楚每條鏈路的物理路徑和協(xié)議類型。這張圖會成為后面所有配置的依據(jù)。3.2 用容器化把遺留應用從硬件上“摘下來”這一步是整套方案里最“外科手術”的部分。目標是把遺留系統(tǒng)里的核心通信服務程序遷移到邊緣網(wǎng)關的容器環(huán)境里運行。具體流程是這樣的在原來的老系統(tǒng)上導出程序目錄、配置文件和運行日志確認程序對運行時環(huán)境有哪些依賴是.NET Framework還是Java是否需要特定的本地庫。在開發(fā)機上用相同的操作系統(tǒng)基礎鏡像老程序如果是Windows我們通常用Wine容器做兼容層或者選擇Windows IoT容器方案如果是Linux就選擇對應版本的Debian/Ubuntu鏡像制作運行環(huán)境。利用tar或docker build命令把程序、庫、配置文件全部打入鏡像并把程序的通信端口暴露出來。使用docker-compose或者Kubernetes邊緣端我一般用輕量的k3s在網(wǎng)關側啟動。需要注意的一個坑是老程序往往依賴物理硬件的時鐘和串口資源在容器里要額外處理。我們一般把網(wǎng)關的RTC硬件時間掛載進容器保證時間戳一致同時用--device參數(shù)把物理串口設備映射到容器內讓程序認為自己在直接操作真串口。如果你們網(wǎng)關上有多個串口建議給每個串口建一個獨立的udev規(guī)則確保重啟后設備路徑不變。這一步做完你手上就有一個可以從網(wǎng)關里一鍵啟停的遺留系統(tǒng)運行單元。它對上層平臺和下層設備的接口跟上線前完全一致——但底層的物理依賴已經(jīng)被斬斷了。3.3 協(xié)議轉換與虛擬接入點的搭建細節(jié)容器化部署只是第一步。真正的解耦發(fā)生在協(xié)議轉換層。先說最常見的場景老監(jiān)控平臺只支持Modbus TCP從站地址范圍是1到20新設備比如鋰電池BMS只能通過CAN口輸出或者只支持IEC 61850。要打通這兩端傳統(tǒng)做法是給老平臺換通信卡、裝協(xié)議轉換器然后更新點位表。用邊緣網(wǎng)關就簡單得多——在網(wǎng)關上同時啟用Modbus TCP從站模擬器和對應的協(xié)議采集服務。以Modbus TCP從站模擬器為例我們是這樣配置的在網(wǎng)關上啟用Modbus TCP Server模擬老平臺期望的那個從站地址比如站號10。在網(wǎng)關后臺配置點表把新設備采集出來的真實數(shù)據(jù)如總電壓、總電流、SOC映射到Modbus寄存器地址如30001、30002、30003。網(wǎng)關內部的數(shù)據(jù)引擎會以設定好的周期比如1秒輪詢新設備并把最新數(shù)據(jù)緩存到寄存器表里。老平臺按照原來的邏輯去讀站號10的30001寄存器讀到的其實是網(wǎng)關從新設備那邊拿來的最新值。這里有一個細節(jié)直接關系到現(xiàn)場聯(lián)調能不能順利通過老平臺往往會對“數(shù)據(jù)新鮮度”做校驗比如它判斷一個遙測點是否有效的依據(jù)是“最近5秒內有沒有被刷新過”。如果網(wǎng)關只在輪詢到新數(shù)據(jù)后才更新寄存器某些老平臺會誤判數(shù)據(jù)超時。我們的做法是在網(wǎng)關里把Modbus從站的寄存器表設置為“始終可讀”即使底層設備短暫離線網(wǎng)關也返回上一次有效值同時通過一個專門的狀態(tài)點告訴上層“這條數(shù)據(jù)是緩存”。這樣就避免了一些因為數(shù)據(jù)有效標志位處理不當導致的“全灰”事故。這個環(huán)節(jié)的工程量往往取決于協(xié)議轉換的種類有多少種。我們做過的項目里最多的一種場景是一個儲能集裝箱項目需要同時做Modbus RTU轉Modbus TCP、CAN轉Modbus TCP、IEC 61850轉MQTT還要把老平臺的私有協(xié)議報文轉成標準JSON。在傳統(tǒng)架構里這需要掛三到四個協(xié)議轉換盒子現(xiàn)場光接線和調試就要一周上了邊緣網(wǎng)關后同一臺設備上同時運行三個協(xié)議轉換容器接線從幾十根變成兩三根配置時間也從幾天縮短到半天。3.4 邊緣側數(shù)據(jù)緩存與斷網(wǎng)續(xù)傳的部署策略海外項目最大的不確定性是網(wǎng)絡鏈路。國際鏈路不穩(wěn)定專線價格高公網(wǎng)更是經(jīng)常抽風。老系統(tǒng)原本是“通信服務程序連上位機數(shù)據(jù)庫”鏈路一斷所有數(shù)據(jù)就沒了。解耦后邊緣網(wǎng)關把數(shù)據(jù)緩存和續(xù)傳變成一個標準能力。部署時的策略通常是三檔實時數(shù)據(jù)用MQTT QoS 1至少一次上報歷史數(shù)據(jù)落本地時序數(shù)據(jù)庫我們用influxdb輕量版鏈路恢復后按時間戳補傳關鍵遙信變位和告警用HTTP/HTTPS接口直接推送保證即使主鏈路斷了告警也能到。在配置斷網(wǎng)續(xù)傳時有一個關鍵參數(shù)——補傳窗口。補傳數(shù)據(jù)太多會擁堵太少會丟數(shù)據(jù)。我的經(jīng)驗是根據(jù)現(xiàn)場實際數(shù)據(jù)量設置一個合理的補傳窗口一般默認24小時。如果現(xiàn)場歷史數(shù)據(jù)量特別大比如每臺設備每秒上送20個點建議對歷史數(shù)據(jù)做衰減式下采樣——離線期間存儲1秒原始數(shù)據(jù)但補傳時只補1分鐘均值。這樣既保證連續(xù)完整又不會直接把海外云平臺的帶寬打滿。4. 硬件測試與解耦驗證不能只在跑通時歡呼4.1 解耦后為什么要重新設計測試方案很多團隊以為解耦完就高枕無憂了然而真正的坑往往出現(xiàn)在硬件測試階段。解耦前你測試的對象是“一套軟硬件綁定的系統(tǒng)”解耦后你測試的對象變成了“多個可獨立替換的組件”這意味著測試邏輯要做相應變化。比如原來測一個通信鏈路你只要把工控機和設備連起來跑一下就行。解耦后通信鏈路變成了設備→采集服務→協(xié)議轉換→消息中間件→上層平臺。鏈路變長了故障定位的復雜度上去了如果沒有針對性的解耦測試方法你連“問題出在哪一層”都沒法快速判斷。尤其是出海項目的硬件測試還疊加了額外要求設備要在國內工廠做整機出廠驗證同時在海外現(xiàn)場做二次驗收。兩個場景的環(huán)境變量網(wǎng)絡、電源、溫濕度不同如果測試方案沒有把解耦后的各層拆開驗證很容易出現(xiàn)“國內過了、海外掛了”的經(jīng)典翻車。4.2 三種實用的硬件測試解耦方法既然標題里的熱搜詞提到了“硬件測試時候解耦的方法有哪些”我專門把三種我自己常用且經(jīng)過驗證的方法介紹一下。方法一協(xié)議樁Protocol Stub。在網(wǎng)關的測試環(huán)境里用一個模擬程序充當設備側循環(huán)發(fā)送固定的Modbus報文。它的作用是驗證網(wǎng)關的上層輸出是否符合預期不受真實設備干擾。我在項目里一般用Python寫一個簡單的Modbus TCP服務器監(jiān)聽502端口內存里維護一張寄存器表測試時用腳本隨機改變某些寄存器值。網(wǎng)關采集到數(shù)據(jù)后上層平臺應該能看到對應的變化。這個樁的價值在于你可以精確控制“設備側發(fā)生了什么”便于驗證異常流程——比如寄存器超時、返回錯誤碼、重啟重連等。方法二回放Replay。把現(xiàn)場抓包保存的真實設備日志通常是Modbus/TCP dump在測試環(huán)境里回放讓網(wǎng)關以為自己還在跟真設備通信?;胤艤y試的價值在于它能暴露用“理想化模擬數(shù)據(jù)”發(fā)現(xiàn)不了的問題——比如真實場景里的亞穩(wěn)態(tài)響應、超時抖動、偶發(fā)被動幀。我們項目里有幾次疑難故障都是靠回放現(xiàn)場抓包文件才在實驗室里復現(xiàn)的。做回放測試時有個小技巧不要把抓包原封不動地循環(huán)發(fā)而是人為改變報文的時序間隔比如把一些響應延遲拉長幾倍這樣更容易暴露網(wǎng)關的超時重試邏輯是否健壯。方法三故障注入Fault Injection。在測試過程中主動模擬各種真實故障拔掉網(wǎng)線、斷電重啟、短路串口、給設備發(fā)錯誤響應碼。目的很直接——驗證解耦后系統(tǒng)是否真的能“隔離故障”。因為解耦的一個重要目標是故障爆炸半徑受限某一條鏈路斷了其他鏈路不受影響。做故障注入測試時我通常是在網(wǎng)關里跑一只小腳本定時隨機下游接口發(fā)送錯誤幀同時觀察報警和上報鏈路是否正常。記住故障注入測試要留足時間窗口一般每輪至少保證30分鐘以上因為有些故障是延時暴露的比如內存泄漏引起的緩慢惡化跑一兩分鐘根本發(fā)現(xiàn)不了。4.3 性能冗余怎么留CPU、內存、時延的“六成“原則解耦后的邊緣網(wǎng)關承擔的任務通常比原來一臺普通工控機要多很多——既要跑容器化的遺留服務又要做協(xié)議轉換還要做本地緩存和遠程上報。很多項目上線一段時間后才發(fā)現(xiàn)性能不夠再改架構就非常被動了。我的經(jīng)驗是用“六成”原則提前把冗余留出來網(wǎng)關的CPU負載在日常運行峰值不應超過60%內存占用不應超過物理內存的60%協(xié)議轉換和上報的端到端時延從設備數(shù)據(jù)刷新到上層平臺收到數(shù)據(jù)不應超過60%的接口超時閾值。舉個例子如果上層平臺的輪詢超時時間設定為5秒那網(wǎng)關從“采集到設備數(shù)據(jù)”到“把數(shù)據(jù)推送到上層平臺”的時延就必須控制在3秒以內這3秒就是你的預算。如果實測時延接近4秒接下來就要從三個方向排查優(yōu)化一是消息中間件的隊列大小和消費速率二是協(xié)議轉換線程的并發(fā)度三是上層平臺側的輪詢周期是否過于激進。這三個方向里我見過的案列中最多的問題是“上層平臺去讀網(wǎng)關的一個從站時用了阻塞式同步調用”一旦底層設備響應慢整個平臺就卡。這種情況下通常建議把上層平臺的讀取邏輯改成異步輪詢或者啟用網(wǎng)關的本地緩存加速。5. 常見問題與排查技巧實錄5.1 頻繁掉線、暫時性超時、數(shù)據(jù)跳變怎么定界解耦架構上線后最常見的排障場景是“數(shù)據(jù)時好時壞”。我們歸納過這類問題的本質往往不是“解耦”本身引起的而是解耦后“故障邊界”更清晰了反而更容易定位。先說“頻繁掉線”。如果發(fā)現(xiàn)某臺設備在網(wǎng)關里反復離線優(yōu)先排查物理鏈路用萬用表量串口電平是否正常、RS485的A/B線是否接反、終端電阻是否匹配。如果是海外遠程項目沒法現(xiàn)場量就直接看網(wǎng)關的串口統(tǒng)計日志——如果收幀錯誤率持續(xù)走高大概率物理層不穩(wěn)而不是軟件問題。再說“暫時性超時”。如果在平臺側看到偶發(fā)的讀取超時很多時候是網(wǎng)關內消息隊列擁堵導致的。我先看隊列積壓數(shù)如果積壓超過某個閾值就增大采集線程和上報線程之間的緩沖隊列深度同時降低采集頻率。記住用邊緣網(wǎng)關做解耦后你永遠要留一個“背壓”處理機制底層采集慢不要緊但不能讓上層平臺一直等。所以配置里會為每個數(shù)據(jù)點設置一個“過期時間”超出時限就返回最后一次有效值并在狀態(tài)點里標注為“Stale”。還有“數(shù)據(jù)跳變”。多半是點位映射和縮放系數(shù)配錯了。Modbus的數(shù)據(jù)類型分16位、32位、浮點、大小端、縮放系數(shù)這些只要錯一個數(shù)據(jù)就會邏輯異常。遇到跳變問題我第一件事是去查網(wǎng)關的點位配置重點看“字序”word order和“字節(jié)序”byte order。業(yè)內Modbus常見的坑就是同一個寄存器表設備廠家用的大端你按小端解析就會看到數(shù)值無規(guī)律跳來跳去。5.2 現(xiàn)場快速診斷的兩個小習慣解耦后的架構在海外項目調試時有兩個小習慣能幫你省下大量時間。第一所有邊緣網(wǎng)關要有統(tǒng)一、可見的運行狀態(tài)可視化頁面。這個頁面不用很復雜但必須能同時看到三層狀態(tài)底層設備鏈路狀態(tài)在線/離線/延遲、中間層容器運行狀態(tài)健康/已停止/重啟了幾次、上層數(shù)據(jù)上送狀態(tài)最后一條數(shù)據(jù)是什么時候發(fā)出的、目標地址是否可達。有了這個頁面現(xiàn)場人員排查問題時不需要猜直接一屏全覽。第二保留一份完整的“配置基線”。每次修改點位、切換協(xié)議、升級容器鏡像之前給網(wǎng)關導出一份完整的配置文件JSON/xml/yaml均可一般我們直接支持從Web界面導出一鍵備份包。這個備份包的好處是萬一這次改動導致問題你可以直接一鍵恢復到改動前的狀態(tài)而不是在現(xiàn)場一行行地撤回配置。別小看這個習慣海外項目的現(xiàn)場工程師本來就很緊張少幾次誤操作就少幾次精神損耗。5.3 遺留系統(tǒng)本身“不配合”時網(wǎng)關的三種兜底手段萬一遇到的遺留系統(tǒng)特別頑固既不讓改代碼也不讓裝軟件甚至不愿意對外暴露任何協(xié)議的細節(jié)此時網(wǎng)關還能靠以下手段兜底抓包解析在遺留系統(tǒng)和原設備之間做網(wǎng)口鏡像或串口監(jiān)聽網(wǎng)關被動監(jiān)聽鏈路里的報文用解析器把協(xié)議逆向出來。這個手段我用了很多次幾乎市面上常見的Modbus、DL/T 645、IEC 60870-5-104單體設備都能在監(jiān)聽模式下提取出點位表和刷新周期。模擬從站如果遺留系統(tǒng)本身是“主站”它要主動去輪詢下面設備我們可以讓網(wǎng)關模擬成它期望看到的那個“從站”設備用固定寄存器地址回應它的輪詢。遺留系統(tǒng)并不知道自己在跟網(wǎng)關對話還以為底下連的是原來的設備。屏幕采集實在沒招時如果老系統(tǒng)有一個可視化界面比如顯示實時數(shù)據(jù)的HMI可以用網(wǎng)關的HDMI采集模塊把屏幕內容抓下來通過OCR識別成結構化數(shù)據(jù)后上報。這是最“暴力”的一種方式但我確實在一臺2005年出廠的老監(jiān)控系統(tǒng)上用過這招成功把它的發(fā)電量數(shù)據(jù)接入了新平臺。這三種手段的核心思路是一致的解耦不是說必須得到對面配合才能改而是通過邊緣側的主動適配把對方的“黑盒”特性消化在網(wǎng)關層。6. 踩坑心得與我的幾點總結方案講到這里我想分享幾個在實際項目中反復被驗證過的心得也是我現(xiàn)在拿到一個新出海項目時會優(yōu)先做的三件事。第一別急著動代碼。先搞清楚對端系統(tǒng)的“最小可行適配面”是什么。很多看起來復雜的問題用網(wǎng)關的協(xié)議轉換和配置能力就能解決代碼一層不變。這個“先想清楚接口再想實現(xiàn)”的習慣能幫項目省掉至少一周的返工時間。我在后面的項目里都是先讓商務去跟客戶要遺留系統(tǒng)的接口協(xié)議文檔和點位表而不是要源代碼。拿不到接口協(xié)議時才啟動抓包和逆向。這比盲目承諾“我們兼容一切”靠譜得多。第二解耦不是一次性的。解耦是一個持續(xù)演進的過程項目初期先把最痛的地方解掉后面隨著規(guī)模擴大再逐步把新的子系統(tǒng)通過網(wǎng)關接進來。很多團隊把解耦理解成一個“T-1日大切換”結果現(xiàn)場出問題就全線回滾。真正穩(wěn)妥的做法是“漸進式替換”先讓網(wǎng)關旁路監(jiān)聽老系統(tǒng)鏈路同時把新系統(tǒng)接入網(wǎng)關兩邊并行跑一段時間確認數(shù)據(jù)一致后再切換主鏈路。這就像給飛機換發(fā)動機你不能讓飛機停下來你要一臺一臺地換換完一臺測試一臺。第三我自己的體會是邊緣網(wǎng)關更適合作為“數(shù)據(jù)底座”而不是“業(yè)務系統(tǒng)”。有些客戶總想把業(yè)務邏輯比如告警聯(lián)動規(guī)則、設備控制策略也塞進網(wǎng)關里跑結果網(wǎng)關變得越來越重性能和穩(wěn)定性都受影響。在我建議的方案里網(wǎng)關只做“協(xié)議的終結者”和“數(shù)據(jù)的搬運工”真正的業(yè)務判斷放在上層平臺網(wǎng)關側最多做輕量級的邊緣計算比如越限判斷、數(shù)據(jù)過濾不做復雜的業(yè)務編排。保持底層網(wǎng)關的“純粹”是讓整個系統(tǒng)長期穩(wěn)定的一個好習慣。最后再分享一個小技巧。你在給海外客戶配置頂部標題時別把網(wǎng)關默認的MODBUS服務名寫得太技術化。我們有個客戶要求網(wǎng)關在Modbus從站信息里顯示“GateWay Unit For Battery Storage”這樣老平臺接入時看到的是個語義化名稱而不是一串亂碼。細節(jié)上對方會覺得你們團隊非??孔V后續(xù)驗收也能少很多解釋成本。這些經(jīng)驗都是一個個海外現(xiàn)場熬出來的。裝備出海本質上是把標準寫進行業(yè)規(guī)則里而不是去遷就老系統(tǒng)的壞脾氣。邊緣網(wǎng)關只是一個抄近道的工具真正的功夫在于你如何設計出那一條條解耦的“護城河”。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
影音先锋AV资源男人站| 亚洲V国产V欧美V久久久久久| 久久精品噜噜噜成人A∨色欲| 91一起艹| 久久久国产精品黄毛片| 五月天激情开心网| 非洲一级AV| 欧美色频| 99热久久最新地址| 日产精品久久久久久久蜜臀| 丁香婷婷性久久| 五月天另类图片区99| 激情五月天开心| 久热久操久热久草国产91| 狠狠狠狠狠狠| 亚洲无码成人性爰网| 99网址在线观看| 伊人五月天婷婷| 色婷婷久久视屏| 97性视频| 丁香涩涩五月天| 色五月天 丁香| 色色色网站| 欧洲综合视频| 色五月大香蕉婷婷| 久操香蕉| 中文字幕无码人妻少妇免费视频| 五月综合视频| 色性五月天| 久久99精品久久久久久噜噜| 午夜激情四射影院| 免费看欧美成人A片无码| 色婷婷小说| 99re热精品在线视频| 五月婷婷六月丁香综合| WWW,激情五月天,COM| 91青娱乐青青草| 丁香五月婷婷色偷偷| 国产成人综合网| 精品一二三区视频立| 4438全国最大视频成人网站在线观看| 最近中文字幕2019视频1| 婷婷五月天久久久| 色99视频| 久久九色| 亚欧州精品视频| 丁香五月激动深爱欧美| 99超级碰碰| 玖玖综合色| 亚洲欧洲美女在线观| 久久精品婷婷| 久久色五月天| 五月丁香六月综合激情无码软件亮点| 亚洲精品久久久久久久久久吃药| 色之综合网| 激情九九六月激情免费视频| 东北黄色一级| 日本欧美999久久久三级片| 这里有精品| 激情五月天婷婷| 五月激情偷拍婷婷| 久久奄也去色色网站| 中文字幕不卡+婷婷五月| 婷婷色五月大香蕉在线| 老美AA片| 婷婷在线日韩综合| 五月婷综合| 激情综合网激情五月天| www.五月天婷婷| 天天做天天爱高潮片| 99在线视频女女视频| 极品人妻VIDEOSSS人妻| 任你草| 欧美日本一区二区三区| 成人网丁香五月| 国产超碰人人| 精品五月花| 欧美午夜乱妇午夜福利| 色天使色综合| 亚洲一区二区无遮挡A片| 日本三级第一页| 国产古装妇女野外A片| 日本色综合| 新精品99| 日本久久人人| 深爱五月天| 婷婷五月天视频| 成人版视频在线观看| 视色综合| 丁香五月色| 六月合五月婷| 色色色色五月天| 久久亚洲无码| 99在线观看精品视频| 色色婷婷五月天| 色婷婷综合久久久久| 天天干天天干天天干| 狠狠色成人影片| 久久丁香五月婷婷| 丁香五月在线播放| 97成人操| 色婷婷久久综合久色综| 国产色丁香| 丁香五月天人体| 亚洲综合色丁香婷婷六月| 加勒比色色| 26UUU精品一区二区c〇m| 久久这里只有国产视频| 在线观看欧美| 激情五月开心五月在线视频| 丁香五月亚洲婷婷| 97资源欧美日韩大香蕉超碰一区| 日本欧美成人片AAAA| 99只有精品9| 五月婷婷精品视频| 激情五月开心五月在线视频| 日韩十国产极品久久| 99亚洲色色| 婷婷丁香五月激情| 午夜精品人妻无码一区二区三区| 九热视频免费观看| 2025中文在线视频字幕免费观看| 九九激情| se色婷婷视频| 无码人妻电影| 五月丁香久久丝袜啪啪| 精品久久人妻| 亚洲天堂大香蕉| 日日操夜夜爽白洁| www.日本91| 久久九九综合| 色婷婷88| 丁香五月婷婷激情中文| 狠狠综合网| 999热这里只有美国精品| 婷婷五月丁香超碰| 久久黄色片| 婷婷丁香人妻天天爽| 五月美女婷婷风骚| 中文无码精品一区二区三区| 五月丁香五月综合欧美| 色婷婷色情| 五月丁香av在线| 超碰99热精品| 中文成人在线| 天天爱天天做天天爽| 欧美久久网| 九九婷婷激情综合网| 激情图片婷婷| 伊人玖玖网| 成人亚洲精品久久久久| 天天舔夜夜操www com| 久草热在线视频| 91一起操| 久久ER视频com| 激情深爱五月天| 狠狠精品干练久久久无码中文字幕| www.99热精品| 综合久久99| 日日操夜夜擼| 亚洲色精彩| 高清无码入口| 天综合日日夜综合7799| 中文字幕婷婷五月天在线观看| 79精品视频在线观看,| 九九综合五月欧美| 婷婷五月丁香香蕉| 91天堂网综合| 婷婷激情人妻| 色狠狠婷婷| 国产视频久色| 影音先锋女人AA鲁色资源| www.日韩国产| 99爱视频在线观看这里只有精品| www.超碰| 天天插天天射| 久99久热只有精品国产99| 亚洲综合在线视频| 99这里只有精品国产| 超碰在线看| 五月婷婷影| 九九在线精点品| 婷婷五月天激情四射| 久久久五月五丁香| 亚洲操人| 天天噜天天爱| 天天日P天天射P| www,五月丁,com| 天天干天天做| 夜丁香五月婷婷| 国内自拍97在线| 久久伊人日日夜夜| 视频一区二区在线| 色欲婷婷五月天丁香| 亚洲另类毛片| 亚洲无码色色| 丁香五月色情| 玖玖婷婷色五月| 99视频激情四射| 99久精品视频| 国产人妻人伦精品一区二区| 激情五月婷在线精品| 好叼操在线观看| 色人妻五月| 九九热内射| 五月开心激情| 狠狠色噜噜狠狠色噜噜噜999| 天天插综合网| 婷婷五月天在线观看免费| 大香蕉懂9| 玖玖婷婷色五月| 91精产品自偷自偷综合| 色五月五月婷婷| 琪琪理论片| 五月丁香本色在线观看| 五月丁香色婷| 国产在线黄色| 国产精品成人AV在线观看春天| 婷婷五月丁香五月天| 香蕉久日夜| 五月丁香五月婷婷| 五月激情精品视频| 性高潮久久久久久-九九九九九九九九九九热-成人AV | 婷婷天堂伊人| 99久久激情视频| 婷婷丁香色五月天久久88| 国产真人做爰视频免费| 色5月婷婷色| 亚洲天堂亚洲色色色| 97色精品视频 | 最熟少妇乱码| 九九综合| 亚洲成人噜噜| 情婷婷五月天在线| 狠狠狠狠狠狠色| 丁香五月天啪啪| 天天草比天天爽| 亚洲美女高潮久久久久久69| 爆乳熟女-区二区三区| 99re视频在线播放| 五月婷婷激情久久| 囯产精品一品二区三区| 丁香婷婷五月天校园春色| 欧美偷偷操| 91无码视频| 色婷婷五月亚洲| 婷婷天堂综合| 色五月婷婷五月天激情综合| 99只有精品9| 五月丁香久久久久| 天天做天天爽| 狠狠干夜夜干| 日韩AV大全| 99九九热在线观看| Xx色综合| 五月色婷婷影院| 丁香婷婷AV| 久久a热| 色色综合网络| 天天色天天色天天色天天色天天色| 99超级碰免费视频| 婷婷久久亚洲| 亚洲99综合| 超碰人人妻| 日本三级中国三级99人妇网站| 欧美丁香五月| 日本熟女二区| 婷婷色正月| 激情丰满熟妇五月| 亚洲十月婷婷综合| 丁香五月大片| 丁香月五月天婷婷久久| 激情综合网激情五月天| av在线免费网站| 先锋影音男人的天堂AV| 婷婷五月色播天| av国产精品| 色色丁香| 婷婷久热| 欧美日韩二区在线| 亚洲182在线观看| 99精品偷自拍| 伊人丁香五月天丁香在线婷| 97碰碰免费.视频| 久久性视频| 久热九九| 人妻丰满精品一区二区A片| 欧美丁香婷婷五月| 麻豆AV一区二区三区| 色婷婷狠狠| www.夜夜| 丁香五月综合狠狠| 91好好热日本在线| 午夜婷婷丁香| 激情综合网之激情五月| 五月婷婷五月天亚洲无码| 99视频这里只有久久精品| 婷婷激情蜜桃玖玖丁香| 五月开心深深爱激情综合| AV国产有码| 欧美va欧美va差| 性天天中文网| 操日视频| 99精彩视频| 曰韩少妇内射免费播放| 成人网站高清无码| 99精品热视频只有精品10| 快乐婷婷五月天| 开心激情色婷婷五月天| 六月 丁香 视频| 激情五月丁香亭亭| 久久这里只有欧美| 黄色三级日本| 丁香五月欧美午夜视频| 九九综合色| 婷婷五月天激情网| aV欲望人妻中文字幕| 99热综合在线| 久久九九99字幕| 婷婷五月花西瓜| 五月天另类激情在线| 国产激情AV| 天天爱天天操| 五月天丁香花婷婷| 翔田千里aV中文字幕| 色五月视频,小说| 激情五月天婷婷| 久久久久9999| 99久热在线精品99re6热| 99久久久久久www| 久久丁香五月综合六月激情红杏视频| 九九色热视频| 亚洲免费看片| 超碰99热精品| 丁香花五月天激情| 99亚洲日韩| www.91操| 日本全黄一级999| 丁香婷婷五月激情| 婷婷基地成人五月天| 六月天六月婷| 色五月播五月| 久七香蕉| 99色爱| 亚洲综合色棒| 色婷婷五月综合| 99成人| 亚洲成人无码片| 色色热99| 久久伦乱| www:99热视频| 深爱激情av| 超碰超碰在线| 国产av影片| 激情综合另类| 亚洲妇女熟BBW| 影音先锋毛片网站| ji'qing'luan'ren'lun| 97av在线视频| 中文字幕,综合,91| 亚洲综合丁香婷婷六月天| 91碰在线| 色婷婷国产精品综合在线观看| 丁香五月大片| 99色视频| 婷婷丁香六月影视| 久久99性爱| 成人精品在线| 天堂婷婷五月在线| 99爱视频免费| 婷婷丁香97| 婷婷激情六月| 亚洲AV无码一区二| 五月丁香婷婷深深爱| 国产精品天天狠天天看| 久久婷婷丁香五月一二三| 婷婷五月天影院| 激情久久月| 色五月综合婷婷| 天天插天天插| 激情综合色婷婷啪啪五月天| 999激情视频| 五月天色婷好好| 婷婷五月情天| 日本丰满久久| 天天成人综合视频| 婷婷视频网| 久久精品噜噜噜成人A∨色欲 | 内射人妻视频国内| 丁香六月毛片| 五月丁香久久激情综合| 婷婷.com| 久操97| 婷婷五月天视频亚洲| 91九色白丝| 99精品7| 久久精品国产AV一区二区三区 | 99色视频在线观看| 色婷婷色综合久久精品V| 草婷婷在线| 色在线免费观看| 色五月婷婷视频| 人与禽A片啪啪| 第四色婷婷色五月| 蜜臀99久久精品久久久久| 亚洲成人噜噜| 久久婷婷色综合| 亚洲欧美婷婷五月色综合| 婷婷九九| 久久婷婷综| 久久久免费精彩视频| 五月婷婷基地| 国产AV影片| 亚洲色A| 日本人妻久久| 亚洲色久| 人人爱天天摸摸天天爱| 人人摸人人干| 五月丁香啪啪综合网| 亚洲AV成人无码精品| 天堂AV在线看| 精品久久9| 99re8这里只有精品99re8热视频| 大香蕉院线| 欧美三级大片AA在线看| 丁香五月婷婷啪啪| 五月丁香婷婷久久| 人五月天婷婷喷水| 九九综合| 亚洲色综合性| 久99视频| 91九九热| 六月丁香网| 婷婷射图五月天| 超碰国产av| 九九色热| 国产avapp 网| 99爱免费在线视频| 免费黄色视频网址| 97在线日本| 婷婷五月天丁香| 色五月六月婷婷| 久久婷婷国产| 亚洲区1| 激情五月婷婷| 色五月婷婷五月| 久久久久五月丁香| 久久综合久色欧美综合狠狠| 成人五月天丁香| 就爱操www com| 亚洲视频无| 丁香婷婷久久| 五月婷婷人妻| 久色视频首页| 天天操无码| 五月婷婷久久综合| 色综合久久88色综合天天99| 97五月天| 91丨九色丨丰满人妖| 森林影视大全,最好看的2019年视频 | 狠狠干2007| 97碰碰在线看视频免费| 少妇真实被内射视频三四区| 伊人激情啪啪| 色五月丁香五月天| 开心五月综合激情综合五月| 婷婷欧美偷拍综合| 狠狠爱综合| 日韩三级视频一区二区| www婷婷色| 激情小说婷婷| 五月色婷婷综合| 婷婷激情小说| 都市激情五月婷婷亚洲| 亚洲婷婷基地| 人人性久久| 五六月婷婷久久| 成人免费120分钟啪啪| 另类激情五月| 丁香五月综合亚洲| 久久九九大香蕉电院| 在线,国产,色,热视频| 苗黎美女四级成人版一级二级毛片| 激情综合网五月婷婷| 99热这里只有精品4| 日本成人噜噜| 五月激情婷婷图片基地| 亚洲国产婷婷色五月| 超碰在线综合| 激情综合99| 亚洲最大成人综合网720P| 天天色播| 丁香九月婷婷| 免费视频WWW在线观看网站| 色丁香五月| 成人av免费观看| 九九九九综合| 嫩草AV久久伊人妇女超级A| 中国女人做爰A片| 99ri6在线视频| 九艹在线| 色深爱五月| 新激情五月天天在线网| oVV4WIB3vFi8D| 俺五月| 狠狠色综合777| 狠狠色狠狠鲁| 五月天色婷婷伊人网| 五月婷婷在线观看| 亚洲成人五月| 丁香五月婷婷啪| 色5月婷婷色| 亚洲精品视频在线播放| 五月天大香蕉| www.91热久久| 狠狠综合区| 日韩无码人妻一区二区| AV在线免费播放| 久久综合婷婷| 婷婷成人丁香色情基地30 | 五月天丁香久久综合| 色色色9 9 9| 99久久久国产大片区| 五月宗合激情网| 超碰人人草| 久操乱| 啪啪99| 国产精品色一哟哟| 婷婷五月天在线观看| 超碰成人影视| 色情五月天se| 婷婷五月天综合网| 九九综合色综合| 色五月婷婷久久大| 99热国产| 97碰超级人人看| 激情小说 五月天| 狠狠色丁香| 99久久精品国产色欲| 婷婷丁香五月激情中文字幕版| 99热免费| 一本狠婷婷综合| 九九免费精品在线视频| www.99热视频| 九九热啪啪| 婷婷六月五月天综合| 精品人妻伦一二三区久久| WWW·色色色·COM| 天天干天天干天天干天天干天| 97精品综合久久| 久操福利| 久久女人九九| 亚洲五月天综合| WWW久久久| 色婷婷偷拍| 综合色五月| 人妻无码视频网| 婷婷激情五月天7| 欧美久久婷婷| 97视频91| 久久激情五月婷婷| 日本97在线视频| 天天操比比| 中文字幕成人日韩| 天天日综合| 九九中文色色| 夜夜夜夜撸夜夜操| 成人在线视频男人的天堂4399| 狠狠五月天婷婷激情网。| 中文字幕日产A片在线看| 激情深爱综合| 亚洲乱码日产精品BD| 五月丁香激情片| 色噜噜狠狠色综无码久久合欧美| 色噜噜狠狠色综合AV兰草影视| 91美女被操| 熟女激情网| 丁香五月综合婷婷| 婷婷视频网| 久久久中文| 激情综合啪啪啪| 丁香婷婷六月| 五月情综合| 95精品区一区二| 婷婷五月天干干| 6 9式性爱视频在线播放| 激情五婷网| 欧美日韩中国| www.久久久.com| 婷婷五月色| 99九九精品| 丁香五月人妻熟女| 9热久久| 激情五月天啪啪| 日本啪啪天堂| 国产做爰视频免费播放| 婷婷五月天BBw| 激情婷婷九月| 五月婷婷六月色| 26uuu激情五月天| Caoporn公开| 丁香婷婷91在线观看视频| 激情丁香婷婷六月天| 99热这里有精品| dingxiangtingtingliuyue| 激情五月天色婷婷综合| 久久综合激情| 这里只有精品免费视频| 性爱综合网| 日韩AV无码影片| 五月天婷婷激情在线色图| 在线视频另类| 五月丁香六月片| 婷婷五月天成人网| 人妻内射麻豆视频| 五月天之色情综合网| 99热免费精品| 九九热这里只有精品在线观看| www999日韩精品| 99国产精品白浆在线观看免费| 九九性视频| 日韩啪啪视频| Www.Av网9| 99热这里只有精品在线| 婷婷五月天电影区小说区| 精品乱码视频| 丁香花婷婷五月天| 麻豆AV一区二区三区| 婷婷色操| 夜夜做夜夜愛| 亚洲色色在线| 最新av在线观看| 五月天婷婷丁香成人网| 天天色视频| 欧美Va日本Va| 这里只有国产精品在线| 99久久婷婷国产综合精品草原| 91久久网站| 天天插天天爽| 久久婷婷内射| 婷婷五月激情在线视频| 狠狠操天天操综合| 97碰碰人人| 九九精品少妇| 深夜婷婷 丁香| 五月天婷婷视频| 婷婷五月天视频亚洲| 色五月婷婷视频| 丁香五月婷婷色| 伊人9在线| 天堂久久久久天堂网| 婷婷丁香六月天| 91九色熟女| 综合网亚洲| 五月之婷婷| 六月米奇色综合| 婷婷99视频精品| 爱婷婷久久视频| 噜一噜免费视频| 色伊人婷婷| 在线视频激情网站| 五月天婷婷亚洲| 九九热9| 国产亚洲精品久久久久久郑州| 五月激情综合网| 婷婷五月天视频| 亚洲第79页| 丁香五月六月激情久久| 丁香六月无码| 色丁香六月| 中文国产五月天| 丁香婷婷六月激情综合| 六月婷色六月| 战争与艾拉电影免费观看| 五月永久激情| 先锋av性爱成人电影| 婷婷五月天99| 狠狠干思思热| 婷婷色基地| 丁香五月激情啪啪| 五月婷婷亚洲色视频| 5月婷婷6月六月丁香| 天天天操天天天日| 亚州操人在线视频| 激情五月天偷拍综合网| 欧美色性色好| 九九这里都是精品| 日本激情五月| 97超碰色| 三级黄网站| 思思久久精品| 欧美性猛交99久久久久99按摩| 91碰碰碰| 老美AA片| www.玖玖婷婷在线| 日本色天堂| 99热这里都是精品| 色综合爱综合| 九九热国产| 丁香 亚洲 久久| 色婷婷丁香| 天天天天操| 大香蕉 婷婷| 五月天堂色色| 秋霞免费三级片| 六月丁香婷婷天堂| 五月丁香五月婷婷| 亚洲第一第二网站| 丁香五月狠狠在线观看| 密乳Va| 玖玖在线视频福利| 99热精地址| 9久热在线视频精品| 伊人色综合网| 色开心五月婷婷丁香HD| 五月丁香91| 日本婷婷网| 天天天久久人人人合| 丁香九月久久| 久久婷综| 丁香婷五月天| 播五月开心婷婷欧美综合| 四色五月婷婷| 91精品视频男人的天堂| 婷婷五月亚洲激情| 激情五月天婷婷丁香| 日韩啊啊啊| wwww.9免费视频| 天天日天天添| 婷婷丁香18| 免费看欧美成人A片无码| 久久丁香九| 5月色婷婷| 欧美Va日本Va| 成人精品视频99在线观看免费| www.婷婷,com| 九九色热视频| 五月丁香激情综合网| 99久久.www| 五月丁香六月婷婷色| 激情六月丁香| 综合九色| 国产精品蜜臀99| 丁香桃色网| 婷婷五月丁香色播| 丁香五月第四色88| 色婷婷电影网| 超碰在线人妻| 99精品视频在线观看| 99国产在线精品视频| 91精品久久久久久| 操逼巨乳91| 色色热日| 伊人丁香花综合影院| 丁香五月天激情综合| 激情文学第四色婷婷丁香五月| 丁香色五月婷婷91桃色| 五月丁香六月婷| 99re99在线看| 在线看片av| 麻豆精品| 亚洲99热| 五月天婷婷色综合| 婷婷娱乐丁香综合网| 年轻的妺妺伦理HD中文| 五月色婷婷综合色| 99热这里只有精品1| 五月天堂婷婷| 五月丁香六月激情综合| 激情五月综合第一页| 婷婷五月天免费视频| 久久加勤综合| 天天草天天日| 五月丁香婷婷钟和色图| 先锋av性爱成人电影| 99精品成人无码A片观看金桔| 婷婷八月激情| 色综合五月天| 五月丁香日本在线视频观看| 激情综合五| 丁香综合婷婷开心激情网| 香蕉综合网| 五月丁香亚洲校园欧美| 99热精品免费| 日韩人妻无码一区二区| 成人做爰A片免费看视频| 五月婷婷六月丁香综合视频在线| 五月天丁香综合| 97干网站| 色情性爱视频网址| 成人做爰高潮A片免费视频| 天天插天天插天天日| 五月婷婷色| 99热这里只有精品13| 超碰在线日夜| 深爱婷婷丁香五月激情| 丁香五月综合久久| 在线观看的av| 高清无码.com| 亚洲妇女熟BBW| 色区域网站视频| 六月婷婷日| 日本天天色| 久久久激情视频| 天天射影院| 日日噜狠狠色综合久久| 夜夜AVV| 国产免费一区二区三州老师F1F1| 五月丁香激情综合网| 99ri在线视频| 中文不卡一二区| 久99精品视频| 爽极品色| 99精品偷自拍| 色色网站日本91| 亚洲久热| 婷婷丁香五月激情中文字幕版| 成人做爰A片免费看视频| 狠狠色综合五月| 日韩在线成人电影| 99精品视频免费观看| 在线色五月婷婷| 免费观看2018www黄色操逼网站| 日韩精品一品二区三区的使用体验| 五月丁香综合啪啪| 逼特逼在线免费播放| 天天干电影| 9er热在线精品视频| 婷婷综合中文字幕| 五月婷婷色影院| 天天综合五月| 欧美激情综合色综合啪啪五月| 色色婷婷丁香| 泰州成人视频| 亚洲色色在线| 99碰在线视频| 99精品视频在线观看| 99热精品在这里| 国产亚洲色婷婷99精品| 天堂久久大香蕉| 色婷婷久久| 婷婷性福五月天| 亚洲婷婷月丁香五月| 丁香五月黄色| 99国产精品久久久久久久久久久| 五月丁香色婷婷| 99热99思午夜精品| 高清成人综合| 色五月综合激情网| 丁香六月婷婷色XXXXX| 激情五月色在线播放| 六月99天天婷婷激情综合| 午夜九九九九九九| 国产SUV精品一区二区883| 丁香五月欧美激情| 深爱婷婷丁香五月激情| 五月天六月天| 碰碰91| 亚洲a片免费观看| 日本精品久久久久中文字幕| 婷婷五月丁香综合激情| 婷婷五月激情视频| 日本精品。999| 久久HD| 亚洲蜜乳AV| 亚洲第一成人无码A片| 天天肏夜夜肏| 五月婷婷日| 丁香五月色欲| 色五月视频无码播放| 日本精品在线噜噜噜| 日日操夜夜操无码免费| 亚洲不卡123| 色欧美色色色| 狠狠精品干练久久久无码中文字幕| 色五月激情| 婷婷色婷婷| 99热这里只有精品22| 五月丁花色综合网| 五月丁香六月婷婷不卡免费无码 | 天天肏天天肏天天肏| 五月情婷婷| 五月天电影网| 99精品在| 蜜乳.comcom| WWW·天天操·视频?| 亚洲激情av| 国产精品久久..4399| 色域五月婷婷丁香| 欧美激情综合色综合啪啪五月| 久久久A级视频| yiqicaoav| 日韩啪啪自拍| 色97啪啪| 五月婷婷综合性爱噜噜| 成人色图情色成人网 www.5b5b5bcom 五月天 | 99日韩| 99在线视频资源| 国产成人在线精品| 五月婷婷亚洲色图| 色婷婷成人久久| 色婷婷人人| 伊人大香蕉综合在线| 婷婷色综合中心站| 色射7856五月天激情四射| 超碰京东热av男人的天堂| 一级性感毛片| 五月天天综合| 91精品国产91久久久久青草| 成人AV免费观看| 久热伊人| 人妻内射麻豆视频| 婷婷色播综合五月| va亚洲中文在线| 色综合色色色| 乱码操操| 91九色精品熟女内射| 日本乱子人伦在线视频| 色五月噜噜| 熟女啪啪视频| 狠狠干婷婷| 色婷婷丁香五月高清在线| 六月丁香婷婷色69| 五月婷综合| 激情综合久久| 中文字幕日产A片在线看| 久久久高清| 996精品热视频| 天天做天天爱天天搞| 天天干狠狠操| 99热6色| 欧美久久网| 婷婷五月综合激情| AV中文字幕夜夜操b天天摸bb | 伊人激情网| 五月丁香操婷逼| 六月色婷婷欧美| 五月婷婷 激情五月| 亚洲六月婷婷| 国产毛片精品一区二区色欲黄A片 国产人妻777人伦精品HD | 日韩高清成人| 五月综亚洲| 五月开心激情| 丁香五月天堂网| 亚洲一区二区色图-亚洲精品国产精品乱码-成人AV | 五月婷婷综合网| 中文字幕人妻一区二区| 91色九| 人妻在线中文字幕久久| 午夜婷婷久久| 丰满人妻妇伦又伦精品国产| 婷婷综合网性| 色亚洲中文| 欧美丁香五月夫妻天| www.99色| av第一二区| 五月天婷婷激情干干| www.激情| 97在线观视频免费观看| 丁香五月激情啪| 久久人妻系列| 久久激情五月| 婷婷五月色花丁香社区| www.25五月婷婷| 丁香五月六月| 狠狠干综合| 色婷婷a v| 天天色激情| 人妻少妇色综合| www色综合亚洲92| 熟女五月天久久综合| 亚洲99综合| 9久9久9久女女女九九九一九| 天天玩天天摸| 婷婷五月天激情小说| 亚洲亚洲人成综合网络| 99久re热| 婷婷丁香五月亚洲综合网在线视频观看| 91欧美| 成人网站av免费网站推荐| 五月天激情久色| 9久精品| 婷婷人人操| 夜夜躁爽日| AV片一区在线观看| 五月情丁香色| 亚洲午夜av| 色五月婷婷1| 这里精品| 亚洲超碰青涩| 九九一综合精品| 六月 丁香 视频| 99热网址| 99热这里只有精品18| 中文字幕乱码亚洲精品一区| 久久婷婷五月综合97色一本| 五月婷婷啪啪网| 9999热在线免费观看| 婷婷五月视屏| 五月天大香蕉婷| 丁香五月色情| 五月婷婷香蕉视频| 天天操天天日天天爽| 狠狠综合| 日日操夜夜爽白洁| 激情网五月天| 亚洲婷婷丁香五月在线| 五月丁香偷拍| 天天射影| 丁香五月综合| 久鲁鲁色网| 91久久婷婷| 99在线爽| 99ER热精品视频| 婷婷六月开心网| 亚洲欧美在线观看| 色五月天网| 啪啪日热| 色婷婷丁香五月综合| 五月天啪啪网| 丁香六月婷婷一区二区三区| 日韩有码一区| 欧美成人色婷婷| 丁香五月123| 在线中文亚洲| 影音先锋色婷婷| 久久久精品色| 精品国产va久| 久久9热好| 婷婷五月天综合中文| 色丁香五月婷婷综合久久| av人人干| 婷婷五月天综合网| 五月婷婷色| 很操日本7| 激情婷婷在线| 婷婷激情人妻| 伊人久久99| 五月丁香影视| 99er视频在线| www91久久| 色综合色色| 欧美天天干五月丁香| 久久月天堂| 激情AV在线| 婷婷欧美色| 97碰碰叉| 亚州操操| 激情播丁香| 无语停婷丁香网| 丁香九九九九| 色婷五月天亚洲| WWW、日本色丁香、co m| 五月天婷婷基地综合网| 丁香婷婷五月激情综合| 丁香啪啪中文字幕| 色综合久久88色综合天天99| 这里只有精品视频国产| 九九久久色| 超碰大香蕉网| 精品99爱免费视频在线观看| 91xxxx九色| 五月丁香综合| 无码色色| 五月丁香婷婷综合| 91狼友视频网页更新| 婷婷欧美综合| 国产精品色色色色| 中文字幕综合| 97热91| 大香蕉伊人99| 六月亭亭久久综合激情| 9久久久久| 秋霞少妇AV网站| 激情四射网| 色五月婷婷天天操夜夜操| 97婷婷狠狠| www.99色在线| 亚洲这里只有精品| 激情五月天电影| 国产夫妻操逼内射视频| 玖玖午夜视频| 色色色香蕉五月婷| 婷婷久久五月天| 丁香五月综合AV在线| 日韩人妻无码一区二区| 丁香五月婷婷综合精品素人| 国产成人精品亚洲线观看| 日本女人久久| 九九色视频| 91精品电影18T| 色情五月天丁香社区| 色五月天婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷 | 99热欲| 99精品视频在线观看| 婷婷久久综| 99爱在线观看视频| 婷婷国产日本欧美| 色情五月综合婷婷| www,色综合| 中文字幕人妻一区二区| 超碰在线91| 一区二区三区视频| 五月婷婷六月天| 激情综合网 激情五月天| 狠狠做六月爱婷婷综合aⅴ| 国产视频福利| 亚洲天堂亚洲色色色| 精品在线网站| 国产偷人妻精品一区| 天天做综合网色综合| 婷五月丁香俺| 欧美大香蕉视频| 啪啪东京热| 婷婷天堂综合网| 日本不卡高字幕在线2019| 777色色色| 高清不卡一区| 丁香婷婷性久久| 色中色综合| 亚洲精品五月| 五月丁香六月婷婷免费视频| 久久性爱视频免费| 深爱女色婷婷丁香五月亚洲图区| 成人婷99最新| 91九色精品| 国产精品色婷婷久久久精品| 成人免费网站免费看| 亚洲欧美成人在线观看| 六月婷婷综合网2| 99在线精品免费视频| 噼里啪啦在线观看免费完整版视频| 伊人在线视频| www.色五月| 99无码视频| 婷婷99| 天天日天天爽| 精品一区二区三区四区五区六区| 91啪啪视频| 99热在线观看| 国产成人一区二区三区在线观看 | 色99免费视频中文| 99热亚洲综合| 丁香狠狠操| 精品亚洲日韩99欧美片| 五月天婷婷激情网| 99久久97久久欧美综合网| 久一网站| 超碰免费人妻| 四色综合网| 99热 免费| 国产性色蜜乳| 婷婷.com| 可以看的av| 欧洲综合视频| 精品色色| 极品人妻VIDEOSSS人妻| ai97re99一本| 男人視頻站| 丁香六月激情| Av狠狠色丁香婷| 99精品视频免费观看,| 色综合色综合网| 五月天成人在线视频网站| 久99视频在线观看| 六月天婷婷| 精品二区| 人人爽欧美婷婷久久久五月丁香| 手机在线日韩视频中文字幕| 丁香成人五月天| 五月丁六月香av| 激情五月综合网最新 | 欧洲色色| 人人操AV| 九九色婷| 9精品视频在线| 狠狠综合| WWW.开心五月天.COM| 狠狠干婷婷| 可以看的AV| 深夜婷婷 丁香| 久久激情五月网| 五月天激情播播网| 婷婷丁香色情| 丁香五月网址| 久久国产一区二区三区| 美欧成人视频| 精品一二三区视频立| 久久亚洲激情五码| 综合激情站| 婷婷丁香六月天激情四射网| 成人在线不卡| 大伊久久| 天天噜日日噜综合无码| 五月天福利影院导航| 五月丁香啪啪综合| 五月天婷婷色小说| 中文字幕av在线| 婷婷丁香激情五月天色色色| 庭庭久久内射| 伊人婷婷五月天av| 99精品久久| 欧美日韩国产成人在线| 亚洲色色色色色色色色色| 婷婷五月天偷拍| 丁香五月婷婷基地| 久久一品区| 激情五月婷婷啪啪| 亚洲永久免费| 日本高清不卡免费一区二区三区| 五月婷婷深深的爱| 国产va视频| 欧美日本韩国亚洲| 婷婷丁香六月| 婷婷丁香五月天激情| 人妻第九页| 99久久婷婷国产综合精品青桔| 99久久玖玖| 免费观看欧美成人AA片爱我多深| 69久久99精品久久久久| 丁香综合网| 伊人五月天| 久久婷婷综合网| 婷婷免费视频| 久久久久久久久久久-久五月天婷婷| 色人久久| 天天日天天舔| 97成人视频| 丁香久久五月天视频在线观看| www.久久久久| av最新在线| 五月天婷婷丁香六月| 国产毛片欧美毛片久久久| 国产91视频| 久久久久久久人妻| www.久久99精品| 久久这里只有精品网| 另类专区在线观看| 五月天色色网站| 综合激情五月婷婷| 91xxxx九色| 色色色色色网站| 影音先锋 萱萱| 开心婷婷五月天电影院| 97人妻碰碰中文无码久热丝袜| caop在线| 欧美大香蕉视频| 91精产品自偷自偷综合| 五月婷婷丁香俺日污视频| 在线精品97| 五月丁香婷庭在线| 亚洲综合五月天婷婷| 五月天色综合服务平台| 日本人妻伦在线中文字幕| 精品无码av丁香五月激情| 热久精品| 欧美噜噜久久久XXX| 久久久这里有精品| 超碰在线人妻| 99热在线播放| 在线播放中文字幕| 婷婷色五月天在线| 99在线观看亚洲| 少妇性按摩无码中文A片| 国产欧美婷婷五月| 超碰在线免费观看日韩|