欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

工業(yè)遺留設(shè)備非侵入式數(shù)采:Modbus/OPC-UA邊緣網(wǎng)關(guān)與斷網(wǎng)自愈實(shí)踐

工業(yè)遺留設(shè)備非侵入式數(shù)采:Modbus/OPC-UA邊緣網(wǎng)關(guān)與斷網(wǎng)自愈實(shí)踐 2021年我接手了一個老車間的數(shù)采項目那是第一次真正意識到“工業(yè)數(shù)據(jù)”這幾個字的重量。車間里有一臺2006年出廠的注塑機(jī)、兩條2009年的裝配線主控是西門子S7-200和臺達(dá)DVP系列通訊口只有RS485串口沒有以太網(wǎng)模塊更談不上OPC-UA。生產(chǎn)經(jīng)理想要設(shè)備OEE、報警記錄和能耗曲線但設(shè)備本身就像個啞巴——數(shù)據(jù)明明在PLC內(nèi)存里跑著卻沒有任何辦法把它拿出來。剛開始我覺得這事簡單不就是用Modbus協(xié)議去讀寄存器嗎真做起來才發(fā)現(xiàn)從“能讀到數(shù)據(jù)”到“穩(wěn)定、可靠、不丟數(shù)地拿到數(shù)據(jù)”中間隔著一整套工程問題輪詢周期怎么定、數(shù)據(jù)怎么壓縮、斷網(wǎng)怎么辦、重啟之后怎么補(bǔ)。這篇文章就把這套“工業(yè)遺留設(shè)備非侵入式數(shù)采架構(gòu)”完整講一遍重點(diǎn)落在三個技術(shù)點(diǎn)上Modbus/OPC-UA邊緣適配網(wǎng)關(guān)、時序數(shù)據(jù)差分壓縮、斷網(wǎng)自愈。如果你正在做工廠數(shù)據(jù)采集、MES對接、設(shè)備上云這類項目這篇應(yīng)該能幫你少踩不少坑。1. 車間里的三代設(shè)備混戰(zhàn)這個項目要解決的真實(shí)痛點(diǎn)1.1 非侵入式的定義不改邏輯、不改硬件、不承擔(dān)停機(jī)風(fēng)險“非侵入式”這四個字先要掰開揉碎講清楚。它不是技術(shù)選型的偏好而是業(yè)務(wù)層面的硬約束。改造一個用了十幾年的老設(shè)備工廠最怕兩件事一是改PLC程序改掛了生產(chǎn)線停擺停產(chǎn)一小時可能就虧掉幾個網(wǎng)關(guān)的錢二是改造驗收時能跑后續(xù)維護(hù)升級要加點(diǎn)位又得動原廠邏輯廠商配合度低、周期長。所以項目啟動會上跟車間定了三條紅線不修改任何PLC原有程序、不更改設(shè)備硬件接線、不停機(jī)實(shí)施。這意味著數(shù)采網(wǎng)關(guān)只能“寄生”在設(shè)備已有的通訊端口上。具體到本項目大部分設(shè)備走的是RS485串口通過Modbus RTU協(xié)議從PLC的從站寄存器里讀數(shù)據(jù)少量新一點(diǎn)的設(shè)備有以太網(wǎng)口走M(jìn)odbus TCP。整個過程不需要在PLC上增加硬件模塊也不需要改電氣柜里的走線。這里有一個非常關(guān)鍵的前提要查清楚設(shè)備里的PLC從站功能是不是已經(jīng)激活了。很多老設(shè)備默認(rèn)用的是編程口協(xié)議比如西門子S7-200的PPI協(xié)議它本身不是Modbus。如果PLC程序里沒有初始化Modbus從站指令塊你光把通訊線接上發(fā)Modbus請求過去設(shè)備是不會理你的。我們這個項目里有三臺設(shè)備最后是請廠商過來在程序里加了一段Modbus初始化指令MBUS_INIT相當(dāng)于在一大段邏輯里塞了一個子程序調(diào)用主體邏輯完全沒動這算最小程度的侵入大多數(shù)用戶能夠接受。但這個動作必須在停產(chǎn)窗口期做而且要提前跟設(shè)備廠商確認(rèn)寄存器地址表和從站站號分配不然現(xiàn)場就是一團(tuán)亂麻。1.2 數(shù)據(jù)撈出來只是開始采集鏈路不等于數(shù)據(jù)鏈路把Modbus寄存器讀出來之后很多人覺得任務(wù)就完成了。其實(shí)不是這樣。裸寄存器讀出來的是“一個地址、一堆十六進(jìn)制數(shù)”要變成MES能用的“設(shè)備狀態(tài)、產(chǎn)量、良品率、瞬時能耗”中間還有一串活數(shù)據(jù)清洗、單位換算、位拼接比如兩個寄存器拼一個32位浮點(diǎn)數(shù)、協(xié)議轉(zhuǎn)換、本地緩存、斷點(diǎn)續(xù)傳、壓縮上傳。這些工作在邊緣端做完比在云端做要合理得多。第一現(xiàn)場數(shù)據(jù)量大采樣周期到秒級的話一臺設(shè)備一天就是86400條記錄幾十臺設(shè)備全量往云端推帶寬和云端存儲都吃不消第二現(xiàn)場網(wǎng)絡(luò)沒有辦公室網(wǎng)絡(luò)那么可靠一旦斷網(wǎng)邊端必須有本事把數(shù)據(jù)先存下來第三很多老設(shè)備通信能力弱只支持串口輪詢你不可能讓云端直接去輪詢一個RS485總線上的從站。所以這套架構(gòu)的核心思路是邊緣網(wǎng)關(guān)做“翻譯官倉庫管理員”云平臺只負(fù)責(zé)“看報表和發(fā)指令”。翻譯官解決的是協(xié)議不通的問題把Modbus的裸寄存器翻譯成OPC-UA信息模型和MQTT消息倉庫管理員解決的是數(shù)據(jù)可靠性的問題先把數(shù)據(jù)穩(wěn)穩(wěn)當(dāng)當(dāng)落在本地再想辦法傳到云端。后面每一章講的具體環(huán)節(jié)本質(zhì)上都是這兩個角色里的一部分。2. 邊緣網(wǎng)關(guān)的硬件選型與軟件架構(gòu)為什么必須在現(xiàn)場放一臺“翻譯官”2.1 為什么不用DTU直接透傳協(xié)議、緩存、安全三道坎做項目的時候有人問我現(xiàn)在市面上的DTU數(shù)據(jù)傳輸單元那么便宜把RS485轉(zhuǎn)成4G/以太網(wǎng)透傳不就行了何必放一臺邊緣網(wǎng)關(guān)這個問題問得很好我用實(shí)際項目里的三筆賬回答。第一筆是協(xié)議賬。DTU做的是物理層的透傳它不管上層跑什么協(xié)議。如果云平臺要讀到Modbus數(shù)據(jù)云平臺還得自己實(shí)現(xiàn)一個Modbus主站去輪詢而Modbus輪詢是有時序要求的RS485總線上同一時刻只允許一個主站發(fā)送請求延時、超時、重試這些邏輯放在公網(wǎng)鏈路上做基本不靠譜。DTU解決不了“設(shè)備說Modbus、平臺說OPC-UA/MQTT”這種協(xié)議轉(zhuǎn)換問題。第二筆是緩存賬。DTU斷網(wǎng)之后就是傻等數(shù)據(jù)在設(shè)備端沒有被采集出來等網(wǎng)絡(luò)恢復(fù)再去讀已經(jīng)來不及了——PLC的寄存器是瞬態(tài)值過了這個時間點(diǎn)你就永遠(yuǎn)拿不到那條數(shù)據(jù)了。而邊緣網(wǎng)關(guān)在本地把數(shù)據(jù)落盤斷網(wǎng)幾個小時、幾天數(shù)據(jù)都在本地倉庫里躺著網(wǎng)絡(luò)恢復(fù)后可以按時間順序補(bǔ)傳。第三筆是安全賬。如果設(shè)備直接暴露在公網(wǎng)IP上那等于把PLC的通訊端口開到了互聯(lián)網(wǎng)上一旦出安全問題后果不敢想。邊緣網(wǎng)關(guān)作為唯一的數(shù)據(jù)出口對外只主動連接平臺不對公網(wǎng)開放任何入站端口這是最樸素的邊界防護(hù)邏輯。2.2 軟件技術(shù)棧的選擇驗證過的穩(wěn)定組合硬件方面我選的是無風(fēng)扇工業(yè)嵌入式工控機(jī)CPU不用高Atom級別或者賽揚(yáng)J系列就夠關(guān)鍵是必須有原生或者硬件隔離的RS485串口、雙網(wǎng)口、寬溫固態(tài)盤電源支持9到36V寬壓輸入直接接到設(shè)備控制柜的DC24V回路上。網(wǎng)上那些幾十塊的USB轉(zhuǎn)RS485模塊短時間調(diào)試可以長期放現(xiàn)場大概率會出現(xiàn)丟幀、驅(qū)動不穩(wěn)定、串口丟失的麻煩不建議用。軟件棧我用的是Python 3.8 pymodbus串口/網(wǎng)口Modbus主站 asyncuaOPC-UA服務(wù)端 SQLite本地緩存 自研MQTT上傳模塊。有人會覺得Python干工業(yè)采集不靠譜但實(shí)際上對這個場景是完全夠用的——Modbus輪詢是毫秒級的慢速IO幾百個點(diǎn)位每秒也就幾百次操作Python并發(fā)模型里的asyncio足夠應(yīng)付真正要關(guān)注的瓶頸在磁盤IO和網(wǎng)絡(luò)。Python的好處是開發(fā)快、協(xié)議庫完整、后面要接什么數(shù)據(jù)服務(wù)都方便。網(wǎng)關(guān)內(nèi)部按數(shù)據(jù)流向分了五層設(shè)備接入層各種串口/網(wǎng)口的Modbus信道、協(xié)議解析層寄存器映射、字節(jié)序轉(zhuǎn)換、單位換算、本地存儲層SQLite緩存隊列、服務(wù)開放層OPC-UA Server、MQTT Client、本地Web調(diào)試頁面、管理維護(hù)層時鐘同步、日志、看門狗。每一層之間用簡單的隊列解耦Modbus采集線程只管把數(shù)據(jù)寫進(jìn)本地數(shù)據(jù)庫上傳線程只管從數(shù)據(jù)庫拿數(shù)據(jù)推給平臺兩個線程互不阻塞這也是斷網(wǎng)自愈能成立的基礎(chǔ)。3. Modbus輪詢詳解寄存器勘察、掃描周期計算與讀寫沖突規(guī)避3.1 用Modbus Poll做寄存器勘察先畫出地圖再上路上現(xiàn)場前最重要的一件事是把每臺設(shè)備的Modbus點(diǎn)位表摸清楚。我一般用Modbus Poll這個工具它就是個Modbus主站模擬器接上RS485轉(zhuǎn)USB線就能跟PLC說話??辈斓臅r候要做三件事確認(rèn)通訊參數(shù)波特率、數(shù)據(jù)位、停止位、校驗位、確認(rèn)從站站號、確認(rèn)每個點(diǎn)位對應(yīng)的功能碼和寄存器地址。這里最容易出問題的是寄存器地址的“基址偏移”。Modbus協(xié)議層的地址是0開始的Protocol Address很多PLC廠商的文檔里寫的是1開始的Logical Address中間差1。比如臺達(dá)DVP的D寄存器文檔里說“D100”你發(fā)Modbus請求時的實(shí)際地址可能是99或者100這個必須拿Modbus Poll親手測看哪個地址能讀到預(yù)期值再在點(diǎn)表里記錄。勘察完要產(chǎn)出一張點(diǎn)表這是整個項目的“地圖”。字段包括設(shè)備ID、從站站號、寄存器地址協(xié)議層地址、功能碼03讀保持寄存器、04讀輸入寄存器、數(shù)據(jù)類型INT16、UINT16、INT32、FLOAT、字節(jié)序、量程、單位、縮放系數(shù)、輪詢分組、描述。這張表后面要用來生成邊緣網(wǎng)關(guān)的配置文件也是OPC-UA信息模型和差分壓縮模塊的數(shù)據(jù)字典。順序別搞反我就是因為前期點(diǎn)位表錄入時漏了一項字節(jié)序?qū)е乱粭l溫度數(shù)據(jù)整整錯了兩天。3.2 掃描周期怎么算RS485總線是典型的時序預(yù)算問題Modbus RTU在RS485上是半雙工輪詢同一時刻只能有一個主站說話所以掃描周期是個實(shí)打?qū)嵉臅r序預(yù)算問題不算清楚要么總線沖突要么數(shù)據(jù)刷新太慢。先給個計算模型。以9600波特率為例傳輸一個字節(jié)大約需要1.04ms包含起始位、數(shù)據(jù)位、停止位。你發(fā)一條“讀10個保持寄存器”的請求報文是8個字節(jié)從站號1 功能碼1 起始地址2 寄存器數(shù)量2 CRC校驗2。如果讀取的10個寄存器里放的是5個FLOAT每個占2個寄存器響應(yīng)報文是25個字節(jié)從站號1 功能碼1 字節(jié)數(shù)1 數(shù)據(jù)20 CRC2。再加上Modbus協(xié)議要求的3.5個字符時間間隔約3.6ms請求前、響應(yīng)前、響應(yīng)后各一次單筆事務(wù)的總耗時大約是41ms。假如一臺設(shè)備有50個FLOAT點(diǎn)位一條報文最多讀125個寄存器所以可以在一條事務(wù)里把這50個FLOAT100個寄存器全部讀完實(shí)際上一筆事務(wù)就夠了周期大約41ms。但如果點(diǎn)位分布零散比如每隔幾十個寄存器才有一個有用的點(diǎn)你就得發(fā)好幾條事務(wù)。比如分成5筆事務(wù)那周期就變成5×41ms約等于205ms。串口波特率再低一點(diǎn)比如4800時間直接翻倍。所以設(shè)計的思路是點(diǎn)表規(guī)劃時盡量把同一設(shè)備的連續(xù)寄存器放在一個輪詢組里一條事務(wù)能讀完的絕不分兩筆。8臺設(shè)備掛在同一條RS485總線上每臺周期200ms合計輪詢一遍就是1.6秒左右。對大多數(shù)設(shè)備狀態(tài)監(jiān)控、產(chǎn)量統(tǒng)計場景1到2秒的刷新率完全夠用。如果你要1秒以內(nèi)的實(shí)時性要么提高波特率到38400甚至115200要么把設(shè)備拆到多條總線上。3.3 讀寫沖突和HMI共存別讓你的網(wǎng)關(guān)變成攪局者M(jìn)odbus不光是讀設(shè)備常有需要寫的場景比如設(shè)定溫度、切換配方。這里有個大坑如果邊緣網(wǎng)關(guān)周期性地去寫一個保持寄存器而設(shè)備HMI或PLC內(nèi)部邏輯也在寫同一個寄存器就會產(chǎn)生互相覆蓋的問題。我的處理原則是網(wǎng)關(guān)只讀不寫除非收到上位平臺下發(fā)的明確指令寫操作只做“命令觸發(fā)”不做“周期刷新”。讀取和寫入共用同一條總線的代價是寫入時總線會被占用讀周期會有抖動所以寫操作要加互斥鎖并且盡量放在采樣間隙。另一個容易被忽略的問題是HMI共存。老設(shè)備的RS485總線上通常已經(jīng)掛著一個HMI觸摸屏HMI本身就是一個Modbus主站。你再把網(wǎng)關(guān)并上去就變成了雙主站兩條輪詢請求在總線上打架現(xiàn)場表現(xiàn)為數(shù)據(jù)偶爾跳變、HMI畫面刷新變慢。解決思路有三種把HMI換到PLC的另一個通訊口上把網(wǎng)關(guān)節(jié)點(diǎn)設(shè)置為只在HMI輪詢周期的間隙發(fā)送請求需要摸清HMI的輪詢規(guī)律或者如果PLC支持把網(wǎng)關(guān)接到單獨(dú)的主站端口。我們項目里最省事的做法是給PLC加了一個通訊擴(kuò)展板HMI和網(wǎng)關(guān)各走各的口總線沖突的問題直接從物理上消除。4. OPC-UA地址空間建模把Modbus裸寄存器變成標(biāo)準(zhǔn)信息模型4.1 為什么網(wǎng)關(guān)要“說”O(jiān)PC-UA而不是直接交裸數(shù)據(jù)前面數(shù)據(jù)采集用的是Modbus但整個系統(tǒng)的對外接口我選了OPC-UA而不是單純讓云平臺來讀Modbus或收原始報文。原因不只是“OPC-UA更現(xiàn)代”這種口號而是三個實(shí)打?qū)嵉墓こ汤碛?。第一上層系統(tǒng)集成成本低。MES、SCADA、能源管理平臺這些系統(tǒng)基本都內(nèi)置OPC-UA客戶端接到一個標(biāo)準(zhǔn)OPC-UA服務(wù)端上配置一下連接字符串和節(jié)點(diǎn)路徑就能讀到數(shù)據(jù)。如果上層系統(tǒng)要去讀Modbus它就得自己實(shí)現(xiàn)Modbus主站還得知道每臺設(shè)備每個寄存器地址的映射關(guān)系集成成本高得多。第二信息模型自帶語義。Modbus寄存器就是一個編號一個數(shù)它不告訴你這是溫度還是壓力單位是什么。OPC-UA的地址空間可以定義成“設(shè)備對象下面掛著變量節(jié)點(diǎn)”每個變量節(jié)點(diǎn)帶描述、工程單位、數(shù)據(jù)類型等屬性。上層系統(tǒng)拿到節(jié)點(diǎn)就知道這個值的含義不用在平臺側(cè)再維護(hù)一張映射表。第三網(wǎng)絡(luò)安全模型成熟。OPC-UA支持TLS加密和證書認(rèn)證允許你只授予MES系統(tǒng)某些設(shè)備的讀取權(quán)限。這在制造業(yè)客戶那里比較好交代審計的時候也能說清楚數(shù)據(jù)通道是受控的。4.2 信息模型設(shè)計設(shè)備、點(diǎn)位、屬性三層結(jié)構(gòu)OPC-UA的地址空間建模我這套分成三層。第一層是設(shè)備對象節(jié)點(diǎn)Object Node。比如ObjectFolder/Devices/InjectionMolding_01對應(yīng)物理世界里那臺注塑機(jī)。設(shè)備節(jié)點(diǎn)的屬性包含設(shè)備編號、型號、廠商、上線時間、當(dāng)前通信狀態(tài)。第二層是點(diǎn)位變量節(jié)點(diǎn)Variable Node。掛在設(shè)備節(jié)點(diǎn)下面比如InjectionMolding_01/Temperature_Barrel1。每個變量節(jié)點(diǎn)設(shè)置DataType為Double或Int16設(shè)置EngineeringUnit屬性為攝氏度或百分比加上Description描述“1區(qū)料筒溫度”。變量節(jié)點(diǎn)的BrowseName和NodeId要穩(wěn)定因為上層系統(tǒng)配置好之后如果你的節(jié)點(diǎn)路徑變了對接就要重新來過。第三層是服務(wù)與診斷節(jié)點(diǎn)。這個是我自創(chuàng)的在每個設(shè)備下掛一個Diagnostics文件夾放幾個只讀變量LastPollTime最近一次輪詢時間、CommStatus通信狀態(tài)、TotalCommunicateErrors累計通信錯誤次數(shù)。這些診斷數(shù)據(jù)平時沒人看一旦出問題排查起來是救命稻草。具體實(shí)現(xiàn)上用Python的asyncua庫啟動一個Server注冊一個自定義namespace然后遍歷點(diǎn)表配置用代碼批量生成這些節(jié)點(diǎn)。幾百個點(diǎn)位用循環(huán)建節(jié)點(diǎn)就好不要手寫維護(hù)NodeId容易亂。這里要提醒一句OPC-UA Server加載完節(jié)點(diǎn)之后最好做一次地址空間的快照導(dǎo)出留作版本比對防止網(wǎng)關(guān)程序升級時節(jié)點(diǎn)結(jié)構(gòu)漂移。4.3 部署驗證UA Expert連上去看真實(shí)數(shù)據(jù)模型建好之后驗證工具我推薦官方免費(fèi)的UA Expert。它就是個OPC-UA客戶端填上網(wǎng)關(guān)的IP和端口就能瀏覽地址空間。驗證時主要看三件事節(jié)點(diǎn)樹結(jié)構(gòu)是否符合設(shè)計、每個變量能否訂閱到實(shí)時值、數(shù)據(jù)類型和工程單位是否顯示正確。這里有個實(shí)戰(zhàn)細(xì)節(jié)UA Expert訂閱的點(diǎn)位多了之后網(wǎng)關(guān)CPU占用會明顯上升因為每個訂閱都要進(jìn)行值變更檢測和推送。解決方法是把訂閱的采樣間隔調(diào)大默認(rèn)100ms改成1000ms對絕大多數(shù)工藝監(jiān)控足夠了。另外OPC-UA協(xié)議本身也有心跳機(jī)制客戶端和服務(wù)端之間的會話要保持連接如果網(wǎng)絡(luò)抖動客戶端會報“BadSessionIdInvalid”之類的錯誤這種時候要找網(wǎng)絡(luò)原因不要急著懷疑網(wǎng)關(guān)程序。5. 時序數(shù)據(jù)差分壓縮從“存全量”到“存變化”的工程實(shí)現(xiàn)5.1 工業(yè)時序數(shù)據(jù)的統(tǒng)計特征為什么值得做差分做壓縮之前我先分析了一下這些數(shù)據(jù)的特征。工業(yè)現(xiàn)場采上來的數(shù)據(jù)跟互聯(lián)網(wǎng)日志、金融行情有本質(zhì)區(qū)別。設(shè)備溫度、壓力、速度這些量在穩(wěn)態(tài)生產(chǎn)階段變化非常緩慢相鄰兩個采樣點(diǎn)的差值往往很小。比如注塑機(jī)料筒溫度設(shè)定在220攝氏度實(shí)際溫度在219.5到220.5之間波動一秒鐘采一次相鄰兩次的差值常常只有0.1到0.3攝氏度。如果直接存絕對值的32位浮點(diǎn)每個點(diǎn)固定4字節(jié)一天就是345600字節(jié)幾十臺設(shè)備一年下來就是好幾個GB存儲和傳輸成本都很可觀。但如果我存的是“差值”大部分差值用1到2個字節(jié)就能裝下少數(shù)劇烈變化的時刻才需要多字節(jié)。這就是差分編碼能省空間的基本盤。它不是要替代通用壓縮算法而是先用領(lǐng)域知識把數(shù)據(jù)變成“更好壓”的形態(tài)后面再疊加通用編碼效果才明顯。5.2 差分編碼ZigzagVarint的完整編碼流程具體編碼流程我拆成五步每一步都有明確的理由。第一步是定點(diǎn)化。浮點(diǎn)數(shù)直接做差分會遇到精度問題所以先把原始浮點(diǎn)按物理量綱乘一個縮放系數(shù)轉(zhuǎn)成整數(shù)。比如溫度保留一位小數(shù)就乘以10轉(zhuǎn)成整數(shù)2205然后做后續(xù)所有的差分運(yùn)算??s放系數(shù)放在點(diǎn)位表的元數(shù)據(jù)里解壓時再除回去。第二步是分塊。把同一個點(diǎn)位的連續(xù)256個采樣點(diǎn)組成一個塊塊內(nèi)才做差分。分塊的好處是壓縮和解壓都局部化要查某段時間的數(shù)據(jù)只需要解壓包含那個時間段的塊不用把整年數(shù)據(jù)全解一遍。塊的大小對壓縮率和隨機(jī)訪問性能都有影響256是我試下來比較平衡的值。第三步是差分。塊內(nèi)第0個采樣點(diǎn)存原始值的絕對整數(shù)后面的每個點(diǎn)都跟前一個點(diǎn)做差得到delta[i] value[i] - value[i-1]。這些delta有正有負(fù)直接用無符號Varint編碼不了負(fù)數(shù)。第四步是Zigzag編碼。它把有符號整數(shù)映射成無符號整數(shù)映射規(guī)則是n大于等于0時變成2nn小于0時變成2|n|-1。比如0變成0-1變成11變成2-2變成32變成4。這樣處理后所有delta都變成了非負(fù)整數(shù)而且絕對值小的delta編碼出來依然很小。第五步是Varint編碼。Varint的原理是用每個字節(jié)的低7位存數(shù)據(jù)最高位表示后面還有沒有續(xù)字節(jié)。0到127之間的數(shù)用一個字節(jié)就完事128到16383用兩個字節(jié)以此類推。經(jīng)過差分和Zigzag之后大部分delta都落在127以內(nèi)所以大部分點(diǎn)只用一個字節(jié)。而原始存儲一個浮點(diǎn)要4個字節(jié)這一下就省了75%。時間戳也有壓縮空間。如果采樣周期是固定的1秒那時間戳不需要逐點(diǎn)存儲塊首存一個起始Unix時間戳后面按周期推算就行。如果采樣間隔不固定就對時間間隔做同樣的差分Varint編碼效果也不錯。5.3 存儲結(jié)構(gòu)塊索引與隨機(jī)訪問怎么配合壓縮完的數(shù)據(jù)不能糊里糊涂塞進(jìn)去得有一個可查詢的存儲結(jié)構(gòu)。我在SQLite里建了兩張表。第一張是數(shù)據(jù)塊表ts_data_block字段包括塊ID、設(shè)備ID、點(diǎn)位ID、起始時間、結(jié)束時間、采樣點(diǎn)數(shù)、塊編碼數(shù)據(jù)BLOB、塊內(nèi)首值絕對值、縮放系數(shù)版本。查詢某個時間段的數(shù)據(jù)時先用起始時間和結(jié)束時間在這個表上做索引查詢拿到相關(guān)塊的ID再按塊解壓。這張表是只追加的永遠(yuǎn)不修改、不刪除單條記錄只在滾動淘汰時按塊ID整塊刪除。第二張是塊索引表ts_block_meta記錄每個塊對應(yīng)的時間范圍和校驗值用于快速定位和完整性校驗。查詢邏輯是先查塊索引確定要解壓哪些塊再讀塊數(shù)據(jù)解壓回原始時序值。實(shí)測下來查詢一天的壓縮數(shù)據(jù)解壓耗時基本在幾十毫秒級別完全可用。5.4 實(shí)測壓縮率和CPU開銷數(shù)據(jù)比感覺更誠實(shí)我拿一條實(shí)際溫度曲線做了個測試。原始數(shù)據(jù)是每秒采樣一次、32位浮點(diǎn)、一天86400個點(diǎn)原始大小約345.6KB。經(jīng)過“定點(diǎn)化分塊差分ZigzagVarint”這一套壓縮后平均每個點(diǎn)1.2字節(jié)一天的數(shù)據(jù)大約103.7KB壓縮率70%。再疊加LZ4快速壓縮可以把每個點(diǎn)壓到0.9字節(jié)附近壓縮率接近78%。要注意的是LZ4解壓會帶來額外的CPU開銷而且對隨機(jī)訪問不太友好所以我只在定期歸檔時疊加LZ4實(shí)時存儲只做差分編碼。CPU開銷方面在Atom級別的工控機(jī)上一秒采樣32個點(diǎn)位、每256點(diǎn)編碼一個塊編碼耗時可以忽略不計峰值CPU占用增加不到3%。真正的開銷在解壓和網(wǎng)絡(luò)上傳但這兩個操作都可以異步做不影響采集線程的實(shí)時性。這個數(shù)據(jù)說明對工業(yè)時序數(shù)據(jù)做領(lǐng)域定制的差分壓縮性價比是很高的。6. 斷網(wǎng)自愈本地緩存、補(bǔ)傳機(jī)制與掉電保護(hù)6.1 工業(yè)網(wǎng)絡(luò)的真實(shí)可靠性先做最壞打算做工業(yè)項目久了我對網(wǎng)絡(luò)可靠性的信任度很低。現(xiàn)場環(huán)境里交換機(jī)重啟、光纖被叉車碰斷、配電房停電導(dǎo)致整個機(jī)柜掉電、施工誤拔網(wǎng)線這些事我都遇到過。斷網(wǎng)不是“可能不發(fā)生”的黑天鵝而是“什么時候發(fā)生”的灰犀牛。所以斷網(wǎng)自愈不是加分項是必備項。設(shè)計目標(biāo)定得很明確哪怕網(wǎng)絡(luò)斷開72小時網(wǎng)關(guān)也要繼續(xù)按秒級周期采集所有點(diǎn)位數(shù)據(jù)并存到本地網(wǎng)絡(luò)恢復(fù)后在不丟數(shù)據(jù)、不重復(fù)數(shù)據(jù)的前提下把離線期間的數(shù)據(jù)補(bǔ)傳到平臺。整個過程中采集線程和上傳線程完全解耦。6.2 本地緩存實(shí)現(xiàn)SQLite WAL模式滾動淘汰本地緩存我沒有用內(nèi)存緩存加定時落盤的方案因為現(xiàn)場最怕的就是進(jìn)程崩潰或掉電導(dǎo)致緩存丟失。直接的做法是每采到一個點(diǎn)值就寫一條記錄到SQLite數(shù)據(jù)庫。SQLite在這種“單進(jìn)程寫、批量讀”的場景下表現(xiàn)穩(wěn)定關(guān)鍵是要開啟WAL模式并設(shè)置synchronousNORMAL。WAL模式的好處是寫操作不阻塞讀操作而且崩潰恢復(fù)能力好。synchronousNORMAL的意思是事務(wù)提交時不需要等數(shù)據(jù)刷到物理磁盤才返回但WAL文件本身保證了崩潰時最多丟最近一小段數(shù)據(jù)不至于把整個數(shù)據(jù)庫搞壞。對于秒級采樣的數(shù)據(jù)丟掉最后幾毫秒的數(shù)據(jù)完全可以接受而寫入性能比全同步模式提升明顯。為了避免本地磁盤被無限增長的數(shù)據(jù)撐爆緩存表做滾動淘汰保留最近7天的數(shù)據(jù)超過7天按塊自動刪除。這個天數(shù)要根據(jù)平臺側(cè)容忍度和磁盤容量來定64G固態(tài)盤存7天秒級數(shù)據(jù)綽綽有余。淘汰邏輯用定時任務(wù)在低峰期執(zhí)行不要在采樣循環(huán)里做刪除操作。6.3 補(bǔ)傳邏輯與冪等性別讓數(shù)據(jù)重復(fù)捅出亂子網(wǎng)絡(luò)恢復(fù)后的補(bǔ)傳要比“把所有數(shù)據(jù)倒過去”復(fù)雜一些。我采用的策略是“實(shí)時優(yōu)先、補(bǔ)傳靠后”網(wǎng)絡(luò)恢復(fù)的前5分鐘只傳實(shí)時數(shù)據(jù)保證平臺看到的是“設(shè)備現(xiàn)在還活著”5分鐘之后再啟動補(bǔ)傳任務(wù)按時間正序把本地緩存里未上傳的數(shù)據(jù)批量推給平臺。補(bǔ)傳時的關(guān)鍵設(shè)計是冪等性。平臺側(cè)接收數(shù)據(jù)不能簡單地“來一條存一條”因為補(bǔ)傳和實(shí)時傳輸在時間上可能交錯同一條數(shù)據(jù)可能因為網(wǎng)絡(luò)超時被重傳兩次。解決辦法是在每條數(shù)據(jù)上帶上設(shè)備ID點(diǎn)位ID采樣時間戳這個三元組平臺側(cè)在存儲層對這個三元組做唯一索引重復(fù)插入直接忽略。這樣不管補(bǔ)傳任務(wù)重試多少次平臺數(shù)據(jù)都不會出現(xiàn)重復(fù)記錄。另一個細(xì)節(jié)是時間戳對齊。網(wǎng)關(guān)在斷網(wǎng)期間如果本地時鐘漂移補(bǔ)傳的數(shù)據(jù)時間戳就可能是錯的輕則曲線出現(xiàn)毛刺重則上報的數(shù)據(jù)被邊緣計算任務(wù)當(dāng)成異常值。所以網(wǎng)關(guān)必須能聯(lián)網(wǎng)校時。我在網(wǎng)關(guān)里加了NTP客戶端開機(jī)時校時之后每4小時校時一次如果NTP不可達(dá)就把本地時鐘和一個“未校時標(biāo)志”一起上報平臺側(cè)可以根據(jù)這個標(biāo)志對數(shù)據(jù)做降級處理。6.4 重連策略指數(shù)退避抖動防止“羊群效應(yīng)”網(wǎng)關(guān)斷網(wǎng)重連要特別注意“羊群效應(yīng)”——如果整條線路的十幾個網(wǎng)關(guān)同時斷網(wǎng)、同時恢復(fù)所有網(wǎng)關(guān)會同時發(fā)起連接平臺端口一下就被打滿了。所以重連不能做成“網(wǎng)絡(luò)一恢復(fù)就立刻連”要采用帶隨機(jī)抖動的指數(shù)退避策略第一次重連等待1秒第二次2秒第三次4秒逐步增大到最大值60秒并且每次等待時間加上一個0到1000毫秒的隨機(jī)抖動。這樣即使幾十個網(wǎng)關(guān)同時恢復(fù)它們的重連請求也會均勻散開平臺側(cè)的壓力會小很多。重連的探活也不能只靠TCP連接狀態(tài)因為TCP連接斷沒斷有時候要很久才能感知到。我在MQTT層用keepalive心跳默認(rèn)60秒超過兩個心跳周期沒收到的服務(wù)器響應(yīng)就判定連接失效主動斷開重建。同時監(jiān)控上傳隊列長度如果隊列持續(xù)增長說明網(wǎng)絡(luò)可能已經(jīng)出問題提前打日志而不是傻等連接超時。7. 上線半年踩過的坑字節(jié)序、時鐘漂移、假斷網(wǎng)與PLC干擾7.1 字節(jié)序與字序工業(yè)數(shù)據(jù)里最陰間的錯位Modbus協(xié)議本身是大端傳輸?shù)?2位浮點(diǎn)或者32位整數(shù)由兩個16位寄存器構(gòu)成時不同廠商的排列方式完全不一樣。常見的有ABCD大端、CDAB字交換、BADC字節(jié)交換、DCBA雙端反轉(zhuǎn)四種。癥狀表現(xiàn)為讀出來的溫度值是幾百甚至幾萬或者兩個數(shù)值在小數(shù)點(diǎn)位置亂跳。這個東西光看文檔經(jīng)常不準(zhǔn)最穩(wěn)的辦法是造一個已知值比如把PLC里的某個D寄存器手動寫入一個特定浮點(diǎn)數(shù)然后看網(wǎng)關(guān)讀出來是什么字節(jié)序把那臺設(shè)備的字節(jié)序參數(shù)定下來。7.2 時鐘漂移時間戳穿越導(dǎo)致的數(shù)據(jù)錯亂有段時間平臺側(cè)發(fā)現(xiàn)某臺設(shè)備的能耗曲線每天都有個奇怪的尖峰查了半天發(fā)現(xiàn)是網(wǎng)關(guān)的實(shí)時時鐘RTC電池沒電了。設(shè)備斷電重啟之后系統(tǒng)時間變成了出廠默認(rèn)的2015年等網(wǎng)絡(luò)恢復(fù)校時又突然跳回當(dāng)前時間中間這十幾分鐘“穿越”的數(shù)據(jù)全被存了下來補(bǔ)傳上去之后平臺側(cè)就把這段時間算成了異常尖峰。后來我在網(wǎng)關(guān)程序里加了開機(jī)檢測如果系統(tǒng)時間比編譯版本時間還早說明RTC不可靠啟動后阻塞數(shù)據(jù)上傳直到NTP校時成功才放開。這個機(jī)制雖然簡單但后面再沒出現(xiàn)過“穿越數(shù)據(jù)”。7.3 假斷網(wǎng)與PLC通信干擾網(wǎng)關(guān)把某臺設(shè)備標(biāo)記為離線但是現(xiàn)場看設(shè)備明明在正常運(yùn)行。排查下來發(fā)現(xiàn)這臺設(shè)備的PLC程序正在被工程師用編程軟件下載程序下載期間PLC的Modbus從站通信是被暫停的連續(xù)好幾次輪詢超時網(wǎng)關(guān)就判定設(shè)備離線了。從那以后判定離線的策略從“單次超時”改成了“連續(xù)5次超時或者10秒內(nèi)無有效響應(yīng)”并且把通信錯誤單獨(dú)記錄成診斷數(shù)據(jù)不直接參與離線狀態(tài)計算。這樣既能容忍設(shè)備側(cè)臨時干擾又不會讓故障被掩蓋。還有一次比較隱蔽的問題是RS485總線上的接線問題。使用了劣質(zhì)USB轉(zhuǎn)485模塊發(fā)送方向切換時RTS信號控制不干凈總線上經(jīng)常出現(xiàn)雜散字節(jié)導(dǎo)致CRC校驗錯誤率高。排查時用Modbus Poll抓包對比才找到原因網(wǎng)關(guān)發(fā)的請求報文和Modbus Poll發(fā)的一模一樣但網(wǎng)關(guān)這邊收到的響應(yīng)就是偶爾壞一幀。后來換成了帶自動流向控制的工業(yè)級串口卡錯誤率直接歸零。寫在最后的實(shí)戰(zhàn)心得這套架構(gòu)從2021年底上線到現(xiàn)在穩(wěn)定運(yùn)行了兩年多最深的體會是工業(yè)數(shù)采的項目難點(diǎn)從來不在某個單點(diǎn)技術(shù)上而在所有環(huán)節(jié)的咬合。Modbus輪詢調(diào)得再快斷網(wǎng)數(shù)據(jù)丟了等于白調(diào)差分壓縮省下來的空間如果補(bǔ)傳冪等性沒做好平臺側(cè)數(shù)據(jù)亂成一團(tuán)反而更麻煩。每當(dāng)你覺得某個環(huán)節(jié)“差不多行了”的時候它八成會在你最不希望的時間出問題。如果再做一個類似項目我會在前期多花一倍時間在點(diǎn)位勘察和點(diǎn)表維護(hù)上字節(jié)序、縮放系數(shù)、功能碼這些字段錄入越規(guī)范后面的OPC-UA建模、壓縮編碼、斷網(wǎng)補(bǔ)傳就越順暢。項目落地之后點(diǎn)表也要留版本管理設(shè)備改造過、PLC程序升過級點(diǎn)表必須跟著更新不然某個點(diǎn)位數(shù)據(jù)突然不對了你根本不知道是網(wǎng)關(guān)的問題還是現(xiàn)場那邊變了。技術(shù)方案可以有多種選擇但工程交付拼的是誰能把細(xì)節(jié)管住。這套架構(gòu)里的每一個模塊都不算高深合在一起就具備了處理真實(shí)工廠數(shù)據(jù)采集問題的能力這也是它到現(xiàn)在還在穩(wěn)定跑著的原因。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
亚洲AV网站| 丁香5月综合啪啪| 另类视屏| 毛片新网地| 日本少妇AA一级特黄大片| 久久久久人妻精选| 色综合99无码| 99热这里只有精品中文字幕| 变态另类9| 99九九综合久久九九| 999久久久国产精品| 五月婷婷导航| 国产伊人五月天| 婷婷五月天成人| 高清无码.com| 婷婷欠久少妇| 一月婷婷色色| 五月亭亭激情综合| 亚洲AV无码成人精品区电影网| 久久久久人妻| 综合亚洲六月婷婷在线| 以及AA大片看看| 热热久久99| 丁香五月婷婷激情中文| 日本三级韩三级99久久| 狠狠人妻久久久久久综合丁香| 亚洲日韩一页精品发布| 久久久这里有精品| 亚洲激情五月| 一二三区视频韩国| 丁香五月人妻| ..真实国产乱子伦对白在线_欧| 亚洲五月综合色播| 婷婷五月天亚洲综合| 中文字幕黄色片| 思思久久网| 欧美日韩精品人妻狠狠躁免费视频| 色婷婷五月网| 美女黄频aⅴ视频| 久久综合婷婷| 精品久久66| 综合色吧| 日本人人超碰| 操日视频| 天天碰天天插天天操| 超碰成人在线免费观看| A久久| 丁香五月天堂网| 免费黄色视频网址| 夜夜夜夜夜操| 99热这里只有精品在线免费| 九九www| 久久色情| 野战毛片三一3| 国产激情久久久| 成人五月天视频播放| 激情五月天福利| 成人电影在线免费试看| 婷婷五月AV| 色播五月天婷婷老师| 天天操天天操天天操天天操天天操 | 99视频只有精品| 婷婷五月深深爱| 欧美日本国产欧美日本韩国99| 97福利视频| 天天操夜夜橾| 噜色精品| 婷婷九月色| 99亚洲精品综合在线| 日韩 中文 欧美| 成人婷婷桔色| 久热婷婷| 天天综合色丁香| 色99色| 丁香婷婷六月男男| 五月天婷婷深深爱| www。狠狠干。com| 亚洲综合网 665566| 亚洲第一成人无码A片| 2017狠狠干| 《》【无码】想被搞到爽AV应募而来的超M素人 西纯子 10musume-011723-01 | www.99在线| www.婷婷激情网.com| 啊V视频在线观看| 九九机热| 婷婷五月天性| 激情五月天在线| 五月天激情图片网| 婷婷五月综合丁香久久| 五月婷婷色欲| 婷婷五月色| 婷婷射综合| 26uuu另类亚洲欧美日本一| 五月天无码| se.久久视频在线观看| 99在线免费观看| 婷婷狠狠18禁久久| 丁香五月婷婷偷拍| 囯产精品久久欠久久久久久九大| 久狠日av| 欧美激情-区二区三区| 激情综合播播| 婷婷精品| 超碰人人干| 久久久久婷| 色色婷婷综合| 热久久999| av九九| 狠狠综合久久| 色五月激情婷婷| 第四色五月婷婷| 五月婷婷 激情五月| 五月色无码| 婷婷五月天黄色| 婷婷激情五月天小说| 91色综合久久| 五月丁香 狠狠爱| 中文字幕 中文字幕明步| 综激情网| 亚州色色色| 超碰在线免费9| 播五月丁香三月婷婷| 狠狠干思思热| 久久少妇视频| 很很干天天干| 五月丁香在线| 99视频久久| 婷婷色五月婷| 亚洲综合在线播放| 日本久久高清| 激情五月天电影| av中文在线| 欧美婷婷日本| 996热re视频精品视频这里| 青草视频在线观看视频| 国产 A片 自拍| 91狠狠色丁香婷婷综合久久精品| 色爱亚洲| 伊人在线视频| 黄色视频网站在线播放| 大香伊人婷婷影院| 色99热| www久久艹| 97超级碰碰碰| 国产免费AV网站| 色色色婷婷五月天| 狠狠夜夜五月丁香| 五月婷深深爱激情网| 五月丁香六月婷婷综合伊人| 亚洲狠狠干| 激情丁香五月天图片| 婷婷综合在线| 91欧美| 激情五月综合网| 五月激情婷婷在线| 日本强伦片中文字幕免费看| 九月婷婷人人操人人舔人人爱| AV中文字幕夜夜操b天天摸bb | 亚洲色综合| 久久婷婷青草五月天| 色五月丁香总合网| 久久机热这里只有精品| 成人电影在线免费试看| 91丨九色丨大屁股| AV免费在线网站| 国产精品成人AV在线| 涩五月婷婷| 亚洲激情电影五月天色婷婷丁香一起草| 五月天婷婷网站| 婷婷五月天a| 激情婷婷网| 婷婷深爱五月| 97人人超| 中文在线视频久9| 久久草中文日韩欧美| 国产激情综合五月久久| 亚洲AAAA网| 婷婷色丁香六月| 人人摸人人干| 北京熟妇搡BBBB搡BBBB| www狠狠com| 97人人草| www色综合| 26uuu成人网| 超碰在线人妻| 色综合网页| 99资源在线视频| 五月综合视频在线| 五月天色五月| 国产精品日本一区二区在线播放| 91疯狂操操操操| 9l视频自拍9l九色成人| 国产玖玖资源| 伊人婷婷五月天| 玖久久网站| 九九综合伊人| 九九视频这里有精品| 一起草无码| 中文字幕成人| 久久婷婷五月综合成人d啪| 99超在线| 亚洲婷婷丁香| 另类图片五月天激情| 日本久久高清| 天天操天天操天天操天天操天天操天天操天天操天天操天天操 | 久99| 日本三久久| 丁香久色| 大香蕉婷婷丁香天堂AV| 色五月在线综合| 亚洲网视屏| 五月色精品| www.色五月.com| 八戒青柠影视剧在线观看| 日韩天堂久久| 国产热精品| 婷婷综合亚洲| 色五月色五天色情网址| 欧美五月丁香在线观看| 亚洲日日操| 永久天堂日本| 色 五月俺去也| 超碰成人在线观看| 4438国产免费看| 色久婷婷网| 91丨九色丨丰满人妖| 综合狠久久| 人人操99| 天天色综合天天| 丁香六月激情综合啪啪| 亚洲视频在线观看| 久久这里只有精彩| 色色五月婷| 9999热免费视频视频| 五月丁香六月婷婷,婷| 狠狠干五月天| 91精品久| 天天天日天天天干| 精品香蕉99久久久久网站| 久久宗合影| 亚洲色模骚货| 五月刺激丁香月综合| 99热99网| 婷婷网五月天| 五月天婷婷色| 99精品在线观看| 婷婷色五月丁香六月欧美啪| 日韩av在线电影| 91精品综合久久久久久五月丁香 | 色九区| 99视频只有精品| 久久婷婷青青| 丁香五月停停av| 丰满少妇猛烈A片免费看观看| 淫视馆aV二区一区| 五月婷婷激情久久| 婷婷丁香人妻天久久| 欧美婷婷日本| 我去色色网五雨天| 天天操夜夜操| 丁香婷婷色| 久久这里只精品| 怡春院天天干| 国产成人亚洲综合A∨婷婷| 五月天婷婷激情六月久久| 五月天色婷婷视频| 伊人爱爱日本| 九九热免费| 玖玖99婷婷| 婷婷五月天视频在线观看| 成人片黄网站色大片免费毛片| 九九国产精视频| 色婷婷影视| 色9999日韩国产| 99精品在线观看视频| 综合色网站| 激情五月婷黄版| 男人的天堂97| 91丨九色丨高潮丰满日本| 在线看黄色| 噜噜吧天天爱| 91人妻人人操人人爽| 色久影院| 天天曰夜夜爽| 男女啪啪做爰高潮无遮挡| 爱草视频在线| 一级韩国产精品毛| 九月婷婷激情| 久久机热这里只有精品免费视频| 少妇真实被内射视频三四区| 日操夜撸| 99久久婷婷五月综合| 色老久久| 五月婷婷亚洲天堂激情在线| 99人妻碰碰久久久禁片| 99热国产这里只有精品| 久一网站| www.五月天| 国产在线6| 色www久视频| 免费播放99性爱视频| 亚洲色区17| 99热国产免费| 天天爽爽日日做做| 东京热五月婷婷| 五月天五月天激情网| 影音先锋偷偷色男人站| 天天干天天日天天操| 梁铮版蜘蛛女在线观看| 激情国产五月| 国产成人网站在线观看| 99热久久最新地址| 九月大香蕉| 久久性操| 99这里只有精品在线| 97超碰色| 久久综合人妻| 亚洲第一色区| 色综合综合色| 天天色中文字幕女优AV| www婷婷| 午夜色色色极品视频| 婷婷五月花.97| 九九热精品| 欧亚洲在线高清视频| 成人做爰A片免费看网站找不到了| 五月丁香六月婷婷的女人| 五月婷婷日| 丁香五月天激情视频| 人人干AV| 99re热在线视频| 国产精品天天狠天天看| 思思热在线| 天天色月| 日韩精品电影| 极品人妻XXXXOOOO| 五月婷婷久久综合| 97久久婷婷色| 婷婷五月天亚洲| 五月丁香婷中文字幕| 日韩精品一品二区三区的使用体验| 日日噜噜夜夜狠狠久久丁香五月| 久久免片| 99色丁香婷婷综合网| 性爱激情小说AV五月丁香花| 亚洲日本韩国| 久久久18| 5五月综合网亚洲| 丁香六月色婷婷| 超碰伊人碰婷婷五月| 五月天伊人日日噜影片AV| 婷婷五月天综合网| www.99免费视频| 森林影视大全,最好看的2019年视频 | 99惹精品视频| 免费看欧美成人A片无码| 色综合久久天天综合网| 久久婷婷综| 久久99精品久久久久久青青AR| 五月天自拍网| 精品影院| 99色1| 婷色五月| 无码天天操| 激情综合亚洲| 色五月婷婷少妇人妻| 五月婷婷色色| 9.1综合网| 大香蕉婷婷色| 狠狠搞五月天| 99久久婷婷国产综合精品草原| 影音先锋色婷婷| 亚洲综合色网| 色五月天丁香| 婷婷五月天综合在线| 99ri精品视频在线观看| 久久婷婷五月天| 超碰97人人操| 内射爽无广熟女亚洲| 婷婷五月天成人娱乐| 99热这里只有精品在线| sewuyue第四色| 99久久国产宗和精品1上映| ay2区| www.婷婷| 亚洲丁香五月在线观看| se色综合网| 久久99美女精彩视频| 西西4r午夜剧场| 性色视频| 久久精品63| 97超碰人人操| 人妻系列久久久久久久久久久 | 丁香六月成人| 婷婷五月综合在线| 亚洲日韩一页精品发布| 亚洲色模骚货| 亚洲第一黄网| 97超碰,人人舔,人人操,人人摸 | 婷婷丁香久久五月综合| 少妇性按摩无码中文A片| 五月婷婷色播网| 7EzOBIhNq85TO| 91精品久久久久久综合五月天| 激情av网| 大香蕉520| 婷婷五月天视频小说| av操B网站| 狠狠操狠狠| 在线中文字幕av| 91综合在线| 天天爽天天做| 草综合网| 青青999| 狠狠色丁香| 婷婷色色播五月天| 香蕉综合在线| 91碰碰视频在线观看| 五月婷婷啪啪综合网| 狠狠色色| 亚洲激情| 夜精品无码A片一区二区蜜桃| 激情婷婷五月社区| 亚洲精品乱码久久久久99| 91九色偷拍| 婷婷丁香成人| 免费视频这里只有精品| 婷婷五月激情网站| 精品九九网| 超碰在线人妻| 美女精品一级不卡视频| 99成人小视频| 中文字幕丁香五月| 久草A片| 182无码| 婷婷综合亚洲| 天天操天天操天天操天天操天天操 | 九九色精品| 成人国产网站| 665566 无码| 99久久综合网| 亚洲成人综合在线| 天天射影院| 最新精品视频99| 欧美五月婷婷| 超碰色女人| 亚洲色就是色色色| 99热成人| 色五月 五月婷婷| 五月天婷婷综合免费| 欧美色播综合在线观看| 国产日产成人亚洲欧美国产VA| 9久热在线视频| 91蜜桃婷婷狠狠久久综合9色| 久9热视频| 日夜夜久久| 天天日狠狠| 久久女婷| 大香蕉久艹| 综合网网欲色| 奇米四色五月天| 少妇AB又爽又紧无码网站| 久九色| 亚洲人人操| 精a品a| 天天搞夜夜六| 情五月亚洲婷婷| 五月婷婷六月丁香| www.丁香五月| 91婷婷丁香五月天免费视频网站| 99在线热| 欧美日韩成人| 激情婷婷五月女| 丁香婷婷久久 | 色吧五月| 久久精品爱爱| 青青草搞屄视频网站| www.婷婷| 五月色亭丁香| 久久婷婷欧美| 99国产这里只有精品| 婷婷综合五月色播| 色视频五月天| 九月婷婷色色| 激情小说五月天| 夜夜爽天天干| 国产成人精品一区二三区熟女在线 | 亚洲激情高潮| 久久五月婷天天干| 五月婷综合| 久久丁香五月天| 天天久综合| 色播五月婷婷| 超碰久热| 婷婷丁香五月综合网| 狠狠干最新地址| 久久曰9| 日本天堂网站99| 色色网91| 久久精彩综合视频| 九月婷婷丁香| 天天综合中文| 色噜噜狠狠色综合日日| 国产午夜成人免费看片无遮挡| 婷婷亚洲在线| 五月丁香激情四射综合| 激情丁香婷婷| 噜噜噜色噜噜| 99免费| 五月婷婷色色色| 九九色热| 婷香狠狠爱五月| 日韩精品999| 美臀自射自家人妻| 人人草开心五月天| 九九99久久| 九九在线热九九在线热99热| 操97免费超级视频| 伊人六月丁香婷婷| 99色| 人妻丰满精品一区二区A片| 性爱激情五月| 婷婷色丁香五月| 色久婷婷网| 丁香五月婷婷六月| 久久女婷| 97色啪| 新99思思视频| 97婷婷丁香| 欧美在线视频99| 激情五月丁香五月综合| 激情综合五月天| 丁香久久五月天视频在线观看| 99热这里只有精品18| 国产亚洲在线| 91干在线视频| 深爱激情小说五月婷婷| 伊人www22综合色| 欧美这里只有精品| 久久999久久999久久999久久| 五月婷婷丁香深深爱| 亚洲色五月婷婷| 99热这里只有精品8| 伊人久久大香线蕉综合网站| 手机激情网| 色一情一乱一乱一区91| 色色丁香色五月| 色婷婷视频| 久久五月天视频| AA片在线观看视频在线播放| 超碰狠狠操| 婷婷在线激情| 国产美女无遮挡裸体毛片A片| 五月婷婷草| 五月婷婷乱| 可以免费观看的av| 中文字幕精品在线观看| 美女天天爽| 无码激情AAAAA片-区区| 激情四射五月天偷偷看婷婷| 婷久久| 五月色激情综合网| www.丁香五月| 日韩国产在线精品| 婷婷伊人激情婷婷| 91丨九色丨国产打屁股| 五月婷婷在线丁香| 国产99热| 久热这里只精品| 丁香五月乱中文字幕| 99热这里只有精品99| 色香蕉影院| 日本啪啪天堂| 色色丁香婷婷| 色色激情五月天| 久久五月网| 久久婷五月综合| 另类国产区| 丁香六月激情国产| 日本97久久久精品| 97超碰人人操| 激情小说五月天中文字幕| 久久久久久久人妻| 97精品综合久久| 中文字幕av久久爽一区| 久热99| 狠狠干五月天| 99re久热只有精品6在线直播| 欧美激情VA永久在线播放| 九九色综合| 99精品久久久久久久婷婷| 91色噜噜狠狠狠狠色综合| 狠狠色综合网| 91成人电影| 久99久在线| 九九RE视频在线精品| 中文字幕 码精品视频网站| 久热91| 天天日夜夜爽| 婷婷性爱无码视频| 久久久久久18| 国产精品色婷婷久久久精品| 超碰91av| 欧美日韩欧美| 97色色色色色| 色v综合网| 色99在线视频| 日日天天天| 午夜天堂一区人妻| 尔尔AV一区| 色色色色五月天| 九九黄色网| 激情综合六月| 猫咪伊人久久| 99网| 亚洲色婷婷五月天| 99啪啪| 无遮挡国产高潮视频免费观看| 五月丁香六月花| 国产免费av在线| 色五月婷婷五月| 深爱丁香激情| 五月丁香91| 久久婷婷五月天| 色婷婷久综合久久一本国产AV| 久久香蕉丁香| 五月天开心网| 婷婷九月丁香| 中文久久久人妻| 牛牛色av| 伊人综合网站| 六月婷婷激情| 综合色五月天| 人人叉久| 嫩草AV久久伊人妇女超级A| 五月激情六月综合| 99热思思在线观看| 婷婷五月激情的图片| 丁香婷婷五月六月久久| 国产高清RV综合aVa| 色五月天丁香婷婷| 日韩在线视频9色| 黄色五月婷婷| 婷婷五月天激情丁香| 九九伊人网| 99九九这里有免费视频| 婷婷免费视频| 丝袜激情网| 亚洲性色XXXXX| 91chinese在线| 狠狠色中色| 色色色综合网| 激情综合五月| 激情五月天天狠狠久久| 久久A区B区| 五月香蕉综合| 日韩啪啪视频| 五月丁香色婷婷久久| 五月停视频天堂| www.99热| 91久久久久久久| 综合网亚洲| 婷婷成人丁香色情基地30 | 开心激情婷婷| 五月天综合久久| 五月天激情无码| 97色色色视屏| 婷婷五月成人有| 99热这里都是精品| 另类 在线| 97亚洲精品| 4438亚洲欧美| 久久人妻熟女一区二区| 婷婷丁香五月综合| 婷婷丁香六月| 狠狠香蕉| 亚洲成人免费在线| 国産精品| 影音先锋一区| 久婷婷| 99在线视频精品| 久久色9| 激情综合婷婷| 五月天婷婷五月| 我爱婷婷五月天综合88| 日日噜狠狠色综合久久| 五月婷婷伊人久久| 丁香五月激情性色郤| 五月丁香在线偷拍视频| 激情婷婷丁香色五月| 久久婷婷五月丁香| 久热网站| 五月婷婷综合潮喷| 停停五月丁香| 综合网啪| 五月丁香啪啪网| aa久久| 99热这里有精品| 久操婷婷| 曰韩五月丁香色婷婷无码| 婷婷婷狠狠| 北条麻妃伊人| 9久久精品视频| 夜色综合网| 91AV婷婷| WWW、日本色丁香co m| 99热成人精品| 婷婷五月天亚洲综合| 婷婷综合色播网| 亚洲日日操| 97碰碰视频| 婷婷五月丁香基地| ..真实国产乱子伦对白在线_欧 | 色五月天成人| 婷婷五月色情天| 狠狠五月天| 亚洲欧洲另类图片| 久久亚洲无码| 久久精品国产色| 99热精国产这里只有精品| 天天爱夜夜爽| 婷婷激情小说| 九九草草逼| 日本人妻操| 久久人人看| 五月婷婷激情色情网| 亚洲热久久| 激情综合啪啪| 色五月丁香五| 殴美日比视频| 五月丁香六月婷婷久久久综合| 精品久久99码| 色婷婷影院| 变天就操逼婷婷五月| 欧美人人操| 亚洲色欲AAAAAA| 人妻久热| 激情6月| 大香蕉久久久久| 色婷婷香蕉丁丁网| 午夜丁香| 中文字幕欧美精品久久| 婷婷啪啪| 久久美女五月天| 婷婷五月天基地| 色香久久| 五月婷婷少妇之| 91色逼| Aaa久久| 天天综合久久| 婷婷的色色五月天| 亚洲天堂婷婷| 99'无码| 97人人操| 国产真实乱对白精彩| 亚洲精品影视| 色播播五月| 午夜丁香婷婷| 色色综合激情| 婷婷开心激情综合五月天| 色中色综合| 操逼巨乳91| 超91在线视频| 天天操天天爽天天爱| 综合XX网| 综合aV在线| 色五月成人| 色婷婷五月天不卡| 91碰超| 亚洲五月六月婷婷| 99狠狠色| 午夜婷婷五月天| 婷婷久久色| 色综合av超碰| 少妇久久诱惑视频| 丁香婷婷91在线观看视频| 玩熟女五十AV一二三区| 激情视频网址| 亚洲色热| 丁香五月婷婷啪啪视频| 久久这里只有精品5| 丁香六月婷| 99操| 91精品久久久久久| 深爱激情综合网| 强辱丰满人妻HD中文字幕| 日本不卡中文字幕| 五月天最新网| 95精品区一区二| 天天想夜夜爽天天爽| 五月之婷婷| 欧美交换配乱吟粗大25P| 五月天激情久久| 天天日天天干天天天| 99网| 丁香婷婷六月激情文学| 五月天丁香综合久久国产| 五月婷狠狠| 亚洲五月天综合| 99久久网站| 久久婷婷五月综合激情国产| 伊人啪啪网| 日韩在线观看网址| 色色色视频| 激情五月婷婷网| 青青草轻轻操| 五月丁香六月激情综合| 亚洲一二三网| 色五月婷婷啪啪五月| 高清无码网址| 丁香午月AV中文字幕| 91色久| 成人av观看| 九九精品免费| 日韩国产在线精品| 日韩五月天婷婷| 九月婷婷久久| 亚洲成人网无码| 九九黄色网| 1024手机在线观看看片_日韩精品| 日日操日日撸| WWW.久久久久久久久久久久久| 大地资源色婷婷视频在线| 国产午夜精品一区二区三区四区| 亚洲综合色网站| AA丁香综合激情| 大香蕉综合在线| 夜夜 操无码| 日本人妻操| 99热在线只有精品| 欧美精品久| 26uuu在线观看| 婷婷伊人视婷婷婷| 日韩色色视频| www.久久久久久| 99热这里都是精品| 涩九九九九| 成人一级片| 午夜亚洲国产精品av一区二区| 另类综合激情| 日韩另类| 五月丁香成人网| 五月天婷a在线| 中文激情网| 婷婷日| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | 青草五月天| 色婷久| 激情av在线| 五月天色综合| 99惹在线精品免费观看| 亚洲综合色婷婷| 亚洲色婷婷激情| 九九成人电影婷婷| 丁香五月婷综合网| 色综合久久88| 色色99| 久久久久8888| 狠狠草在线观看| 婷婷五月色| 能看的AV| 亚洲射激情| 亚洲中文字幕在线电影| 丁香久月| www.99热| 国产精品久久久久9999小说| 色五月六月婷婷| 1234操逼网| 久久久99久久| 99热欧| 99热在线极品极品| 色婷婷久久综合中文久久一本| 丁香婷婷色色| 久久久中文| 天天干天天色天天干| 国产精品成人网站| 婷婷六月色开| 天天操夜夜夜拍拍拍| 色婷婷yy久| 性欧美日本| 热的国产,热的综合,热的有码 | 五月天狠狠| 婷婷99狠狠躁天天躁| 成人做爰高潮A片免费视频| 天天干天天射色综合| 久久92| 嫩草AV久久伊人妇女超级A| 永久AⅤ1| 1024手机在线观看看片_日韩精品| 成功精品影院| 狠狠操狠狠狠| 婷婷五月天丁香社区| 91九色国产| 亚洲综合色丁香五月天| 高清国产AV| 99色精品| 中文字幕色色| av大香蕉| 丁香婷婷六月| 欧美99| 五月花丁香婷婷| 激情综合九月| 精品二区| 夜夜资源站| 成人网站免费sxj| 超碰成人av| A片女女女女女女BBBB| 99色色网| 六月丁香五月亭亭| 九九99九九99| 97人碰人操| 99热只有这里有精品| 中文字幕乱轮| 婷婷五月丁香综合激情小说| 99免费偷拍视频| 六月婷婷毛片| enecarbon-materials.com污K127封锁请涟系@wip1688 | 99久热这里只有精品视频删减版| 婷婷伊人久久无码色五月| 亚洲黄色精品| 九九热青草| 五月婷婷久久久| 亚洲精色| 激情婷婷内射| 精品亚洲日韩99欧美片| 风流少妇A片一区二区蜜桃| 精品99在线| 大香蕉院线| 亚洲人妻av| 欧美碰碰碰| 少妇AB又爽又紧无码网站| 狠狠操狠狠插| 99re思思热这里| 亚洲成人AV在线播放| 99色嘟嘟精品网站| 九九热AV| 激情网婷婷五月天| 五月天婷婷丁香视频| 色婷婷九月| 新激情五月天| 操一区| 六月丁香激情| 激情婷婷五月天日本系列| 综合亚洲色色| 伊人久久大香线蕉av最新| 丁香av网| 人妻熟人中文字幕一区二区| 天天舔天天摸| 天天射色五月天| 五月色 亚洲| 玖玖在线视频福利| 丁香婷婷91在线观看视频| 久久丁香网| 99人妻碰碰久久久禁片| 日本色婷婷| 五月婷婷丁香| 色丁香五月| 五月丁香六月婷婷操操操| 激情影院内射| 亚洲综合网 665566| 欧美操综合| 九日日夜夜69| 人妻熟人中文字幕一区二区| 99精品在线观看视频| 超碰在线免费| 超碰不卡在线| 久久天天| 五月天激情小说婷婷基地| 婷婷5月天激情综合| www.日本久久videos| 五月激情网站| 九九色播五月丁香| 久久九九re热| 91刘玥视频在线观看| 婷婷福利影院| 五月丁香| 99热9| 91九色在线| 色五月 五月婷婷| 日日爽日日| 六月丁香久久| 99热99干| AV九九| 五月婷婷啪啪| 97碰超级人人看| 另类 在线| 五月丁香啪啪啪| 色婷婷国产精品综合在线观看| 夜夜干 夜夜操| 久久色这里只有精品| 婷婷六月激情丁香| 丁香五月23111| 伊人婷婷五月天av| 99er视频在线| 婷婷五月丁香六月天亚洲综合| 久久久99精品| 国精产品一区二区三区| 嫩BBB槡BBBB搡BBBB视频| 五月激情婷婷播播网| 去干网最新版本亚洲版| 亚洲九九99精品视频在线播放| 婷婷丁香亚洲五月天| 日本性激情色播| 操操操操操电影网| 久久性爱视频久久性爱视频| 久久久久久久久久人妻| 激情丁香五月天图片| 五月天婷婷视频小说| 久热只有精品| 人人操97| a网站免费观看| 无码少妇高潮喷水A片免费| 丁香五月婷婷色综合| 大香蕉久久视频久久视频| 激情综合色五月丁香| www.99操.com| 丁香五月天网站| 五月婷婷激情久久| 亚洲综合色网| 久久97久久99久久综合欧美| 欧美日韩婷婷五月天| 老妇操B| 久久婷婷亚洲| 狠狠色丁香婷婷综合久久97AV| 丁香五月婷婷激情123| 这里只有精品免费观看网占| 国产激情在线| 99热在线播放| 99色人| 亚洲AVDVD| 97色色色色色色色| 丁香五月在线观看完整版| 夜夜谢天天干| 久久久久人妻精品| 一二线视频 另类| WWW99视频| 色激情综合狠狠婷婷| 婷婷丁香五月天狠狠| 人人操人人干AV| 婷婷五月婷婷| 激情婷婷五月在线合集| 丁香婷婷超碰 | 婷婷日日天天| 日韩在线9| 色玖玖| 色99婷婷五月天| 99视频精品视频| 九九精品视频在线观看| 亚洲激情AV| 久久色大香蕉| 97资源碰碰| 狠狠色噜噜狠狠狠888了| 婷婷五月天视频免费在线观看| 日韩一级片| 9999热在线| 婷婷丁香五月av| 色综合综合色| 色婷婷基地| 婷婷五月成人社区| 九九综合精品| 日屌日日操日日色| 99啪啪| 超级碰碰碰久久网站| 久久婷婷五月国产色综合激情| 天天日日夜夜爽。| 开心激情站| 99热观看| 丁香伊人激情| 九热精品| 丁香五月亚洲综合丝袜| 色婷婷小说| 天天爽天天摸人妻综合网| 五月天婷婷影院| 久婷婷五月天影院| 婷婷深爱五月亚洲综合| 色999;丁香五月| 男人大jjc女人免费视频| 狠狠干综合| 国产va视频| 欧美性生交XXXXX无码小说| 久操热线| 亚洲激情.com| 五月综合色| 武则天精品久久| 夜丁香五月婷婷| 成人无码髙潮喷水A片| 日韩操逼大片| 深情五月天| 日日操夜夜擼| 色婷婷www| 婷婷五月天AV| 久操乱| 丁香五月在线伊人| 伊人超碰| 丁香视频| 色婷婷九月综合| 五月天激情小说| 六月婷婷av| 97色色视频| 亚洲mm免费| 男人天堂亚洲综合| 亚洲久热| 99色视频在线观看最新| 色99网| 丁香五月亚洲综合| VA五月激情在线| 日本久久婷| 综合一区二区三区| 丁香六月无码播放| 九九婷婷五月天| 欧美激情五月天在线观看| WWW久久久| 大香蕉久热| 亚洲色五月婷婷| 婷色影院| 日日操日日干| 色婷婷亚洲婷婷| 99久久综合| 婷婷五月激情综合| 久99久视频免费观看| 五月天啪啪啪| 五月丁香综合网| www.sezonghe| 国产一级片色色| www.婷婷五月天,com| 色人久久| 九九热九九| 欧美久久网| 五月天狠狠色| www,久久久| 久久99热这里只频精品6学生| 婷婷五月开心六月AV| 婷婷五月天日本无码| 丁香婷婷五月份| 亚洲另类婷婷五月综合| 九九视频在线观看视频6 | 97五月天婷婷午夜| 777精品久无码人妻蜜桃| 九九这里只有精品在线视频| 五月天成人综合| www,8050,午夜三级| 91精品综合久久久久久五月丁香| 操操碰| 久久精彩视频| 欧美色狠婷久| 操人无码| 午夜色色色极品视频| 亚洲色色色| 五月婷婷少妇之| 无遮挡国产高潮视频免费观看 | 五月婷婷伊人久久| 婷婷色色综合| 久热A| 婷婷自拍| 天天干天天干天天| 欧美色99| 天天弄天天操| 婷婷伊在线| 超碰免费成人网站| 天天爽天天摸| 色婷婷色综合| 九九精品亚洲| 亚洲综合在线视频| 激情五月婷| 色婷婷中文字母五月丁香| 五月色网| 99热在线免费观看精品| 艳妇野外情欲放荡HD| 天天干com| 中文字幕激情综合| 黄网免费看| 婷婷综合激情五月中文字幕| 日本视频不卡123区| 99日这里只有精品| 偷偷操99| 婷婷在线精品| 美女主播野战视步页| 美女xx不卡| 色碰碰视频| 这里只有精品视频视频在线观看| 亚洲日韩一页精品发布| 婷婷激情丁香六月| 99热99在线精品| 色色丁香| 激情亚洲色图片丁香综合| 五月婷婷激情在线| 色色丁香五月天| 成人婷婷深爱综合网| 五月丁香久久激情综合| 色哟哟www| 九九免费精品在线视频| 午夜亚洲AV日韩无码| 色噜噜狠狠一区二区三区| 伊九九三级区| 少妇被下春药玩弄A片| 天天做天天爱天天要| 久热9| 五月激情综合网| 狠狠做深爱婷婷久久综合一区| 射区导航| 色婷婷久久综合久色综| 91无码视频| 亚洲乱码日产精品BD| 99久久玖玖| 久久资源网五月婷| 一本色综合色| 伊人久久大香蕉网| 综合激情五月丁香9999久久精| 婷婷丁香五月社区亚洲| 国产成人AV在线| 色婷綜合网| 天天插天天射天天干| 99国产精品白浆在线观看免费| 婷婷娱乐丁香综合网| 五月丁香成人| 天天综合天综合久久网| 色一情一乱一乱一区91| 伊人六月丁香婷婷| 色婷久九| 色色丁香激情五月| 91 原创 在线 九色| 亚洲妇女熟BBW| 波多野结衣AV无码Porn| 婷婷五月综合色中文字幕| 欧美69色| 少妇性按摩无码中文A片 | 亚洲婷婷丁香五月天激情小说| 色五月中文字幕| 丁香五月综合| 婷婷色婷婷| 99色热视频| 热久国产| 色五月噜噜| 五月丁香激情综合| 五月开心网| 五月丁香激情婷婷综合字幕| 超碰97干| 黄色高清无码| www.久久| 色婷婷激情| 开心五月婷婷在线| 这里只有精品亚洲| 丁香五月天社区婷婷| 狠狠干,狠狠操| 国产精品社区| 五月婷婷婷婷婷| 激情婷婷五月女| 亚洲综合在线播放| 欧美A级成人婬片免费看理论| 亚洲午夜视频| 日韩在线婷婷五月天综合| 婷婷欧美色| 99ri视频在线播放| 丝袜熟女一区二区三区| 人妻久久久久久| 综合婷婷久久| 五月天综合婷婷| hd五月婷婷在线| 色五月天.con| 婷婷综合日本| 97操碰人免费| 久草热久草在线视频| 六月婷婷开心| 婷婷六月激情| 男人的天堂五月丁香| 97色五月婷婷在线|