欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

基于YOLOv5 4.0的垃圾分揀目標(biāo)檢測實戰(zhàn):從環(huán)境配置到部署

基于YOLOv5 4.0的垃圾分揀目標(biāo)檢測實戰(zhàn):從環(huán)境配置到部署 垃圾分揀項目找上門的時候我心里其實是有點打鼓的——場景看著簡單不就是幾個垃圾桶里的瓶瓶罐罐嘛真做起來才知道要在傳送帶上一秒抓一個目標(biāo)還要兼顧準(zhǔn)確率和部署成本光靠通用檢測模型是行不通的。當(dāng)時團隊里有同事提了一嘴用YOLOv5 4.0版本來做目標(biāo)檢測我抱著試一試的心態(tài)跑通了全套流程從環(huán)境配置到數(shù)據(jù)集制作再到模型訓(xùn)練最后落地成一條可用的分揀業(yè)務(wù)流。這篇博客就把這整條鏈路攤開講環(huán)境怎么配、數(shù)據(jù)怎么標(biāo)、模型怎么調(diào)、坑在哪里全部按實操順序來適合剛接手檢測項目、尤其是想在工業(yè)場景里做視覺分揀的同學(xué)參考。我用的硬件是普通工作站加一塊中端顯卡沒有上集群也沒有買高配服務(wù)器YOLOv5 4.0這套東西對硬件的要求其實比想象中低但環(huán)境搭不對照樣跑不起來。先別急著下載代碼下面從環(huán)境配置開始把每一步拆清楚。1. 環(huán)境配置裸機到能跑通的完整清單以及為什么4.0版本這么選1.1 Python環(huán)境與系統(tǒng)版本選擇YOLOv5 4.0版本發(fā)布于2021年中段它的依賴鎖得不算死但也不是隨便拿個Python版本就能跑。我實測比較穩(wěn)的組合是Python 3.8.10或3.9.7這兩個版本在Windows和Linux下都能正常編譯torch擴展。Python版本別選太高3.10及以上在部分機器上裝torch1.9會碰到二進制兼容問題得不償失。Windows下我建議用Anaconda創(chuàng)建獨立虛擬環(huán)境Linux下用conda或venv都行。我的習(xí)慣是創(chuàng)建虛擬環(huán)境conda create -n yolov5 python3.8激活環(huán)境conda activate yolov5確認pip版本pip install --upgrade pip這里有個很多人會忽略的細節(jié)YOLOv5 4.0的requirements.txt里torch和torchvision的版本是帶“”的比如torch1.7.0。如果直接無腦安裝最新版torch碰上CUDA版本不匹配的概率很高。我當(dāng)時踩過一個坑——裝完最新torch后模型訓(xùn)練時loss直接nan查了半天是顯卡驅(qū)動和CUDA庫不匹配。后來老老實實按官網(wǎng)推薦的匹配表來一次性跑通。1.2 CUDA、cudnn與torch版本匹配這一步是環(huán)境配置里最核心、也最容易炸的一環(huán)。YOLOv5 4.0本身不做CUDA強綁定但GPU訓(xùn)練必須用正確的驅(qū)動。我的經(jīng)驗是顯卡驅(qū)動版本決定你能支持到哪一版CUDA Toolkit命令nvidia-smi看右上角的CUDA Version這個數(shù)字是驅(qū)動支持的最高版本不代表你的環(huán)境已經(jīng)裝了對應(yīng)CUDA。實際訓(xùn)練時用的CUDA是torch自帶的不需要單獨安裝完整的CUDA Toolkit但你需要確保驅(qū)動夠新。cudnn也建議裝一下雖然torch可以自動加載部分算子但我遇到過推理速度忽高忽低的情況后來發(fā)現(xiàn)是cudnn未配置導(dǎo)致卷積算法未被優(yōu)化。我這邊的穩(wěn)定組合是驅(qū)動470.xx CUDA 11.1 cudnn 8.0.5 torch 1.9.0 torchvision 0.10.0。裝torch用官方匹配索引pip install torch1.9.0cu111 torchvision0.10.0cu111 -f https://download.pytorch.org/whl/torch_stable.html裝完后驗證一下python -c import torch; print(torch.cuda.is_available())顯示True就說明GPU路線通了。這一步值得多花半小時確認因為后面所有訓(xùn)練時間都依賴這個基礎(chǔ)。1.3 下載YOLOv5 4.0源碼與環(huán)境依賴YOLOv5 4.0的代碼結(jié)構(gòu)相比后來的5.0、6.0版本要簡潔不少特別適合學(xué)習(xí)或者二次改造。官方倉庫的tag切換成v4.0也可以直接下載zip包解壓。解壓后目錄里最顯眼的就是train.py、detect.py、models、data、utils這些模塊。接下來安裝依賴pip install -r requirements.txtrequirements里包含numpy、opencv-python、matplotlib、pyyaml、tqdm這些常用庫還有pycocotools用于COCO指標(biāo)計算。如果是在Windows上pycocotools安裝失敗的概率比較大官方推薦裝pycocotools-windows。我試過兩次裝Windows版可以避免編譯報錯安裝命令是pip install pycocotools-windows依賴裝完后可以立刻用預(yù)訓(xùn)練權(quán)重跑一次demo驗證全鏈路是否通。做法是下載yolov5s.pt放進weights目錄然后執(zhí)行python detect.py --source data/images/bus.jpg --weights weights/yolov5s.pt如果能看到圖像窗口彈出并繪制出檢測框就說明環(huán)境徹底通了。這一步我建議別跳過因為很多問題會在第一次推理時就暴露。1.4 垃圾分揀場景為什么選用4.0版本這個選擇值得多說一句。4.0版本的網(wǎng)絡(luò)結(jié)構(gòu)以CSPDarknet53為主配合PANet特征融合層它的anchor設(shè)置和損失函數(shù)已經(jīng)相當(dāng)成熟訓(xùn)練小目標(biāo)比如礦泉水瓶的瓶蓋效果也能接受。相對于更新的6.0版本4.0的代碼結(jié)構(gòu)更直白修改anchor或自定義dataloader的難度更低對于垃圾分揀這種類別不算多、背景相對固定的場景完全夠用。垃圾分揀業(yè)務(wù)的特殊性在于一是類別少但形態(tài)差異大比如塑料瓶和紙箱的寬高比就完全不同二是場景里會出現(xiàn)密集堆疊的情況目標(biāo)之間互相遮擋對NMS閾值和anchor尺寸特別敏感。4.0版本的自適應(yīng)anchor計算功能和多尺度訓(xùn)練恰好能處理這部分問題。而且4.0版本推理權(quán)重文件更小后續(xù)導(dǎo)出ONNX或TensorRT的兼容性也更好。2. 數(shù)據(jù)集制作垃圾圖片的采集、標(biāo)注與劃分2.1 采集什么樣的圖片才有用訓(xùn)練垃圾分揀模型最忌諱的是圖片太“干凈”。很多團隊圖省事從網(wǎng)上下載了一堆商品圖背景是純白或純灰結(jié)果模型在實驗室里AP高到0.99一到傳送帶上就拉胯。為什么會這樣因為模型的泛化能力來自背景多樣性、光照差異、角度變化和信息噪音。我自己整理數(shù)據(jù)時定了三條硬標(biāo)準(zhǔn)背景必須多樣化覆蓋傳送帶、垃圾桶、地板、戶外、不同光照條件。目標(biāo)必須有多角度每個類別至少要拍到360度不同姿態(tài)同時包含俯視、側(cè)視、傾斜視角。必須有遮擋和堆疊樣本分揀業(yè)務(wù)里瓶子會疊在一起紙箱會半開口如果訓(xùn)練集里全是單目標(biāo)完美擺放模型永遠學(xué)不會處理實際工況。采集方法上我推薦用視頻抽幀而不是連拍照片。拿手機或工業(yè)相機對著垃圾堆橫向掃一遍錄10分鐘視頻然后每隔3到5幀抽一張這樣能極大豐富目標(biāo)姿態(tài)。抽幀腳本用OpenCV寫就行幾十行代碼搞定。2.2 標(biāo)注工具與標(biāo)注規(guī)范YOLOv5 4.0的標(biāo)注格式是每個圖片對應(yīng)一個txt文件每行是class_id x_center y_center width height坐標(biāo)值都需要歸一化到0到1之間。很多同學(xué)第一次做標(biāo)注會用labelimg生成VOC格式的XML然后再轉(zhuǎn)YOLO格式其實labelimg本身就直接支持YOLO格式輸出不用多這一步轉(zhuǎn)換。我用的工具是labelimg操作要點如下打開labelimg點擊“PascalVOC”切換成“YOLO”模式。用Open Dir打開圖片目錄Change Save Dir指定標(biāo)簽保存目錄??旖萱IW新建框D下一張A上一張CtrlS保存。標(biāo)注規(guī)范這塊垃圾分揀很容易犯“框得太大”的毛病——把瓶子周圍的背景也包進去了。正確的做法是框要緊貼目標(biāo)可見部分的外輪廓如果目標(biāo)被部分遮擋就標(biāo)可見部分不要臆想完整的形狀。置信度閾值在訓(xùn)練時會因為框不準(zhǔn)確而出現(xiàn)嚴重波動寧可框小一點也不要框大。類別定義我建議用英文做標(biāo)簽名比如plastic_bottle、cardboard_box、aluminum_can、other_waste后面在yaml文件里再映射中文顯示名。這個習(xí)慣可以避免很多編碼問題。2.3 數(shù)據(jù)集劃分與目錄結(jié)構(gòu)YOLOv5 4.0期待的目錄結(jié)構(gòu)有兩種一種是官方COCO式的images和labels兩個大目錄然后在yaml里指定train和val路徑另一種是每個數(shù)據(jù)集子集單獨建目錄比如dataset/ ├── images/ │ ├── train/ │ └── val/ └── labels/ ├── train/ └── val/兩種都行我推薦第二種因為后續(xù)擴展test集更清晰。劃分比例我按8:1:1也就是80%訓(xùn)練、10%驗證、10%測試。注意劃分的時候要保證同一個物體的不同圖片不要被割裂得太嚴重但也不要刻意把同一視頻幀的數(shù)據(jù)全放一組否則驗證集會虛高。一個細節(jié)垃圾分揀數(shù)據(jù)集的類別數(shù)量不建議超過10類除非你確實需要區(qū)分很多細分材質(zhì)。類別越多每個類的訓(xùn)練樣本數(shù)就會攤薄模型在傳送帶高速場景下的誤檢率會明顯上升。我們項目初期定了12類訓(xùn)練后mAP只有0.78后來合并成8類mAP直接漲到0.92所以寧可在類別定義上做文章也別硬扛分類細度。2.4 數(shù)據(jù)增強策略與臟數(shù)據(jù)清洗YOLOv5 4.0的train.py里自帶數(shù)據(jù)增強包括mosaic、mixup、隨機透視、HSV擾動、隨機翻轉(zhuǎn)這些。對于垃圾分揀場景最有用的是mosaic和HSV擾動。因為垃圾材質(zhì)的顏色受光照影響特別大塑料瓶在不同燈光下反光效果完全不同HSV擾動會讓模型忽略顏色絕對數(shù)值、更多學(xué)習(xí)形狀和紋理特征。但增強也不是越狠越好。我在訓(xùn)練過程中發(fā)現(xiàn)mixup開啟過強會導(dǎo)致模型對小目標(biāo)的定位框偏移尤其是瓶蓋這種小物件。4.0版本里通過超參數(shù)hsv_h、hsv_s、hsv_v可以調(diào)節(jié)增強幅度我習(xí)慣把hsv_s和hsv_v調(diào)低到0.4左右保留一點顏色信息又不至于讓材質(zhì)失真。臟數(shù)據(jù)清洗是很多人忽略的一步。標(biāo)注完以后我建議跑一次分析腳本查看每類目標(biāo)的數(shù)量、目標(biāo)面積分布、圖片像素寬度比。如果發(fā)現(xiàn)某張圖片的標(biāo)簽特別多比如20多個框或者框面積小于圖片面積的0.1%這種樣本在訓(xùn)練時往往會算進太多背景負樣本必要時可以直接刪除。另外如果兩張圖片內(nèi)容幾乎一樣也會導(dǎo)致過擬合需要做去重。3. 模型訓(xùn)練參數(shù)調(diào)整、訓(xùn)練過程監(jiān)控與過擬合排查3.1 從預(yù)訓(xùn)練權(quán)重開始訓(xùn)練的底層邏輯垃圾分揀數(shù)據(jù)集規(guī)模通常只有幾千張從頭訓(xùn)練一個檢測模型非常虧。YOLOv5 4.0提供了一組在COCO上預(yù)訓(xùn)練好的權(quán)重這些權(quán)重已經(jīng)學(xué)會了“什么是物體邊緣”“什么是紋理”“什么是遮擋”這些通用特征。我們只需要在它的基礎(chǔ)上微調(diào)最后幾層讓它更懂“瓶子”“紙箱”“易拉罐”這幾個具體類別的模樣。我在項目里使用yolov5s.pt作為初始權(quán)重考慮到部署設(shè)備是嵌入式級別的板卡沒有直接上yolov5l或者yolov5x。有個常見誤區(qū)是模型越大效果越好但垃圾分揀的實時性要求很高yolov5s在1080Ti上推理能達到6到8毫秒一幀完全夠用yolov5l雖然mAP高一點但推理時間翻倍工業(yè)現(xiàn)場根本用不了。訓(xùn)練命令python train.py --data garbage.yaml --cfg models/yolov5s.yaml --weights weights/yolov5s.pt --batch-size 16 --epochs 200 --img 640--img 640的含義是訓(xùn)練輸入尺寸640x640垃圾分揀目標(biāo)一般中等偏小這個尺寸比較平衡。如果追求更快的訓(xùn)練能把尺寸降到416但小目標(biāo)的召回率會下降不太推薦。3.2 數(shù)據(jù)配置yaml文件寫法與anchor調(diào)整在寫yaml文件前我建議先按官方數(shù)據(jù)集格式組織目錄。garbage.yaml的寫法如下train: dataset/images/train val: dataset/images/val test: dataset/images/test nc: 8 names: [plastic_bottle, cardboard_box, aluminum_can, glass_bottle, plastic_bag, wood_block, metal_parts, other_waste]這里面最容易出問題的是路徑寫法。YOLOv5 4.0中路徑可以寫相對路徑也可以寫絕對路徑我在Windows上碰到過一次路徑分隔符反斜杠導(dǎo)致的讀取失敗改成正斜杠就正常了。Anchor是YOLOv5一個比較特別的設(shè)計。4.0版本在訓(xùn)練時會自動根據(jù)標(biāo)注數(shù)據(jù)重新計算anchor尺寸所以如果數(shù)據(jù)集里目標(biāo)比COCO普遍小很多anchor會自動變小不需要手工調(diào)整。但自動anchor計算也有個前提——目標(biāo)標(biāo)注必須足夠準(zhǔn)確。如果標(biāo)注框普遍松弛計算出的anchor也會偏大。訓(xùn)練日志里會有這樣一句Autoanchor: 4.6 anchors, 8.2, 9.1, etc, Better than old anchors看到這句話就說明anchor已經(jīng)重算過了。如果顯示Unchanged anchors說明預(yù)設(shè)anchor已經(jīng)夠用不用擔(dān)心。3.3 訓(xùn)練過程中的指標(biāo)監(jiān)控與loss曲線判斷訓(xùn)練時我最關(guān)心的不是總loss而是box_loss、obj_loss和cls_loss這三個分量的變化。YOLOv5 4.0訓(xùn)練會實時打印類似這樣的內(nèi)容Epoch 0: box_loss0.068, obj_loss0.035, cls_loss0.021, precision0.52, recall0.65, mAP0.50.48如果box_loss一直下降說明定位框?qū)W習(xí)正常如果obj_loss降不下去說明目標(biāo)和背景的區(qū)分度不夠這時候需要考慮增加難負樣本比如空垃圾袋、紙屑這類容易被當(dāng)成目標(biāo)的“疑似物”cls_loss抖動劇烈往往和某個類別的樣本過少有關(guān)。我更習(xí)慣用tensorboard實時監(jiān)控曲線YOLOv5 4.0自帶了tensorboard --logdir runs的啟動命令。訓(xùn)練了大概50輪后能明顯看到曲線斜率變緩這是正?,F(xiàn)象。到150輪左右mAP基本穩(wěn)定再往后訓(xùn)練收益很低反而有過擬合風(fēng)險。3.4 過擬合問題排查一個典型的分揀業(yè)務(wù)案例我們項目第一次訓(xùn)練時驗證集mAP達到了0.94很漂亮但現(xiàn)場實測識別率只有0.6。這種現(xiàn)象幾乎可以斷定是過擬合。怎么排查先看訓(xùn)練集和驗證集的loss曲線。如果訓(xùn)練集loss持續(xù)下降而驗證集loss在第120輪后開始反彈說明模型開始死記硬背訓(xùn)練集特征了。我做了三件事關(guān)掉部分數(shù)據(jù)增強將--cache的緩存大圖勾選去掉同時調(diào)低mosaic概率。增加驗證集數(shù)量原驗證集只占總數(shù)據(jù)5%后來重新劃分成15%。在模型最后一層加dropoutYOLOv5沒有簡單的dropout開關(guān)但可以通過降低模型深度系數(shù)、增加正則化來緩解。我把yolov5s.yaml的depth_multiple從0.33降到0.3相當(dāng)于讓模型變窄一點強制它學(xué)更抽象的特征。這三步做完現(xiàn)場識別率恢復(fù)到0.88。經(jīng)驗就是垃圾分揀場景的數(shù)據(jù)集規(guī)模不會太大與其追高訓(xùn)練集指標(biāo)不如把驗證集指標(biāo)壓穩(wěn)。3.5 訓(xùn)練完成后的指標(biāo)評估與選擇best.pt還是last.pt訓(xùn)練結(jié)束會在runs/train/exp下生成兩個權(quán)重文件best.pt和last.pt。名字已經(jīng)說明了一切——best.pt是訓(xùn)練過程中驗證集mAP最高的權(quán)重last.pt是最后一輪的權(quán)重。工業(yè)落地上我強烈建議用best.pt但要注意best.pt的“best”是基于驗證集算出來的驗證集和實際分揀場景可能還有分布差異。穩(wěn)妥的做法是挑三到四個不同訓(xùn)練階段的best.pt用現(xiàn)場錄像截圖做成一個獨立測試集跑val.py對比出真正的“最優(yōu)”。這個額外驗證步驟能過濾掉很多“紙面mAP大師”。另外驗證集mAP0.5和mAP0.5:0.95的區(qū)別也要關(guān)注。垃圾分揀業(yè)務(wù)一般只看mAP0.5因為分揀機械臂抓取時并不嚴格要求框和真實目標(biāo)的高度貼合IOU閾值0.5已經(jīng)足夠。如果mAP0.5:0.95很低但mAP0.5很高說明定位精度一般但對業(yè)務(wù)夠用。4. 部署到分揀業(yè)務(wù)流模型導(dǎo)出、推理加速與現(xiàn)場調(diào)優(yōu)4.1 從PyTorch到ONNX再到TensorRT的導(dǎo)出路徑訓(xùn)練完后的PyTorch權(quán)重沒法直接在生產(chǎn)環(huán)境里跑需要一個導(dǎo)出過程。YOLOv5 4.0自帶了export.py能導(dǎo)出ONNX、TorchScript、CoreML等格式。我這邊最終部署用的是TensorRT因為分揀工位的算力卡非常怕CPU推理而TensorRT能最大程度利用GPU的并行能力。導(dǎo)出ONNX的命令python export.py --weights runs/train/exp/best.pt --include onnx --opset 11導(dǎo)出時會有一個注意點YOLOv5 4.0的檢測頭里有部分動態(tài)shape操作直接用onnxruntime跑會報錯需要在export時加--dynamic參數(shù)。但我更推薦的是一步到位導(dǎo)出TensorRT enginepython export.py --weights best.pt --include engine --device 0TensorRT引擎是序列化過的優(yōu)化計算圖推理速度比ONNX還快。前提是TensorRT版本和你用的CUDA版本兼容我這邊用了TensorRT 8.0配合CUDA 11.1非常順。4.2 推理端代碼改造與輸入預(yù)處理YOLOv5 4.0官方detect.py是面向演示的直接放到生產(chǎn)環(huán)境會有問題一是每幀都打印日志和畫框影響吞吐二是一次只能處理單張圖無法應(yīng)對連續(xù)幀流水。我改造推理端時做了三件事移除可視化部分只返回檢測框數(shù)組。使用torch.cuda.synchronize()控制幀率。把輸入圖像resize為640x640時使用letterbox方式保留長寬比而不是強制拉伸。這個細節(jié)極其重要——垃圾瓶子細長如果拉伸變形寬高比信息丟失檢測框會嚴重偏移。letterbox的算法本身很簡單計算縮放比例補邊為114像素的灰色。YOLOv5 4.0的utils里已經(jīng)有l(wèi)etterbox函數(shù)直接復(fù)用即可。如果你自己寫一定要記得在推理前對圖像執(zhí)行同樣的預(yù)處理、推理后對坐標(biāo)做反向映射。4.3 NMS閾值和置信度閾值的現(xiàn)場調(diào)優(yōu)模型訓(xùn)練時的閾值和部署時的閾值是兩回事。訓(xùn)練階段的conf_thres和iou_thres影響的是mAP計算方式部署階段的這兩個參數(shù)直接決定現(xiàn)場檢測行為。我剛開始部署時用的默認閾值conf_thres0.25, iou_thres0.45結(jié)果是傳送帶上偶爾漏撿。后來把conf_thres降到0.15把iou_thres調(diào)到0.5漏檢率好了不少但誤檢略有增加。于是我在中間加了一個按類別設(shè)定閾值的邏輯對“塑料瓶”這種形態(tài)穩(wěn)定的類別用0.3對“其他垃圾”這種外形不規(guī)則的類別用0.15。這樣整體識別效果更符合分揀業(yè)務(wù)的需求。還有一個坑當(dāng)目標(biāo)密集堆疊時NMS的max_det參數(shù)默認是300如果一幀圖像里檢測超過300個框后面的目標(biāo)會被丟棄導(dǎo)致漏檢。垃圾分揀場景單幀一般不超過50個目標(biāo)所以我把max_det設(shè)為100減少內(nèi)存壓力。4.4 現(xiàn)場現(xiàn)場光照變化與魯棒性驗證分揀傳送帶的現(xiàn)場環(huán)境遠不是實驗室那種穩(wěn)定光源。我在部署時發(fā)現(xiàn)上午9點陽光照進廠房時模型對“鋁罐”的識別率跌了20%。原因是鋁罐高光反射蛋白白色區(qū)域在圖片里和透明塑料袋特別像。解決方案不是重新采集大量視頻數(shù)據(jù)而是先用opencv對接入攝像頭的曝光參數(shù)做了硬約束把曝光時間固定、自動白平衡關(guān)閉。另外在內(nèi)網(wǎng)里部署了夜間紅外補光燈進一步杜絕環(huán)境光波動。這種工程手段比加數(shù)據(jù)更直接。但注意如果換了攝像頭型號曝光參數(shù)需要重新標(biāo)定不能直接套用。4.5 與PLC和機械臂的聯(lián)動邏輯分揀業(yè)務(wù)的最終目標(biāo)是把檢測結(jié)果轉(zhuǎn)成機械臂抓取指令。這里有個檢測速度之外的瓶頸YOLOv5推理返回的是圖像坐標(biāo)系里的框坐標(biāo)而機械臂需要的是相機坐標(biāo)系或世界坐標(biāo)系下的抓取點。我的做法是先用張正友標(biāo)定法對相機做內(nèi)參標(biāo)定再通過手眼標(biāo)定建立相機到機械臂底座的變換矩陣。之后推理出的目標(biāo)中心點坐標(biāo)通過矩陣變換映射到機械臂空間。由于傳送帶一直在動我還加了一個簡單的速度補償根據(jù)傳送帶線速度和檢測到目標(biāo)到機械臂末端的運動時間差預(yù)測目標(biāo)到達抓取點時的新位置。這部分一開始用固定速度仿真效果還行但實際傳輸帶速度波動時會抓偏后來在編碼器上加了一個滑動平均濾波誤差控制在0.5厘米以內(nèi)。這一整套邏輯下來從圖像采集到最后機械臂抓取端到端延遲大概在120毫秒左右滿足低中速傳送帶0.3米/秒以下的分揀需求。5. 訓(xùn)練之外必須知道的事數(shù)據(jù)迭代閉環(huán)和成本控制5.1 建立“臟樣本回流”機制模型上線后絕對不是一勞永逸。分揀現(xiàn)場每周都會出現(xiàn)新的“意外垃圾”比如濕紙巾、果皮、捆扎帶這些在訓(xùn)練集里根本沒有對應(yīng)類別模型會強行把它們預(yù)測成最相近的類別結(jié)果機械臂抓了不該抓的東西。解決方法是建立回流機制現(xiàn)場IPC把置信度低于0.3的檢測框和對應(yīng)截圖自動保存到一個“待標(biāo)注”目錄。每隔兩周標(biāo)注人員只處理這些新增難例補充到訓(xùn)練集重新訓(xùn)練一輪。這個機制第一周就幫我們發(fā)現(xiàn)了70多個誤檢案例第二周模型識別率又漲了4個百分點。對于垃圾分揀這種長尾分布極其明顯的場景這個閉環(huán)比一開始堆數(shù)據(jù)集更經(jīng)濟、更有效。5.2 硬件選型與訓(xùn)練時間成本估算在訓(xùn)練成本上YOLOv5s用單張1080Ti訓(xùn)練200輪、每輪約1000張圖大概需要2.5到3小時。如果是用CPU訓(xùn)練同樣的工作量可能要40個小時以上。所以哪怕只是短期項目我也建議租一塊云GPU來跑訓(xùn)練而不是用本機CPU硬抗。訓(xùn)練完成后把best.pt拉回本地部署即可。數(shù)據(jù)集標(biāo)注成本也要算清楚每張圖如果有2到3個目標(biāo)熟練標(biāo)注員每小時能標(biāo)注80到120張圖。一個3000張圖的垃圾數(shù)據(jù)集純標(biāo)注工作在25小時左右??雌饋聿欢嗟由腺|(zhì)量檢查和返工實際大概需要2人日。所以標(biāo)注前定嚴格規(guī)范非常有必要否則返工成本會翻倍。5.3 類別不均衡和背景負樣本的取舍垃圾分揀數(shù)據(jù)集里塑料瓶往往占60%以上而金屬零件可能只有5%。直接按原始分布訓(xùn)練模型會對金屬零件類別的召回率特別低。我的做法是對樣本量少的類別做離線復(fù)制增強不是簡單的復(fù)制粘貼而是對該類圖片做小幅旋轉(zhuǎn)、平移、縮放后重新保存為新的樣本。同時在下采樣階段限制每張圖每類的實例數(shù)不超過30防止一個場景里的同類別目標(biāo)刷屏導(dǎo)致訓(xùn)練失衡。背景負樣本是另一個容易被忽略的坑。分揀場景里空無一物的傳送帶圖片在訓(xùn)練集里一張都不能少。這些負樣本能讓模型的obj_loss快速收斂減少誤報。我每批次會混入5%到10%的空背景圖效果很明顯。5.4 模型更新時的權(quán)重管理每個版本迭代出的best.pt我都會在權(quán)重文件名里加上日期和數(shù)據(jù)量后綴比如best_20240601_3200img.pt。這樣在比對現(xiàn)場效果時能快速定位到底是哪套數(shù)據(jù)訓(xùn)出來的模型。有一次現(xiàn)場反饋識別率下降排查了半天發(fā)現(xiàn)是某個同事用了舊版模型文件沒有同步更新。權(quán)重管理聽著啰嗦但在工業(yè)項目里非常重要。另外最好保留訓(xùn)練當(dāng)時的opt.yaml文件YOLOv5 4.0每次訓(xùn)練都會自動保存。這個文件記錄了所有超參數(shù)想要復(fù)現(xiàn)結(jié)果或排查差異時直接載入即可不用猜。6. 一段供直接參考的完整訓(xùn)練流程腳本這里把我自己在項目里常用的訓(xùn)練流程串起來給你一份可以照抄的清單不包含花哨操作只保留穩(wěn)定跑通的部分。# 1. 激活環(huán)境 conda activate yolov5 # 2. 數(shù)據(jù)目錄準(zhǔn)備好后先驗證標(biāo)注格式 python -c import os img_dir dataset/images/train label_dir dataset/labels/train count 0 for img in os.listdir(img_dir): label os.path.join(label_dir, img.replace(.jpg, .txt)) if not os.path.exists(label): print(缺少label:, img) count 1 print(缺失標(biāo)簽數(shù)量:, count) 運行這個驗證腳本能第一時間發(fā)現(xiàn)漏標(biāo)問題比直接開訓(xùn)練再報錯要高效得多。我曾經(jīng)靠這個腳本一次性找出37張漏標(biāo)圖片。# 2. 修改garbage.yaml路徑確認nc和names正確 # 3. 開始訓(xùn)練 python train.py --data garbage.yaml --cfg models/yolov5s.yaml --weights weights/yolov5s.pt --batch-size 16 --epochs 200 --img 640 --project garbage_project --name v1 # 4. 訓(xùn)練完后在runs/train/garbage_project/v1/weights下找到best.pt # 5. 用val.py評估測試集 python val.py --data garbage.yaml --weights runs/train/garbage_project/v1/weights/best.pt --img 640 # 6. 導(dǎo)出TensorRT engine python export.py --weights runs/train/garbage_project/v1/weights/best.pt --include engine --device 0我訓(xùn)練時加過很多額外參數(shù)比如--cos-lr、--label-smoothing但實測下來對垃圾分揀數(shù)據(jù)集提升不大反而增加了訓(xùn)練時間。如果你是第一次跑建議先不加這些花哨參數(shù)跑通整條鏈路再說。關(guān)于批次大小如果顯存只有8G--batch-size 16跑640分辨率可能會OOM可以把batch降到8或者把--img降到544。不要為了湊batch瘋狂調(diào)低分辨率垃圾分揀的小目標(biāo)會因此丟失得不償失。7. 最后再分享一些實際部署中的小心得這個項目前后折騰了將近兩個月最深的體會是YOLOv5 4.0本身只是一個工具真正的難點全都在工具之外。環(huán)境配置看起來繁瑣但按部就班來半天時間絕對能搞定數(shù)據(jù)集制作才是整個項目里最花時間的部分占掉了我六成精力而模型訓(xùn)練反而最簡單因為官方代碼已經(jīng)足夠成熟剩下的事情就是盯曲線、調(diào)閾值。再提一個很多人沒注意到的細節(jié)4.0版本的--cache參數(shù)官方默認表示緩存圖片到內(nèi)存如果內(nèi)存不足會有警告。但很多教程會把--cache當(dāng)成默認照抄下來我建議顯存緊張時不要開緩存否則訓(xùn)練過程中可能因為內(nèi)存交換導(dǎo)致整機卡死。我踩過的另一個坑是Windows平臺上PyTorch的DataLoader多線程問題。如果num_workers設(shè)得過高在Windows下會出現(xiàn)DataLoader worker超時導(dǎo)致訓(xùn)練中斷。建議Windows用戶把--workers設(shè)為0或2Linux下可以設(shè)到8。分揀業(yè)務(wù)流真正落地時視覺檢測只是其中一環(huán)機械臂的軌跡規(guī)劃、傳送帶的啟停邏輯、PLC信號的時序配合每一個環(huán)節(jié)都需要跨團隊溝通。作為算法工程師別只顧著調(diào)模型多去現(xiàn)場看看機械臂抓空或者抓漏的瞬間很多模型上的問題在現(xiàn)場看一次就明白了。代碼和數(shù)據(jù)可以隨時更新但現(xiàn)場的經(jīng)驗不會自動積累。希望這篇內(nèi)容能讓你少踩一些我踩過的坑也歡迎交流你們在垃圾分揀或者類似檢測場景里遇到的具體問題。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
五月婷婷开心爱| 久久九九@| 丁香激激情网| 五月色亭丁香| 五月丁香影院| 亚洲成人网站在线播放| 99热这里只有精品18| 99伊人婷婷在线| 超碰女人天堂| 91综合在线观看| 精品色色网| 精品欧美性爱超级爽| 丁香五月婷婷天激情| 婷婷九月在线| 色婷婷五月在线| 玖玖99免费视频| 日本九九九九| 99综合视频一体| 99视频网| 99视频日韩| 国产精品大香蕉| 国产乱妇无乱码大黄AA片| 久热a| 婷婷激情小说| 六月99天天婷婷激情综合| 大香蕉视频婷| 亚洲亚洲人成综合网络| 九月婷婷综合| 日韩性视频| 狠狠xx| 午夜婷婷| 91色综合| 婷婷天天综合| 久操大香蕉| 99热销国产这里有精品| 丁香五月色激情| 丁香九月久久| 亚洲视频二区| 久久爱综合| 另类图片色五月| 色99欧洲色19| 婷婷五月天资源| 五月在线婷色| 国产裸舞福利资源在线视频| 六月99天天婷婷激情综合| 国产精产国品一二三在观看| 天天干,夜夜爽| 亚洲色小说在线综合| 九九热这里只有精品5| 色婷婷色和| 欧美搡BBBBB摔BBBBB| 99综合久久| 人人爽天天爽| 狼友超碰| 精品成人久久久久久久_一二三四视| 思思99热这里只有精品6| 丁香五月激情综合| 天天做天天视天天谢| WWW,五月| 91热久久| 欧洲亚洲免费视频区| 久久婷婷综合网| 香蕉乱插| 丁香九月综合| 久久丁香婷婷五月天| 欧美三级欧美一级| 色久婷婷网| 天天艹天天综合网| 亚洲看av的网站| wwxx日本| 极品 少妇 内射| 久久激情综合| 日本五月婷| 婷婷五月天另类网站| 26uuu激情五月天| 婷婷丁香久久五月综合| 欧美成人精品一区二区| 五月丁香亚洲五月| 俺去也五月天婷婷| 六月婷婷色综合| 激情五月综合| 99热这里只有精品66| 久久久激情| 久久婷婷亚洲| 91精品啪| 五月伊人综合| 天天色综合网1| 五月丁香六月婷婷亚洲综合| 91seav| 国产97色在线| 婷婷综合仓库中文| 97人人操| 色高清无码视频| 99热最新网址| 色情五月综合婷婷| www.第四色99| 亚洲日韩国产黑丝黑丝AVAV一区二区三区| 五月丁香九九九综合| 亚洲AV成人无码久久精品老人法拉利| 综合啪啪| 日韩操啪| 天天做天天爱天天爽在| 亚洲无码11| 天天爽天天爽| 久久婷婷草| 五月婷婷丁香综合| 丁香六月婷婷综合在线| 九九99在线免费在线观看视频| 91操人视频| 九九在线热九九在线热99热| 婷婷五月激情图片| 热99久久这里只有精品| 久久99精品久久只有精品| 八戒青柠影视剧在线观看| 天天射天天操天天干| 亚洲一级AV在线免费播放| 成人AV在线电影| 夜夜操少妇| 国产精品美女| 中文婷婷狠狠| 校园激情 亚洲| 97色97干| 久久久久久久久久久月丁| 激情九月综合| 伦99热| 热久91| 亚洲av免费在线| 亚州精品久久久久AV无码| 九九精品亚洲| 激情婷婷五月综合| 久久久久久天天日天天爱| 国产另类综合| 俺去也五月| 五月天丁香婷婷社区| 伊人天天色| 成人av播放| 中日韩美欧成人一区二区精品在线| 久xxxx| 五月婷婷网久久| 日熟女| 五月天色小说| 99无码免费视频| 任你操精品免费| 婷婷视频在线碰| 婷婷欧美色| 人人爱人人草| 91在线视频综合| 亚洲狠狠操| 91九色在线| 91九色熟女| 99re这里只有精品视频了| 4399成人黄A片| 色情五月天丁香社区| 婷婷的99视频网站| www.夜夜操| 中字幕视频在线永久在线观看免费| 五月婷婷六月丁香综合| 婷婷精品视频| 精品九九在线观看视频| 婷婷激情综合网| 国产精典视频在线观看| 99热这里只有精品3| 亚洲色综久久五月| 久久玖玖99| 激情五月天开心网丁香无码| 免费看欧美成人A片无码| 9.1综合网| 99爱视频在线| 日日噜噜久久婷婷五月天| 五月天婷婷影院| 手机旧版看人妻1025| 亚洲国产99| 野外99热| 91九色视频| 色天使色婷婷| 99热免费精品| xfplayav在线| 久久人五月| 色综啪啪网| 综合伊人狠狠| 婷婷五月天网址| 激情六月婷婷| 日本欧美成人片AAAA| 天天色99| 另类激情五月在线视频欧美| 国产xxxxx在线观看| 亚洲热视频| 在线超碰免费| 色久综合天天做视频| 亚洲狠狠婷婷综合久久久| 二色av| 九九蜜臀精品| 欧美天堂婷婷日韩| 五月天影院| 91热在线| 久久思思热| 深爱女色婷婷丁香五月亚洲图区| 中国操逼99| www.lingjunshare.com| 久久婷婷网| 九九無妻| 99精品大片| 国产黄色一级片| 国产91视频| 色情综合| 91在线视频观看午夜福利| 五月丁香婷婷基地| 天天摸.天天mo| AA片在线观看视频在线播放| 天天天在线观看| 亚洲成人在线播放| 91色欲综合| 日日夜夜婷婷| 综合激情五月丁香| 九热...av| 色五月成人| 97五月天婷婷| 五月天婷亚洲天综合网综合| 色色婷婷色色| 国产精品a无线| 激情5月婷婷| AV成人在线播放| 国外亚洲成AV人片在线观看| 欧美97色| 野战毛片三一3| 99ri国产| 噜噜操操| 欧美激情久| 精品在线网站| 九九色黄色| 久久五月视频| 亚洲国产va| 中文字幕在线免费观看视频| 《丁香激情综合久久伊人久久》影视在线观看 -高清预告手机免费播放 -三妹影院 | 丁香伊人网| 久久99热这里只有| 丁香伊人网| 九九综合影音先锋| 国产午夜精品一区二区三区嫩草| 久久久久久久久久8888| 91热网址| 5五月综合网亚洲| 思思热99er在线视频| 五月婷婷九| WW婷婷五月天com| 国产成人综合网| 99热这| 五月天婷婷六月| 棕合影院色色| 丁香婷婷色色| 精品综合爱| 激情综合网激情五月婷婷| 99热手机在线精品| 色五月综合激情| 婷婷五月天成人影片| 久久婷婷的综合色丁香五月| 综合激情网五月激情| 丁香六月天之亚州热女| 亚洲成人免费电影| 五月婷久久| 久久99性爱视频| 九九99久久| 亚洲色综合| 开心五月婷| 99re热在线视频| 墨西哥毛片内射精| 97色啪| 97色婷婷在线观看| 婷婷中文网站| 久久综合26p| 婷婷在线视频| 大香蕉伊人丁香五月| 色婷婷在线视频| 俺去也婷婷| 久操热| 国产精品美女| 99色在线视频| 疯狂做受XXXX高潮A片动画| 九九综合| 97精品人人A片免费看| 亚洲精品视频在线| 五月天色软件| 9热在线观看| 五月丁香婷婷成人版| 色婷婷yy久| 久久人人添人人爽添人人片αV| 人人插操| 色色色五月| 久久蜜臀婷婷| 丁香九月婷| 亚洲欧美成人在线| 五月天六月天| 亚洲aV写真天天综合网久久| 97色天堂| 久久免费精彩视频| 91大操| 狠狠色婷婷综合开心影视| 97操碰日本女人| 久久丁香九| 狠狠狠狠青草| www.日本久久videos| 99五月丁香丁| 嫩BBB槡BBBB搡BBBB| 久99| 丁香五月天天| 久久视频这里都是精品| 婷婷深爱五月丁香| 丁香五月天激情综合| 人妻22p| 538在线精品| 国产精品成人网址| 99人妻碰碰碰久久久久禁片| 黄页大全十八禁| 九九热在线视频观看| 9999三级片| 99热免费| 91久久久久久久久久| 丁香五月天啪啪| 五月天激情中文字幕| 色色色无码| 日韩999| 噢美99| 射久久丁香五月| WWW,色五月| av网站中文| 五月天天综合| 丁香伍月婷电影全集| 久9免费视频| 亚洲视频a| 五月丁香无码| 99啪99| 色伦专区97中文字幕| av在线免费网站| 开心五月六月婷婷| 色域五月婷婷丁香| 日韩操啪| 丁香五月综合在线播放| 婷婷99狠狠| 99er在线观看| 丁香六月综合| 国産精品| 丁香五月开心亚洲| 激情五月婷婷色色| 日韩av干| 91久热| 国产第99页| 日日日日做夜夜夜夜无码| 99热在线只有精品| www.ywav| 第四色婷婷五月| 色婷婷综合网站| 激情婷婷黄色五月| 丁香六月婷婷姐网| 超碰在线50| 色色五月天婷婷| 26uuu日韩| 日本欧美成人片AAAA| 色停停影院五月天| 天天做天天摸| 婷婷久久婷婷色五月| www.91九色| 51XX午夜影福利| 久久天堂婷婷五月| 8050一级网| 99热日本| 粉嫩av懂色av蜜臀av熟妇| 人人色人人摸人人看| 亚洲色小说在线综合| 婷婷伊人网| 伊人久久大香蕉网| www.91色| 五月天婷婷色在线视频免费观看| 996热| 99热99热99热99热| 久久免费少妇高潮99精品| 九九人妻福利| 九九色婷婷| 色区久久| 人妻中文在线| 天色综合网站| 人操综合| 五月丁香六月激情视频| 69久久99精品久久久久婷婷| 日本99热| 丁香婷婷免费| 日本44久久在线| 色综合日日| 九九热狼人| 看国产探花操逼三级片| 人人妻人人澡人人爽| 99热在线这里| 婷婷激情六月综合| 亚洲AV成人在线| 亚洲av网站在线观看| 五月婷婷丁香| 久久五月视频| 丁香婷婷五月激情四射网| 婷婷久久亚洲| 丁香五月综合婷婷| 野战J办公桌椅H| 亚洲丁香五月| 婷婷久久综| 婷婷五月激情综合| 婷婷五月综合在线视频| 91re色综合视频| 五月丁香婷婷六月| 婷婷丁香69精华| 国产肥白大熟妇BBBB视频| 欧美va亚洲va在线播放| 视频一二区| 婷婷激情五月综合| 操逼五月婷婷| 欧美成人日韩| 熟女五月天久久综合| 人人综合色| 五月丁香婷婷婷激情爱爱| 五月婷婷深深的爱| 伊人在线视频| 超碰在线精品| 天天 青草 丝袜制服 在线| 一级无码作爱片| 色色免费网站| 婷婷精品综合| 九九热这里精品| 91a片爽| 免费啪啪亚州视频| 色色亚卅| 丁香五月婷婷狠狠色| 亚洲综合五月天婷婷| 五月丁香淫淫婷婷婷| 国产 亚洲 在线| 婷婷丁香18| 欧美人人操| A A色色| 亚洲综合草草| 99热在线极品极品| 少妇熟女视频一区二区三区| www.久久久久久久| 五月丁香六月综合激情无码软件亮点| 玖玖资源部在线播放| 亚洲日本韩国| 9+1视频网址| 丁香六月成人| 五月丁香婷中文| 99男人天堂| 91在线观看九区| 日日操夜夜撸| 在线婷婷| 丁香五月天AV| 这里只有精品视频一区| 天天激情视频| 色碰碰| 丁香婷停五月激情综合深爱| 五月综合激情| 99热九九在线| 96色婷婷| 成人 AV播放| 九久9精品| 激情综合网五月婷婷| sewuyuejiqingwang| 婷婷激情五月| 99热超碰在线| 狠狠爱综合| 激情图片婷婷| 97久人人| 97久久精品| 亚洲乱码日产精品BD在线观看| 日本久久综合| 亚洲色碰| 九九色逼| 色五月激情五月天| 五月丁香六月婷婷啪啪| 天天干,夜夜爽| 综合色情网| 香蕉AV777XXX色综合一区| 欧美韩日AAA网站| 99热 免费| 99国产er热视频| 欧美色色干| 亚洲色基地| 99热在线网站| 天久久久久| 99热99精品在线观看| 免费观看全黄做爰的视频| 日本天天操| 色婷五月天| 天天色宗合| 色色婷婷五月天| 久久婷婷网站| 综合激情婷婷| 99热久| 五月天婷婷视频| 五月婷婷色播| 久久婷婷六月| 大香蕉手机视频| 伊人久久婷婷| 六月丁香婷婷亚洲中文玖玖| 99视频这里只有久久精品 | 五月天婷婷丁香花| 一区二区免费看| 三级99热| 婷婷综合久久| 婷婷五月天视频小说| 狠狠色丁香婷婷综合久久97AV| www.xtbsty.cn.com蜜乳AV| 久热只有这里有精品| 凹凸探花电影| 天天射天天射一道本日本社区| 五月综合影院| 在线观看免费狠狠色丁香香综合| 九九热99热| www.色99| 啪啪五月综合| 婷婷成人AV| 天天综合 99久久婷婷| 碰碰91| 色噜噜,噜噜色| 久久免费视频62| 婷婷中文字幕| 婷婷午夜| 婷婷中文字幕网站| 婷婷五月天激情综合| 丁香五月婷婷六月婷婷| 人人看人人摸人人| 色色色色色色色色综合网| 亚洲妇女熟BBW| 亚洲激情四谢| 亚洲激情综合| 99热这里只有精品国产首页| 99精品在线观看视频| av免费在线看不卡无毒| 色啪影院| 色婷婷丁香| 丁香六月婷婷综合| 丁香五月婷婷久久久| 欧美色图45678| 日日夜夜小色哥| 丝袜大香蕉| 九色综合五月天婷五月| 东北黄色一级| 777久久综合视频| 五月天婷婷社区| 香蕉AV福利精品导航| 色综合偷拍| 丁香无月在线观看| 久综合| 超91热| www.日韩国产| 五月丁查人人| 图片区 小说区 区 亚洲五月| 久一网站| 超碰1999| 91热久88| 91操操操| 1000部毛片A片免费观看| 五月婷婷色啪| 激情综合网五月婷婷| 性做爰A片免费视频A片直播| 久久久久婷| 色色婷婷综合网| 超碰久热| 色久女| 激情綜合W W W,激情五月天| 久久9热好| 亚洲色情久久| 成人短视频在线观看| 去色色五月天| 亚洲日日操| 国外亚洲成AV人片在线观看| 蜜臀av无码久久久久久久久| 五月天激情影院| 亚洲免费电影2| 色综合性视频| 成人做爰黄A片免费看直播室男男| 欧美精品999| 91九色在线视频| 亚洲AV永久无码影院黑人 | 99精品7| 亚洲另类电影| 99惹在线精品免费观看| 这里只有精品视频| 亚洲成人在线免费| 色色五月天婷婷| 婷婷五月激情图片| 91日日日| 激情九九六月激情免费视频| 激情綜合W W W,激情五月天| 9久久网| 99爱在线免费视频| 日韩黄色电影| 五月玖玖| 国产伦理精品高清在线观看网站一区二区| 996热| 色色五月婷| 激情五月丁香五月| 人人干人人干骚美女| 色播五月| 婷婷综合激情| 五月婷婷啪啪| 婷婷五月天com| 久久久久久久91| 青青草原精品久久| 99欧美三级视频| 桃色五月天| 爱久综合| 色五月激情五月| 五月婷色| 极品人妻VIDEOSSS人妻| 色婷婷激情视频| 9 1 A v久久久| 婷婷五月天激情基地| 天天综合91入口| 九九综合九九| 色五月丁香激情视频| 天天日天天色| 欧美成人五月天| 色综合久久无码| 99riAV国产精品视频| 五月丁香综合啪啪| 91大操| 激情图片婷婷丁香五月| 五月天国产成人| 99精品视频在线观看| 婷婷五月免费在线| 综合色网站| 激情第四色| 五月天俺去也| 亚洲色婷婷| 《亚洲操B久久免费在线观看,亚洲操B久久在线播放》在线播放 - 高清资源 - 97 | 天天五月天综合网址| 丁香九月婷| 国产乱子轮XXX农村| 第六色在线| 青青草网武则天| 九九视频在线| 成人五月天视频| 色婷婷五月开心六月综合| 2050人人操免费工开爱| 九九 激情 网| 激情小说之五月| 9191avse| 99天天操夜夜操| 五月天综合在线| 热99精品视频| 另类色视频| 久久五月天免费网站| 六月丁香五月婷婷| 91人碰| 欧美性丁香色色五月天| 五月天综合久久| 99在线视频网址在线观看| jiZZdr| 色婷婷六月综合| 日本三级99人妇网站| 开心深爱激情网| 亚洲男女激情| 婷婷五月六月丁香综合| 99爱视频精品在线观看| 99视频网址| 综合av在线| 可以直接看的av| 热99久久这里只有精品| 日本怕怕视频| 婷婷五月天首页激情| 无码少妇高潮喷水A片免费| 操久久网| 99热在线观看精品| A久网| 99r这里只有精品哦| 色婷婷伊人| 在线亚洲综合| 色五月丁香A欧美com| 五月激情小说| 婷婷丁香色五月| 天天做天天爱天天爽综合网| 这里只有精品在线看| 66久久视频在线| 综合亚洲六月婷婷在线| 婷婷丁香五月麻豆| 亚洲综合视频网| www.刺激色网站www.| 老司机视频lsj爱就色| 日日夜夜天天| 99热免费| 偷偷与邻居做爰完整视频| 婷婷五月天AV| 成片免费播放| 大香蕉手机视频| 色婷婷九月| 久久色五月| 久久精品99久久久久久| 伊人婷婷色| 九九成人视频| 色丁香影院| 精品五月天| 激情综合网五月激情| 开心激情久久久久久久| 狠狠五月激情婷婷直播片| www.minyis.com【JT】国内CDN落地页保证转化QQ2101460746 | 日逼免费视频 | 五月色婷婷亚洲 | 91操人视频| 久热这里只有| 日韩一本操| 婷婷丁香红五月91C| 极品精品一区二区三区在线| 伊人激情综合| 国产亚洲色婷婷久久99精品91 www.riverspirits.org www.hnnun.com www.changh | 婷婷丁香77777| 五月婷婷就去色| 99re这里有精品手机在线| 开心婷婷五月中文字幕组| 无码任你操| 五月婷婷激清网| 丁香六月婷婷综合缴| 久9精品视频| 人人摸人人摸| www.99热国产| 99色.com| 91人人操人人| 南京搡BBBB搡BBBB| 久久精热| 99精品视频网站| 人妻内射一区二区在线视频| Caoub青青超碰 | 国产色色网址网站| 综合五月草| 五月天五月色婷婷综合| 天天操天天日天天操| 九月色婷婷综合| 伊人啪啪网| 国产视频色色色色色色色| 精品99*| 日本久久爽| 色五月天影视| 五月婷婷亞洲中文| 五月丁香婷婷啪啪| 级人人91| 日本黄色在线观看| 99热在线播放| 99re这里| www.婷婷六月天| 六月丁香开心婷婷欧美| 婷婷五月天成人五月天| 五月在线| 色五月 五月婷婷| 久久久色情| ri电影在线| 亚洲婷婷欧美婷婷| 免费无码毛片一区二区A片| 亚洲爱婷婷| 五月丁香亭亭成人电影| 色色五月天婷婷丁香| 午夜69成人做爰视频| 婷婷综合网性| 亚洲综合在线丁香五月| 99热这里只有精品青草| www.精品久9| 五月丁香久久久日婷婷久久婷婷日| 久久久精品人妻录| 久久五月天婷婷| 久激情| 激情五月天激情网| 亚洲成人婷婷| 99超超碰| 婷婷色五月婷婷姐妹| 日本色婷婷五月天成人电影| 激情综合九月| 9热久久| 天天干天天干天天干天天干天天| 天天色综合网1| 少妇性按摩无码中文A片 | 婷婷五月天色色| 99热12| 国产无套精品一区二区| 色色色激情| 性生活视频98791| 黄色三级毛片中字| 五月停停直播| 国产 码在线成人网站| 99久.| 五月丁香婷庭在线| 91操碰| 九九99男女视频在线观看| 婷婷五月天网| 天天综合五月天| 亚洲AV成人在线| 人妻久热| 婷婷射图五月天| 五月婷婷九| 97成人在线视频| 五月天玖玖狠狠色色| 五月叮香啪| 五月激情婷婷国产精品久久久久久| 深爱五月日韩| 一起操最新网址| 五月婷婷狠狠干| 日韩无码成人电影| 九九综合久久丁香婷婷,开心激情综合网| 五月丁香性爱| 综合色色网| 五月天另类小说| 色婷婷影视99| 五月久久婷婷成人网| 日日噜噜久久婷婷五月天| 激情五月天激情综合网| 久久婷婷五月综合一| 婷婷99狠狠躁| 丁香五月 无码| 色婷婷丁香五月在线观看| 丁香五月婷婷啪啪| 另类图片天天影视在线观看| 六月激情婷婷| 婷婷五月天成人动漫| 亚洲春色奇米影视| 欧美激情-区二区三区| 色吊丝99| 日本五月天一页| 国产亚洲成AV人片在线观黄桃| 五月夜丁香| 99久99久| 四月婷婷五月丁香| 久/久精品99看9| 天天综合网站| 五月婷婷激清网| 熟女人妻视频| 九一99| 久久婷婷六月综合综合| 欧美视频五区| 在线看的免费网站| 一个色的综合| 丁香五月婷久久| 婷婷伊人中文字幕| 日韩在线观看亚洲| 色色色成人网| 丁香六月成人| 亚州色综合| 欧美激情中文字幕| 婷婷五月激情热播| 色五月丁香五月激情五月激情| 婷婷综合五月激情| 五月天五月天激情网| 棕合影院色色| 成人婷婷五月天| 操逼五月婷婷| 一本综合丁香日日狠狠色| 亚亚州久久高潮| 狼人婷婷综合| 丁香婷婷五月| 超碰成人公开| 99精品超在线播放| 久久一级片| 最新热中文字幕| 婷婷无码视频| 久久多色| 九九热123| 久久9热| 五月丁香激情综合啪啪| 国产夫妻操逼内射视频| 天天插天天插天天插天天插| 丁香婷婷色五月| 亚洲182在线观看| 婷婷综合色色| 色播五月丁香| 996er热| 极品人妻VIDEOSSS人妻 | xx综合网| 五月丁香六月天| 国产肥白大熟妇BBBB视频| 蜜乳人妻一区二区三区| 这里只有视频精品| 99热只有| 无码成人AAAAA毛片AI换脸| 91porn一起草| 97碰| 丁香五月 性爱| 色色色五月婷婷| 婷婷五月伦理网站| 国产激情久久| 中文字幕日产A片在线看| 亚洲色图啪啪| 色。 婷婷婷| 成人五月天视频播放| 五月丁香毛片| 九九aV| 婷婷九月综合| 综合网精品99| 天天摸.天天mo| 狠狠操天天干| 日韩ww| 在线视频色五月| 69久久99精品久久久久婷婷| 亚洲视频综合网| 99成人网一区| 婷婷五月天激情网| 影音先锋男人站,影音先锋男人色资源网,影音先锋AV最新资源站,影音先锋AV资源 | 九色激情网| 深爱激情五月天色婷婷| 99热18| 欧美图片丁香五月天| 九九精品在线网| 国产精品扒开腿做爽爽爽A片唱戏| 精品亚洲国产成AV人片传媒 | 色情五月综合婷婷| 婷婷色色色| 激情五月综合视频| 97干欧美| 欧美日韩国产日本精品四虎网网站物| 丁香六月爱综合| 91精品国产91久久久久青草| 69精品人人人人人人| 开心五月激情五月丁香五月婷婷| 欧洲色| 精品久色| 91久久久久久久久18| 91日韩美女被插视频| www.26uuu.com亚洲电影| 白人荫道BBWBBB大荫道| 极骚大香蕉伊人| 久操97| www.激情.com.| 99热精品在线| 亚洲综合激情五月| 亚洲在线操| 97五月天| 婷婷亚洲欧美丁香五月| 五月婷婷久久久| 亚洲精品无人区| 婷婷丁香18| 色情五月天视频网| 伊人色五月| 99玖玖在线视频| 五月激情日本在线| 天天肏视频| 国产片天天爽夜夜爽| 亚洲五月丁香综合网| 99色一| 日韩999| 天天操中文字幕| 色婷婷在线视频| 免费成人网在线观看| 天天狠狠夜夜狠狠2023| 丁香花五月天婷婷成人社区| 青青操avbb| 丁香五月成人| 丁香六月激情综合网| XX色综合| 人人人人人人人草| WW婷婷五月天com| 狠狠色噜噜狠狠| www.无码com| 天天综合网91| 久久久久久久综合狠狠综合| 成人日韩欧美| 艾小青av| 婷婷激情五月天激情小说| 能看的av网站| 天天摸天天肏| 激情五月天综合网| 狠狠色丁香| 亚洲妇女熟BBW| 六月丁香婷婷网| 碰碰人人人| 婷婷五月花西瓜| 4438成人电影| 亚洲无码yw| 六月丁香大香蕉| 亚洲1区| 五月天亚洲最大成人| 久久久久人妻| 婷婷涩涩网| 欧美三级视频| 色色色五月婷| 天天摸天天舔在线视频| 激情AV网| 日韩综合久| 五月丁香啪啪啪免费看| 色色五月天激情| 丁香五月23111| 99碰网站| 色婷婷XXXXX| 曰韩五月丁香色婷婷无码| 欧美婷婷成人| 狠狠舔| 丁香五月婷婷国产av| 五月丁香欧美综合| 久久九色| 亚洲综合网在线| 丁香五月社区| 99'无码| 丁香花五月天社区| 亚洲激情综合| 五月香六月婷| 亚洲av成人一区二区电影在线| 99日在线视频| 99热99这里有免费的精品| 五月99久久| 少妇性按摩无码中文A片| 强伦轩人妻一区二区电影| 丁香婷婷五月六月久久| 日本一级淫| 日本五月天网站| 99re思思精品视频在线观看| 超碰在线资源| 久久丁香五月| 开心五月丁香啪| 伊久久婷婷| 双性美人被调教到喷水A片| 综合图片色色| 99热中文字幕久久| 激情综合五月| 9999热这里只有精品| 色情成人五月天| 五月天伊人网| 91九色国产熟女| 人妻 性久久久久久| 婷婷五月综合在线| 97久操| 亚洲人妻AV| 天堂草在线看www| 开心深爱五月天| 91人操人人人操人| 三日本无码| 亚洲五月婷| 激情五月天综合网| 五月丁香六月成人| 色五月天天| 激情涩涩网| 变态另类色图 | 中文字幕性爱丰满| 亚洲午夜精品久久久久久人妖| 色爱综合五月| 日比网免费国产| 天天操天天干天天日| 五月丁香999| 色婷婷小说网| 99热在线观看亚洲区| 亚洲综合色丁香五月天| 婷婷在线播放av| 爱操人妻| 99精品超在线播放| 国产亚洲AV人片在线| AAA级久久久精品| 色色五月婷婷| 精品久久99码| 婷婷九月丁香| 亚洲啪啪视频| site:pnnrt.com| 5月丁香婷婷激情网| 十月色综合| 婷婷伊人五月| 五月伊人视频在线看| 亚洲国产精品五月天| 五月婷婷久久综合| 综合激情婷婷| 97碰碰视频在线观看| www,com,五月色色| 婷婷激情五月视频| 国产精品人妻在线网址| av第一二区| 991精品在线视频| 久热黄色| 91网站黄| 成人五月天丁香婷| jiujiujiuwuyuetian| www久久久久| 97精品自拍视频| 九九综合图片网| 日韩精品99久久| 99热观看| 色99在线看| 五月婷婷九九热| 99九九热视频| 五月丁香久久网| 人人97碰| 色五月婷色彩免播放器| 99热爱爱干干日| 色噜噜婷婷| 久久视频婷婷视频| 丁香5月综合啪啪| 五月天四色房丁香| 色五月综合婷婷| 五月天com| 久久天堂网| 色婷婷久久| 亚洲乱码日产精品BD| 五月天色色网站| 国产超碰在线| 亚洲av另类在线观看| 91婷婷丁香五月亚洲| 午夜九九九九九九| 9福利性视频欧美| 性爱先锋AV| 亚洲激情电影五月天色婷婷丁香一起草| 婷婷久久夜| 丁香六月婷婷综合啪啪| 综合久久人妻| 97综合在线| 无码人妻精品一区二区蜜桃色欲| 亚洲精品V天堂中文字幕| www.久久色.com| 激情九月婷婷| 凹凸探花电影| 婷婷成人五月天成人文学小说| 六月丁香五月婷婷| 99色免费观看全部| 一二线视频 另类| 丁香五月天社区婷婷| 亚洲色色五月天| 色婷婷五月天中文字幕| 襙逼网| 丁香五月激情综合| 九九激情| 婷婷酒色网| 99熟女| 狠狠干在线视频| 五月婷婷激情中文字幕| 天天舔天天爽| 97luluse| 九九操操| A A色色| 久久五月网| 国产精品99久久久久久久女警| www.99操.com| 99re99在线看| 五月天婷婷高清无码| 五月丁香综合| 天堂网亚洲色图| 九九久久99| 五月伊人婷婷| 色色五月天婷婷| 999九九九久久久99HD| 婷婷五月综合激情| 亚洲成人在线五月天| www.日日夜夜.com| 68热超碰在线| 综合久久97| 六月丁香社区| 91爱操| 色五月丁香五| 99er这里只有精品| 日本五月天激情| 激情视频网址| 久9精品视频| 深爱五月日韩| 五月丁香六月成人| 亚洲AV成人在线观看| 伊人五月天日日夜夜久久久天天| www.狠狠艹| 能看的AV| 五月色丁香| 五月开心深爱激情网| 丁香五月综合婷婷| 1024人妻无码中文字幕| 这里只有精品日韩精品| 久久丁香五月| 综合在线观看99| 2025中文在线视频字幕免费观看| 五月婷婷偷拍| 久久婷婷六月综合国际| 97色婷婷| 久9精品视频| 亚洲第一成人AV| 婷婷五月天av网| www,天天干| 激情综合视频| 色五月亚洲五月天| 色婷婷色99国产综合精品| 免费观看全黄做爰的视频| 色色色国产| 停婷丁五月在线| 婷婷久久婷婷色五月| 激情五月天免费视频| 人人操五月天| 日本97在线| 天天干电影| 级人人91| 天天综合天天玩夜夜玩天天玩夜夜玩| 九九99免费视频| 91嫩草久久| 丁香五月手机在线| 性爱技巧五月| 丁香五月瑟瑟| 欧美人妻一区二区| AV成人在线播放| 九九视频这里只有精品| 大香蕉丁香婷婷| 99热这里只有精品23| 国产69精品久久久久999小说| 亚洲午夜精品久久久久久人妖| 人妻熟人中文字幕一区二区| 草榴视频黄色网| 九九爱这里只有精品| 玖玖无码中文| 91人人网| 婷婷久久久| 七七九色| 日韩在线视频中文字幕| 婷婷射图| 大婷婷色呦呦噜噜色呦呦噜噜| 色色热日| 婷婷深爱五月| 五月婷婷亚洲综合在线 | 9l视频自拍九色9l视频自拍九色9l社区| 人人草碰| 五月天综合色| 射区导航| 久9视频免费播放| 狼人婷婷久久| 97人人草| 另类图片色五月| 99re热在线视频| 久久五月天激情美女| 99精品视频网| 综合网色| 五月婷婷六月激情| 激情综合五月色在线| 国产黄大片在线观看画质优化 | 婷婷五月久久| 婷婷色亚洲| 青青青在线视频国产| 99在线视频在线观看| www久久久久久久| 99精品久久久久久久婷婷久久| 啪啪日本欧美| 五月六月婷| 99热天堂| 五月天色丁香| 侠女刀之记忆电影在线看免费| 99久热| va亚洲中文在线| 1234操逼网| 久久大香蕉同僚| 狠狠操.com| 婷婷视频在线碰| 99视频| 久久久久网站| 五月天激情小说| 婷婷五月天色综合| 91色色色视频| 天天操夜夜操| 久久婷婷激情五月天一区二区| 99热这里只有精| 久久66成人网站| 99九九这里有免费视频| 日本熟女内射| 99热在线精品播放| 成人精品视频99在线观看免费| 丁香 婷婷 亚洲 熟女| 久9精品| www.91久久| 99热这里只有精品官网| 欧美日韩中国| 日韩欧美一级大黄网站| 五月天成人在线精品| 超碰在线观看成人视| 99热最新| 一二三区视频韩国| www色综合亚洲92| 五月丁香啪啪| 国产精品A片| 97在线碰| 婷婷丁香六月天| 婷婷激情五月色综合| 九九国产视频| 五月婷婷综合色啪首页|