欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

圖像分割中CrossEntropyLoss的踩坑指南:從輸入格式到類別平衡

圖像分割中CrossEntropyLoss的踩坑指南:從輸入格式到類別平衡 第一次用CrossEntropyLoss()做圖像分割是在一個街道場景的語義分割實驗里。網(wǎng)絡(luò)結(jié)構(gòu)用的還是當時很常見的編碼-解碼結(jié)構(gòu)第一版代碼跑起來之后loss從0.6慢慢降到0.3我當時還挺高興結(jié)果驗證集的mIoU一出來直接傻眼——背景類占了接近90%準確率很高但車輛、行人、建筑這些真正關(guān)心的類幾乎全部沒學到。后來花了好幾個晚上排查發(fā)現(xiàn)問題基本都出在我對CrossEntropyLoss()這條函數(shù)本身的理解上輸入格式、標簽編碼、類別分布、ignore_index每一個都能讓訓練“看似正常、實則報廢”。這篇就把我用CrossEntropyLoss()做圖像分割踩過的坑按類別整理一遍每個坑后面附上可照做的檢查方式和修復思路希望能幫你少熬幾個夜。1. 為什么圖像分割任務繞不開CrossEntropyLoss1.1 CrossEntropyLoss到底在算什么首先回到一個最基本的認知圖像分割的本質(zhì)是逐像素分類。模型對每個像素輸出C個類別的分數(shù)CrossEntropyLoss()的作用就是衡量“模型預測的分數(shù)分布”和“真實類別”之間的差異。PyTorch里的nn.CrossEntropyLoss()并不是一個復雜的黑盒它內(nèi)部等價于F.log_softmax(input, dim1)加F.nll_loss()也就是說它會先把logits在類別維度上做log softmax再取正確類別對應的負對數(shù)概率作為loss。把公式拆開就是對某個像素如果真實類別是c模型對該類的得分是z_c那損失就是-log(exp(z_c) / sum_j exp(z_j))。得分越高loss越小得分越低loss越大而且梯度會因為log函數(shù)的性質(zhì)變得更加明顯。這也是它在分類類任務里比MSE好用的原因MSE對輸出概率的錯誤懲罰是二次的到了飽和區(qū)梯度幾乎消失交叉熵在錯誤嚴重時梯度很大優(yōu)化起來效率高得多。有一個點容易被忽略F.log_softmax里的dim1意味著它默認輸入的第一維是batch第二維是通道也就是類別維度。這個約定直接影響后面所有輸入格式問題只要把通道維度放錯位置整個loss計算就會在錯誤的方向上“絲滑”地跑下去。1.2 分割場景下它比BCE、MSE更合適的原因很多做分割的新手會因為“分割也是輸出mask”就想到二分類于是直接拿BCE或者MSE去套這種做法在二前景二背景的簡單任務里能跑通但一旦類別變多就立刻出問題。BCE是逐類別獨立計算損失的它不關(guān)心類別之間是不是互斥的相當于把每個類都當成一個獨立的二元分類問題而語義分割的類別通常是互斥的一個像素只能是某一個類用CE這種帶softmax歸一化的損失才能天然保證所有類別的概率加起來等于1模型輸出的是真正的概率分布。MSE的問題更明顯。如果把分割當成回歸任務模型輸出的向量被強行拉向one-hot一樣的分布數(shù)值在飽和區(qū)梯度極小訓練速度慢而且對類別判別邊界非常不敏感。簡單說就是MSE問“你預測的數(shù)字和真實數(shù)字差多少”CE問“你給正確類別的信心夠不夠高”后者更貼合分類任務的本質(zhì)。所以主流分割項目的第一步基本都是criterion nn.CrossEntropyLoss()。但要注意默認情況下它給每個像素的權(quán)重是相同的也就是沒考慮類別分布差異。這在類別極不平衡的數(shù)據(jù)集上是致命問題后面第4章會展開講。1.3 使用它的前提約束logits與target的三條約定使用CrossEntropyLoss()前必須明確三條硬性約定第一輸入必須是未經(jīng)過softmax的原始logits不是概率第二logits的shape一般是(N, C, H, W)N是batchC是類別數(shù)H和W是空間尺寸第三target必須是整數(shù)索引形式的標簽shape是(N, H, W)取值必須在[0, C-1]范圍內(nèi)或者用ignore_index指定一個特殊值來忽略某些區(qū)域。這三條約定錯一條訓練就會出現(xiàn)各種奇怪現(xiàn)象。最常見的錯誤就是有人先寫了prob torch.softmax(logits, dim1)再把prob當作輸入扔給CrossEntropyLoss()結(jié)果loss沒有爆掉但模型越訓越差。還有人是把標簽做成了one-hot形式然后發(fā)現(xiàn)shape對不上直接報錯。后面所有踩坑內(nèi)容本質(zhì)上都圍繞這三條約定展開。2. 最容易踩的維度與形狀坑2.1 target的shape永遠比logits少一維這是我身邊同事問過最多的問題。模型輸出logits是(B, C, H, W)而mask標簽往往是(B, H, W)有些人會習慣性把mask也做成(B, H, W, 1)或者(B, 1, H, W)然后直接丟進loss接著就會看到類似Expected target size [B, H, W], got [B, 1, H, W]的報錯。為什么PyTorch要這么設(shè)計因為C通道是類別維度對每個像素來說真實類別就一個整數(shù)索引不需要展開成one-hot。如果你習慣把mask做成(B,1,H,W)在放進loss之前需要做一次squeeze(1)。如果你從圖像處理庫讀出來的是(H,W,1)類似的多余通道也要先去掉目的就是讓target保持(B,H,W)。我的建議是在dataloader的返回值里就把格式固化。圖像返回(3,H,W)的float tensor標簽返回(H,W)的long tensordataloader自動堆疊后就是(B,3,H,W)和(B,H,W)直接在loss里對齊。不要在訓練循環(huán)里臨時做各種view、squeeze、reshape少一步排錯步驟就會少一個潛在坑。2.2 通道維度在第二維別對最后一維做softmaxPyTorch的圖像張量默認是NCHW格式也就是說類別通道維度在第二維也就是dim1。但這個約定太容易被忽略尤其是從TensorFlow遷移過來的同學TF習慣把通道放在最后一維PyTorch里錯誤地寫torch.softmax(logits, dim-1)非常常見。表面上看dim-1也能運行不會報錯但它在W方向上做歸一化而不是在類別方向上。舉個例子如果logits的shape是(2, 19, 256, 256)dim-1會在最后一個維度的256個空間位置做softmax結(jié)果是每個通道內(nèi)部的空間值被歸一化了類別之間完全沒有競爭關(guān)系。這種情況下loss還能正常計算因為CrossEntropyLoss()內(nèi)部還會在dim1再做一次log_softmax但輸入已經(jīng)變成了一堆被空間歸一化過的數(shù)字模型基本學不出有效的類別邊界。診斷這類問題有一個很笨但有效的辦法在loss計算前打印一行l(wèi)ogits.shape然后自己默念一遍“第二維是類別數(shù)”再檢查softmax的dim是1。如果嫌麻煩就把softmax這類操作封裝成一個函數(shù)統(tǒng)一傳dim1避免到處手寫。2.3 提前對logits做softmax再送進loss等于白做這個坑我踩過而且是在一輪已經(jīng)很深的訓練之后才發(fā)現(xiàn)的。當時我為了在訓練日志里輸出“置信度”順手在loss之前寫了一句out torch.softmax(out, dim1)然后才把out傳給CrossEntropyLoss()。結(jié)果模型訓練一直很慢loss數(shù)值偏小驗證集幾乎不動。原因是CrossEntropyLoss()內(nèi)部已經(jīng)有l(wèi)og_softmax這一步。如果你先把softmax結(jié)果傳進去它等于在[0,1]范圍內(nèi)的概率值上再取一次log得到的分布已經(jīng)不再是模型原始分數(shù)的對數(shù)概率。尤其在概率接近0或1時數(shù)值會發(fā)生奇怪的偏移梯度方向雖然不至于完全反向但優(yōu)化過程被嚴重扭曲。正確做法是模型最后一層輸出logits直接丟給CrossEntropyLoss()需要看概率時單獨在inference階段做softmax。如果你非要在訓練過程中監(jiān)視概率就用with torch.no_grad()的代碼塊只算softmax做日志別讓它進入損失計算圖。2.4 上采樣、padding、裁剪引起的尺寸錯位分割模型里編碼-解碼結(jié)構(gòu)非常常見很多模型在解碼器末尾直接輸出了下采樣后的特征圖而不是原圖大小。此時如果直接把logits和原始分辨率mask去算CrossEntropyLoss()會報shape不匹配的錯誤。但比這個更隱蔽的情況是你用某種方式強行把它們對齊了但空間位置是錯的。比如DeepLab系模型最后特征圖是輸入尺寸的1/8或1/16如果沒做上采樣shape對不上會立刻報錯如果你寫了logits F.interpolate(logits, size(H, W), modebilinear, align_cornersTrue)尺寸對了但因為mask和原圖經(jīng)過的裁剪、padding不一樣實際像素錯位loss還在繼續(xù)算只是結(jié)果全程沒有意義。我的排查順序是先看原始圖像進模型前的尺寸變換再看mask有沒有做過相同的resize和crop。特別是在使用隨機裁剪時必須保證image和mask使用同一個crop參數(shù)。如果你在dataloader里用了圖像增強庫一定檢查是不是對mask也同步做了增強而且mask的插值方式要選最近鄰。3. mask標簽處理中隱藏的坑3.1 RGB的標注圖不能直接當target現(xiàn)在很多公開分割數(shù)據(jù)集給的標簽是RGB偽彩色圖而不是每個像素一個索引的PNG。比如VOC格式的mask是一張彩圖背景是黑色行人是紅色汽車是藍色。如果直接把RGB圖讀進來變成(H,W,3)或(3,H,W)再扔給CrossEntropyLoss()第一個崩潰點就是target維度不對第二個崩潰點是數(shù)值范圍不對——CrossEntropyLoss希望target是單通道整數(shù)索引不是一個三元組。正確做法是建一個顏色映射表把每個RGB值映射到類別索引。速度上別用純Python逐像素循環(huán)數(shù)據(jù)量一大就慢得致命??梢杂肗umPy一行搞定每一類先做一個全零的索引矩陣然后對每個類別用np.all(mask_rgb color, axis-1)得到一個布爾矩陣再把對應位置填成類別id。最后轉(zhuǎn)成torch.from_numpy(index).long()。這個轉(zhuǎn)換過程最好放在預處理階段提前批量生成索引版mask保存下來而不是每次訓練都在dataloader里現(xiàn)場轉(zhuǎn)換。否則訓練時每讀一個樣本都做一次全圖顏色匹配CPU負載高到無法接受。3.2 標簽值必須連續(xù)且從0開始這個坑極其隱蔽。很多數(shù)據(jù)集的原始標簽里忽略區(qū)域用255背景用0但某些類別的ID可能是1、2、3之后直接跳到7、8、9中間沒有4、5、6。人的直覺是“既然是類別ID那就直接用”但CrossEntropyLoss()內(nèi)部做索引查表時是按target里的具體數(shù)值去取logits對應通道的。比如logits有10個通道代表類別0到9target里如果出現(xiàn)值12它會直接訪問越界報錯如果target里的值不連續(xù)但都沒有越界比如某些類從0到9中間缺了幾個那模型的一個輸出通道可能永遠不被用到另一個類別卻對上了錯誤通道最終預測結(jié)果混亂。所以在訓練前要做一件看起來多余但救命的事對訓練集和驗證集分別執(zhí)行np.unique(mask)看看mask到底有哪些值。如果發(fā)現(xiàn)不連續(xù)或者存在超出類別數(shù)范圍的值就建立一個重映射字典把所有有效值映射成0,1,2,...,C-1忽略值映射成255。這樣CrossEntropyLoss的通道和標簽才能一一對應。3.3 ignore_index是雙刃劍別指望它自動處理所有無效區(qū)域ignore_index的設(shè)計初衷是忽略某些位置的像素比如VOC的邊界白線、標注不全的區(qū)域等。常見做法是nn.CrossEntropyLoss(ignore_index255)然后在target里把無效區(qū)域的值設(shè)為255。這個機制很好用但它有幾個副作用需要留意。第一個副作用是當reductionmean時分母只統(tǒng)計有效像素數(shù)不是所有像素。如果一個batch里有效像素特別少loss值會表現(xiàn)出不正常的劇烈波動。更極端的情況是整個batch里的像素全是255loss直接變成nan。這個問題在小batch訓練、mask標注大量缺失時尤其明顯。第二個副作用是如果你同時設(shè)置了類別權(quán)重weight和ignore_indexweight的長度必須等于真實類別數(shù)C不要把忽略區(qū)域當成一個類別放進weight里。否則要么報維度不匹配要么權(quán)重語義錯亂。我習慣在計算weight時只統(tǒng)計非忽略區(qū)域的像素確保每個類別都有合理的頻率估計。3.4 數(shù)據(jù)增強后mask錯位和插值問題做分割的人都用過隨機翻轉(zhuǎn)、隨機旋轉(zhuǎn)、隨機縮放這些增強。很多人會把圖像增強做好但mask增強忘掉或者雖然做了用了雙線性插值。雙線性插值會產(chǎn)生介于兩個整數(shù)之間的浮點值比如0.2、0.8這樣的target直接傳給CrossEntropyLoss()會報dtype錯誤或者被某些操作截斷成0和1導致類別完全錯亂。mask的resize必須用最近鄰插值這在PyTorch的F.interpolate里就是modenearest在圖像增強庫里有類似參數(shù)。翻轉(zhuǎn)和旋轉(zhuǎn)這種不改變像素值的幾何變換要特別確認邊界填充值不要生成垃圾類別。隨機旋轉(zhuǎn)時如果邊界填充用了0那么補齊區(qū)域會被當成背景類這往往不是你想要的結(jié)果需要顯式用一個填充值然后在target里把它映射成ignore_index。另外一個容易被忽略的點如果對圖像做了歸一化mask不要做同樣的歸一化。圖像需要減去均值除以標準差mask只需要做類型轉(zhuǎn)換否則會引入浮點誤差。很多新手在同一個transform里對圖像和mask套了同一個標準化函數(shù)最后target直接變成了負數(shù)或者0.幾的小數(shù)loss瞬間變成nan。4. 訓練時loss表現(xiàn)異常的排查4.1 loss突然變成nan先從數(shù)據(jù)和target查起loss變成nan是分割訓練里最常見的異常之一。很多人第一反應是調(diào)整學習率、換優(yōu)化器但我經(jīng)手的案例里大部分nan其實來自target和輸入格式的問題而不是優(yōu)化器的問題。排查順序應該是先打印target.min()和target.max()確認沒有超出類別數(shù)范圍再打印logits.min()和logits.max()確認沒有inf或者nan最后看loss.item()是不是一開始就是nan如果是那大概率是數(shù)據(jù)問題。比如target里有值200而你的模型輸出通道只有19個CrossEntropyLoss在取log_softmax對應通道時會越界輕則報錯重則在某些版本里直接產(chǎn)生nan。還有如果標簽是浮點型必須轉(zhuǎn)成long()。我建議在dataloader里就把mask mask.long()固定好不要等到訓練循環(huán)里再改更不要依賴自動類型推斷。排查時在loss.backward()前面加一行斷言也很有用assert loss.item() loss.item()這能快速發(fā)現(xiàn)nan。加assert不能解決根本問題但它能把問題卡在最早出現(xiàn)的時刻避免訓了半天才發(fā)現(xiàn)loss早就壞了。4.2 loss不下降多半是大類別把模型帶偏了這個問題表面上跟CrossEntropyLoss關(guān)系不大但它確實是使用默認參數(shù)最容易踩的大坑。默認的weightNone意味著每個像素對loss的貢獻相同。當背景像素占95%、前景只占5%時模型只需要把所有像素都判成背景l(fā)oss就能降到很低mIoU卻慘不忍睹。我比較推薦的做法是先跑一個epoch統(tǒng)計各類別像素占比然后計算中位數(shù)頻率平衡權(quán)重。公式思路很簡單weight_i median_freq / freq_i其中freq_i是第i類像素在所有有效像素中的比例median_freq是這些比例的中位數(shù)。這樣做的效果是讓出現(xiàn)少的類別獲得更大權(quán)重同時不至于讓極稀有類權(quán)重過大導致訓練震蕩。設(shè)置weight時還有一個細節(jié)weight的每個值對應logits的通道索引不是類別標簽本身。如果你重映射過mask那么mask的值和weight的順序都要按照重映射后的索引來。否則即使維度匹配權(quán)重也會“配錯對象”。4.3 整個batch全是ignore區(qū)域時的空張量問題這個坑我調(diào)試了很久。當時用的數(shù)據(jù)集標注很稀疏一個batch里大部分像素都是未標注區(qū)域全是255。CrossEntropyLoss的ignore_index255把所有像素都過濾掉之后reductionmean要對0個元素求平均結(jié)果就是nan。這個問題在batch size比較小、類別又多又稀疏時很容易發(fā)生。修復思路有幾個方向。最直接的是增大batch size或者過濾掉那些有效標注太少的數(shù)據(jù)樣本。另一個通用做法是在訓練循環(huán)里檢測一下有效像素數(shù)量如果為0就跳過這個batch。但更治本的是檢查數(shù)據(jù)pipeline確認255這個值到底是“忽略區(qū)域”還是“背景類0”被強行轉(zhuǎn)成了255。我見過有人把mask填充值設(shè)成255但忘記標注它是ignore導致所有有效像素都被丟掉了。還有一個小技巧如果你發(fā)現(xiàn)訓練集里某些類別的像素總數(shù)少得可憐與其硬扛CrossEntropyLoss不如先做數(shù)據(jù)清洗把標注明顯錯誤的樣本剔除。損失函數(shù)能緩解類別不平衡但補不了標注質(zhì)量的問題。4.4 損失看起來太小或為0的幾種情況loss異?!昂谩辈灰欢ù碛柧氄?。最常見的一種情況是忘記喂logits直接拿softmax后的概率值傳給CrossEntropyLoss此時loss數(shù)值會比正常情況小很多因為它是在概率值上再取log而概率值的范圍天然被壓縮在0到1之間log后的負數(shù)絕對值非常小。這時候模型不一定完全學廢但跑很久也很難收斂到理想狀態(tài)。還有一種情況是target退化成了常數(shù)比如所有mask都是背景類0。此時模型只需要輸出一個常數(shù)分布就能把loss壓得很低。驗證集mIoU可能不為0但仔細看每類IoU只有一個類有數(shù)值。要排查這個問題可以在訓練開始前可視化幾個樣本的mask看一眼是不是存在不同類別的像素。如果驗證時loss很低但mIoU不高還有一個隱藏原因是模型處于model.train()而不是model.eval()模式BatchNorm的統(tǒng)計量在驗證時還在不斷變化導致輸出不穩(wěn)定。這種問題在分割任務里很常見尤其在用驗證集計算loss時必須用with torch.no_grad()加上model.eval()。5. 一次完整最小可復現(xiàn)的分割訓練實操5.1 最小數(shù)據(jù)讀取與標簽格式轉(zhuǎn)換下面給一個可以直接改來跑的流程重點不是模型多強而是讓CrossEntropyLoss的輸入輸出嚴格合規(guī)。圖像讀取后統(tǒng)一轉(zhuǎn)成float32的(3,H,W)張量mask讀取后先做顏色映射或直接讀索引圖然后轉(zhuǎn)成int64的(H,W)張量。def load_sample(image_path, mask_path): image read_image(image_path).astype(np.float32) # H,W,3 mask_raw read_mask(mask_path) # 可能是RGB或索引圖 # 如果mask是RGB圖這里要完成顏色到索引的映射 h, w mask_raw.shape[:2] mask np.zeros((h, w), dtypenp.int64) for cls, color in color_mapping.items(): mask[np.all(mask_raw color, axis-1)] cls # 統(tǒng)一格式圖像CHW標簽HW image torch.from_numpy(image.transpose(2, 0, 1)).float() mask torch.from_numpy(mask).long() return image, mask這里color_mapping要自己根據(jù)數(shù)據(jù)集定義比如{0: (0,0,0), 1: (128,0,0)}。映射完成后做一次np.unique(mask)確認最大值小于類別數(shù)或者把不需要的區(qū)域改成255。這個步驟雖然看起來啰嗦但能攔住后面至少一半的問題。5.2 一個最小分割模型與loss初始化模型不需要太復雜核心是最后輸出logits。class SegmentNet(nn.Module): def __init__(self, in_channels3, num_classes19): super().__init__() self.backbone nn.Sequential( nn.Conv2d(in_channels, 32, 3, padding1), nn.ReLU(inplaceTrue), nn.Conv2d(32, 64, 3, padding1), nn.ReLU(inplaceTrue), ) self.head nn.Conv2d(64, num_classes, 1) def forward(self, x): return self.head(self.backbone(x))損失函數(shù)我一般先這樣初始化criterion nn.CrossEntropyLoss(ignore_index255)如果已經(jīng)統(tǒng)計好了類別頻率就加上weight參數(shù)比如weightclass_weight_tensor。注意這個tensor要放到和模型一樣的device上并且數(shù)據(jù)類型是torch.float32。不要一開始就上focal loss、dice loss之類的復雜變體先用默認CE跑通基線后續(xù)再根據(jù)問題換。5.3 訓練循環(huán)中損失計算的常見寫法對照訓練循環(huán)的核心就幾行但錯誤寫法非常多。正確寫法是for images, targets in dataloader: images images.to(device) targets targets.to(device) # (B,H,W), long logits model(images) # (B,C,H,W) loss criterion(logits, targets) optimizer.zero_grad() loss.backward() optimizer.step()常見錯誤寫法我列幾個如果你在代碼里看到類似寫法直接改loss criterion(torch.softmax(logits, dim1), targets)——錯誤重復softmax。loss criterion(logits, targets.unsqueeze(1))——錯誤target多了通道維度。loss criterion(logits, targets.float())——錯誤target必須是long。loss criterion(logits.view(-1, C), targets.view(-1))——這種做法本身沒問題但前提是原始空間對應關(guān)系沒亂。很多人是在HWC和CHW之間換得暈頭轉(zhuǎn)向結(jié)果像素順序全亂了。與其手動view不如直接保持(B,C,H,W)和(B,H,W)傳給loss。5.4 驗證與保存指標時要注意的細節(jié)驗證階段很多人會直接pred logits.argmax(dim1)然后和target比較。這里最隱蔽的問題是argmax(dim1)是類別維度是對的但如果你因為之前習慣了TF的NHWC寫成argmax(dim-1)那你的pred會在W方向上取最大得到的結(jié)果完全不是類別索引。計算mIoU時也要過濾掉ignore_index對應的像素。最簡單的方法是只計算有效像素的混淆矩陣然后逐類計算IoU?;煜仃嚨木S度是C x C但一定要先確認target的值都在0到C-1之間否則索引直接越界。另外保存可視化結(jié)果時索引mask直接保存成灰度圖會很難看最好映射回原始RGB顏色再保存。但保存和可視化用的顏色映射不能影響訓練數(shù)據(jù)它只是后處理別把它混進dataloader里。6. 問題排查速查表與實際心得6.1 常見報錯與修復對照表這里整理一份我現(xiàn)在幾乎每次排查都會對照的速查表能覆蓋大多數(shù)分割任務中的CrossEntropyLoss問題?,F(xiàn)象常見原因修復方式報錯Expected target sizetarget多了一維或傳了one-hot統(tǒng)一為(B,H,W)的long型標簽loss是nantarget含越界值、ignore_index未設(shè)置、lr過高打印target min/max設(shè)置ignore_index降低lrloss數(shù)值異常小對softmax結(jié)果再算CrossEntropyLoss改為直接傳logits訓練acc高但mIoU低類別不平衡加類別權(quán)重或換focal/dice losslabel和模型通道錯位使用了不連續(xù)的類別ID重映射標簽為0到C-1mask增強后錯位mask用了雙線性插值或未同步變換用最近鄰插值圖像和mask走同一變換驗證時loss波動大忘記model.eval()BatchNorm失效驗證階段固定model.eval()這張表每次排查都能用上但真正解決問題的往往不是最后一條而是前幾條數(shù)據(jù)鏈路的問題。所以我的習慣是先檢查數(shù)據(jù)再去動損失函數(shù)。6.2 幾個我一直在用的診斷習慣我現(xiàn)在的固定流程是在第一次訓練前單獨寫一個“冒煙測試”腳本把第一個batch的數(shù)據(jù)取出來手動前向一次打印以下信息logits.shape、target.shape、target.dtype、target.min()、target.max()、logits.min()、logits.max()。這一堆信息看一眼能攔住絕大多數(shù)低級錯誤。如果訓練過程中l(wèi)oss出現(xiàn)異常我還會把當前batch的image和target可視化拼圖保存下來。直接看圖片比看數(shù)字快得多尤其是mask是否錯位、是否有莫名奇妙的填充值、以及255和0到底哪個是背景一張圖就能講清楚。還有一個小習慣是給訓練腳本設(shè)置固定隨機種子并且使用確定性的dataloader。這樣排查問題時能穩(wěn)定復現(xiàn)不會因為數(shù)據(jù)順序變化導致現(xiàn)象時有時無。分割任務本來訓練周期就長能復現(xiàn)的問題最好在早期就控制住。6.3 回到最初的那個項目最后是怎么修好的回到我開頭說的那個街道場景項目最后其實只改了三處把RGB mask轉(zhuǎn)成了連續(xù)索引給CrossEntropyLoss設(shè)置了ignore_index255再按各類別像素頻率計算了權(quán)重。沒換模型結(jié)構(gòu)沒換優(yōu)化器mIoU直接從不到20漲到接近50。那次之后我養(yǎng)成了一個習慣每次想把損失函數(shù)換成更復雜的東西之前先問自己幾個問題——target是不是long型通道維度是不是在第2維數(shù)據(jù)增強是不是同步了mask里的值是不是在0到C-1之間如果這些答案有任何一個是“沒確認”那就先別換loss因為CrossEntropyLoss本身很簡單復雜的永遠是它前后那堆數(shù)據(jù)。最后再分享一個小技巧如果你調(diào)來調(diào)去還是覺得loss表現(xiàn)詭異先臨時把數(shù)據(jù)集縮小到一個batch擬合一個或幾個樣本看loss能不能降到接近0。如果連單樣本都擬合不了那問題一定在數(shù)據(jù)鏈路或模型前向而不是損失函數(shù)。這個辦法我在很多項目里都用過比反復調(diào)整優(yōu)化器參數(shù)有效得多。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
亚洲五月天激情| 五月婷婷69| 色丁香婷婷美女视频网站| www.狠狠色.com| 五月丁香六月激情综合啪啪| 在线1青婷| 另类激情中文| 99热思思| 婷婷五月丁香色色| 99色干| 五月丁香婷婷啪啪| 丁香五月天激情综合网| 99九九玖玖| 天天影院色| 北京熟妇搡BBBB搡BBBB| 亚洲影院婷婷色| 婷婷午夜丁香| 婷婷丁香人妻久久在线观看| 久操热线| 久久久精品婷婷五月天| 超碰人人艹| 天天上天天爽| 五月天成人在线视频网站| 五月婷啪| AV亚洲在线| 九九大香蕉黄色影院| 99热精品在线| 99re鈥哸鈥唙| 亚洲操操操| 丁香婷婷五月激情四射网| 亚洲碰碰碰| 热无码A∨| 丁香狠狠色婷婷久久无码视频| 色综合综合色| 天堂网亚洲色图| www.99热视频| 婷婷综合精品视频97| 婷婷综合五月天| 国产 码在线成人网站| 91碰九色| 精品视频99看在线视频| www.91久久| 国产操B| 七七九色| 五月天婷婷爱丁香中文字幕| 欧美婷婷日本| 91久久国产综合久久| 99热国内精品| 激情五月天小说|五月天开心激情网|亚洲精品国产自在现线|黄色五月天 | 99操视频| 91人人澡人人爽人人看| www.色五月天.com| 久久久婷| 五月丁香性爱| 丁香婷婷激情六月五月开心| AV网在线| 国产精品在线视频| 六月激情婷婷| 免费亚洲成人电影AV| 另类图片五月天婷婷| 色偷偷色婷婷| 九九热99精品| 人人视频色| 五月婷婷六月丁香综合在线| 青青草色在线视频观看| 丁香六月婷婷综合啪啪| 91热久88| 五月婷婷五月丁香综合| 色综合久久久久| 激情丁香五月综合| 丁香婷婷伊人| 青青久在线视频免费观看| 五月天堂婷婷| 91久久五月天| 一起草日本| 九九视频精品这里只有| 性爱视频久久| 99综合免费视频| 热成人网| 国模狼狼| 青草热视频这里只有精品| 五月天狠狠| 久热久操久热久草国产91| 99精品网站| 欧美美女视频| 五月丁香六月婷婷中合网| 99热在线观看精品| www.激情五月天com| 99毛片| 狠狠做六月爱婷婷综合aⅴ| 久色大香蕉| 男女啪啪做爰高潮无遮挡| 中文字幕在线免费| 久久久无码精品成人A片小说| www.sezonghe| 丁香五月激情综合在线观看| 五月天色婷好好| 亚洲在线资源| AV动漫不卡无码免费| 天天色凹凸| 狠狠干婷婷| 五月婷婷六月丁香在线视频免费在线观看| 人妻尝试久久久久久久久久久久| oumeisesewang| 丁香五月另类色婷婷麻豆| 涩 五月 婷婷 狠狠| 成人免费120分钟啪啪| 色播五月婷婷| www.色五月| 九色无码| 久久九九国产精品怡红院| 狠色狠色综合久久| 99热亚洲精品66| 丁香五月天天| 色亚洲中文| 玖玖视频福利| 丁香六月色香蕉视频| 草一草avb| 婷婷九月在线| 97热在线精品| 婷婷五月丁香花综合| 婷婷人妻激情| 五月开心久久| 色狠狠色综合久久久绯色AⅤ影视| 成人精品网站在线观看| 26uuu成人网| 免费观看全黄做爰的视频 | 五月丁香花婷婷玉莉AV| 思思热精品在线观看| 色婷婷久久7777| 99网99热| 日本成人噜噜噜| 五月婷婷福利| 深爱激情丁香五月| 99视频精品全部观看10| 欧美丁香婷婷五月天| 精品皮股午夜AV| www.久久五月天.com| 五月色综合网欧美网| 色婷婷久久| 91一起艹| 婷婷激情五月天7| 天天日天天舔天天摸| 91干| 亚洲五月天第一综合干| 欧美猛片| 六月丁香色婷婷| ss视频xx91| 婷婷六月五月天综合| 亚洲国产色色| 9l视频自拍九色9l视频在线观看| 久热中文字幕| 日韩色色视频| 九九AV| 99∨VTV| 粉嫩AV久久一区二区三区| 伊人无码高清| 最新婷婷五月丁香| 婷婷五月色图| eeuss人妻| 精品婷婷五月视| 天天拍夜夜爽日日| 色婷婷社区| 少妇激情五月天| 天天日天天爽| 五月大香蕉| 120分钟婬片免费看| www久久久| 91人在线观看| 婷久久综合| www狠狠com| 超碰免费大香蕉| 五月天社区| 9色视频在线| 五月丁香六月色婷婷综合五月天| 5月婷婷六月丁香| 99色最新在线视频网站| 超碰在线综合| 丁香五月婷婷五月| 超碰京东热av男人的天堂| 色情婷婷。| 日本三级网址| 婷婷欧美色| 嫩草综合网| 久久性爰视频这里只有精品| 五月丁香六月婷| 香蕉久久国产AV一区二区| 大香蕉婷婷色| 97在线99| 一起草无码| 欧美五月丁香在线| 这里精品| 色色色热热热| 国内9l视频自拍老熟女九色| 色玖玖综合网| 日韩激情人伦人| www.99情趣网| 99操逼| 99精品偷自拍| 香蕉乱插| 这里只精品| 深爱激情四射| 欧美色婷婷| 午夜免费试看| 色综色网| 日本婷久久| 五月丁香综合啪啪| 国产精品久久久60086| 久色婷婷200| 丁香五月婷中字幕| 色丁香久久| 中文字幕高清av| 国产 亚洲 在线| 99成人无码| 超碰91人人操| 五月美女婷婷风骚| 丁香五月天天哦| www,婷婷| 这里只有精品视频在线| 小色小蛇伊人婷婷色香五月| 天天干天天 亚洲| 久久总和99| www.色五月| 色婷婷亚洲在线观看| 五月婷婷丁香深深爱| 欧美美美女性色视频| 能看的av网站| 人人性久久| www.思思99热| 婷婷久久网| 久久久五月天网站| 六月综和久久| 日韩视频99| 超碰成人影视| 热99视频| 国产这里只有精品| 日韩在线99| 五月开心啪啪| 激情AV| 婷婷丁香五月激情密臀av| 狠狠操天天操综合| 人妻操逼视频| 伊人超碰| 丁香五月在线观看| 亚洲成人日韩无码精品| 五月婷婷色播网| 99免费视频| 色综合久久久无码中文字幕999| 成人视屏在线观看| 久久久久网站| 免费在线a| 色国产五月| 91久久久久久| 人伦30P| 丁香五月色欲| 狠狠色丁香乆乆| 天搞天天天天天| 99九九玖玖| 亚洲啪| 激情婷婷五月天伊人在线观看| 在线成人网站| 五月天婷婷社区久久综合| 五月婷婷之美女图片| 丁香五月偷拍| 五月色婷婷在线观看| 久久五月激情| 九九精品热播| 色色综合激情| 97干在线看| 婷婷五月天激情五月天| 久久婷婷五月综合色丁香花| 日韩婷婷五月天| 狠狠五月天| 久久婷狠狠色| www热久久yy9| 九九人人自拍| 色色五月天丁香婷婷| 五月天开心色色网| A色色| 六月丁丁香| 丁香五月,开心五月,成人婷婷| 99∨VTV| 丁香五月色色婷| 日韩欧美骚货| 五月久久丁香| 五月天婷爱综合| 色综合五月天| 欧美综合丁香网| 99综合网| 激情亚洲五月| 字幕网AV中文字幕| 五月丁香婷婷婷婷综合网| 天天弄天天操| 婷婷国产日本欧美| 青草视频在线播放| 亚洲女婷婷五月基地综合久久久| 国产无套精品一区二区| 99视频精品全部免费观看| AA片在线观看视频在线播放| 五月丁香网中文字幕| 狠狠操狠狠| 五月天六月丁香| 久操操| 色情·com| 天天爽天天爽| 99视频在线观看欧| 97人碰人操| 婷婷开心六月| 亚州激情九月| 六月婷婷综合| 久久这里都是精品免费| 无码激情AAAAA片-区区| 性色99| 久99久视频精品| 亚洲综合五月天综合| 免费无码毛片一区二区A片| 丁香五月色播中文在线播放| 99国产精品久久久久久久久久久 | 九九久久高清| 99re视频在线播放| 男女99免费视频| 日良久久| 欧美99热| 麻豆精品| 91超级碰| AA久久| 7777激情基地| 九九久久综合| 色丁香久久久| 亚洲激情六月| 激情五月丁香社区| 中文字幕 中文字幕明步 | 超碰renrenai| 伊人青涩网| 久久伦乱| 天天做天天爱天天日| 国产精品久久久爽爽爽麻豆色哟哟| 先锋资源 996| 大香久久伊人网| 91久久电影| 婷婷五月天激情小说| 丁香五月香蕉| 米奇影视资源婷婷狠狠色激情欧美五月丁香 | 欧美 日韩 成人 在线| 亚洲精品亚洲人成人网| 亚洲无AV在线中文字幕| 噜噜噜噜综合在线| 中文无码婷婷| 日本黄 色 片| 天天日天天舔| 天天骑日日爽| www.com久久久久久久久久久久久久久久久| 操日挥操日日| 免费观看亚洲AV片| 大伊香蕉精品视频在线| 99热这里只有精品免费| 快乐激情五月色婷婷| 青柠影视免费高清电视剧| 蜜臀嫩草| 色琪琪一综合久久激情五月视频| 久久精品国产AV一区二区三区 | 婷婷五月天国产| 久久9视频| 少妇高潮呻吟A片免费看软件| 国产婷婷色综合AV蜜臀AV| 婷婷六月啪啪| 五月综合激情啪啪啪啪啪| 噜噜狠狠色综无码久久合欧美| www.久久99热地址发布| 国产精品扒开腿做爽爽爽A片唱戏| 激情五月丁香六月婷婷| 99ri视频| 影音先锋男人站,影音先锋男人色资源网,影音先锋AV最新资源站,影音先锋AV资源 | 久草热在线视频| 激情综合婷婷| 国内一级精品| 天久综合91综合首页| 天堂综合久久 | 婷婷丁香五月激情综合站_久久五月丁香激情综合_开心五月综合激情综合五月_婷 | 亚洲射激情| 免费人人操| 婷婷色中文字幕| 能直接看的AV网站| 久久这里只有精品5| 97人碰人操| 激情综合网五月婷婷| 狠狠干狠狠干狠狠干狠狠干| av在线激情| 亚洲精品一区中文字幕乱码| 91人人操人人爱| 久热最新视频 | 免费在线观看欧美激情xx小视频| 99久热这里有精品| www99在线观看视频| http:色情日本com| 97人人操人人爽| 久久思思热视频| 亚洲成人网在线观看| 玖玖99婷婷| 99久久99九九九99九他书对| 色久天| 综合丁香婷婷五月天| 日韩三级视频一区二区| 丁香六月综合激情| 丁香五月中文字幕| www.狠狠艹| 美女亚洲五月丁香| 国产精品日日躁夜夜躁| 9 7总站超级碰免费视频| 91五月天| 美国十月色婷婷在线观看| 丁香五月天在线直播观看| 亚洲六月色婷婷| 激情综合九| 丁香五月天激情综合| 亚洲无码99| 五月婷婷中文网| 91精品在线看| 91大屁股精品| 丁香六月婷婷激情| 桃色成人网| 日韩成人免费电影| 99亚州综合精品成人网| 五月花丁香婷婷| 婷婷五月天美女| 免费97碰碰| 五月停停99| 国产成人精品一区二区三区视频 | 婷婷射丁香| 三十路磁力链接| 五月天丁香婷婷社区| 五月婷婷人妻| 色五月天中文字幕| ay2区| 99热99| 五月婷婷丁香五月| 九色综合网| 久99热| 另类激情中文| 五月婷婷说| 国产色色在线| www.激情com| 97色五月婷婷在线| 最近中文字幕2019视频1| 色五月在线观看| 99九九99九九九视频精彩| 六月久久狠狠| 五月婷婷精品无在线| 天天摸天天爽| 九九视频这里是精品五月| 91九色在线| 成人色图情色成人网 www.5b5b5bcom 五月天 | 99热这里是精品| 99啪99| 91性人人| 99日视频在线| 91热久| 五月天丁香啪啪啪啪| 五月天激情美女久久| 四LLL少妇BBBB槡BBBB| 97色碰| 日韩欧美一级大黄网站| aaa久久| 久久精彩视频| 99精品无码| 午夜五月天| 欧美日韩aaaa| 激情婷婷网| 蜜臀av在线成人电影| 五月丁香六月婷婷中文版| 无码啪啪| 噼里啪啦完整版中文在线观看| 91狠狠色| 人妻久久久久久久| 99热官网| 色婷婷影视| 天天操天天操天天操天天操天天操天天操天天操天天操天天操 | 强奸幻女毛片| 69精品人人人人人人| 色约约视频一区二区三区四区五区| 久久婷婷免费| 精品视频网| 99干在线| 色综合中文色综合网| 在线不卡中文字幕| 情色婷婷五月天| 色婷婷中文在线| 丁香六月激情| www.狠狠操.co m| 丁香五月图片| 亚洲成人乱码av网站| 亚洲九九在线| 丁香婷婷色情社区成人小说| 日本狠狠色| 综合伊人久久| 婷婷激情综合网| www.激情| 欧美日韩精品人妻狠狠躁免费视频| 专区无日本视频高清8| 先锋影音av色五月天资源站| 色天使久久综合| 99精品偷拍视频| 18久久| 婷婷五月激情欧美| 国产99热在线看| 日韩黄黄| www色综合| 日本va欧美va国产激情| 色五月色五天色情网| 婷婷五月天电影网| www.91五月| 婷婷五月天丁香久久| 骚五月婷婷| 黄网网站在线播放| 人妻videos人妻高清| 国产精品视频久久99| 亚洲丁香五月天视频| 狼人婷婷综合| 99热这里都是精品| 91黄色五月天视频| 9久久AV| 狠狠色婷婷777| 丁香五月激情欧欧美| 丁香五月亚洲天堂| 9l视频自拍9l九色9l成人| 丁香六月婷婷| 久久婷婷超碰| 超碰免费大香蕉| 五月婷婷 欧美| 色五月丁香在线| 五月婷婷亚洲色视频| 丁香六月久久| 爱爱网址9| 月色色综合婷婷网| 天天 青草 制服丝袜 在线| 色五月婷婷开心| 欧美综合激情丁香五月六月婷| 黄色片区子| 日韩婷婷| 99综合成人视频在线观看 | 午夜福利8055| 日日夜夜狠狠婷婷色| 五月停停丁香| 色啪网| 任你躁XXXXX麻豆精品| 美女爆乳18禁www久久久久久| 丁香九九九九| 天天干天天玩天天夜天天射天天操天天日蜜臀少妇 | 五月婷婷激情| 九九亚洲小视频| 婷婷成人五月天成人文学| 九九这里只有精品| 99ri国产精品| 99极品视频| 婷婷六月丁香五月| 99∨VTV| 色 噜噜 九月 婷婷| 婷婷成人综合| 99视频这里只有精品10| 五月天婷婷激情在线色图| 婷婷五月色播天| 热久国产| 夜夜撸日日骑| 欧洲亚洲精品| 免费啪啪啪网站| 在线国产精品色| 亚洲色爱综合| 久久久97| 丁香五婷婷| 五月天四色房丁香| 大香蕉啪啪啪| 久久伊人婷| 婷婷丁香色五月亚洲| 这里只有精品免费视频| 99欧美| 性热视频99精品| 婷五月天在线草| 日本一级一片免费视频| 激情五月婷婷综合秋霞| 色狠狠狠干| 色综合激情| 欧美性生交XXXXX无码小说| 超碰在线观看9| 久热A| 超碰在线国产| 成人午夜免费电影| 亚洲天天综合| 国产小精品| 激情婷婷色色| 久久这里只有精品热在99| 亚洲亚洲人成综合网络| 九九色色| 九热免费视频| 97人妻人人| 丁香五月激情六月| 激情婷婷五月| www999日韩精品| 五月天婷婷在线播放免费| 色色色综合网| 中文字幕在线日亚洲9| 狠狠五月激情丁香六月| 亚洲午夜成人av电影网| site:hcxsz888.com| 五月婷婷开心网| av中文字幕免费观看| 99综合视频在线| 久婷久婷| 色婷婷AⅤ| 丁香五月综合亚洲| 亚洲中文字幕在线观看| 精品视频这里只有精品| 久久网日本| 久久五月婷婷视频| 婷婷丁香在线播放| 97碰碰久久| 亚洲色五月天是什么| 操操啪| 97碰碰在线观看视频| se99视频| 噢美99| 五月色丁香婷婷中文字幕| 亚洲激情五月天| 丁香五月婷婷啪| 婷色五月天| 葵花AV在线| 丁香五月丁香伊人| 乱精品一区字幕二区| 久久久妻人人人| 99色中文| 91狠狠色丁香| 99热官网精品在线| 超级碰碰视频无码| 丁香六月色婷婷| 亚洲AV成人在线观看| 夜夜夜夜做天天天做无码视频| 色色婷婷五月天| 91丨九色丨熟女高潮| 91热99| 色婷天天| 九九热黄色| 久99久在线观看| 激情啪啪五月| 香焦网五月天| 色欲天天综合| 97碰超级人人看| 超碰成人在线观看| 久久免费9| 婷婷无码视频| 性视频久久| 婷婷五月丁香六月| 成人亚洲精品| www.夜夜操.com| 激情深爱五月婷婷| 日日夜夜狠狠| 亚洲色五月天是什么| 久久思思热| 激情网战码亚洲A| 激情婷婷五月| 日日色五月天| 91久久久久久久久久18| 台湾佬天天日丁香婷婷五月天 | 五月天婷婷基地丁香| 综合激情五月丁香| 国产色色网址网站| 欧美人与性动交CCOO| 亚洲综合网激情小说| 开心五月婷婷激情| 三十路磁力链接| 婷婷丁香六月天| 五月综合色播播丁香婷婷| 久久久潮喷-久久久九九-成人AV| 五月六月丁香激情| 九九人人自拍| 婷婷五月天久久久| 婷婷五月天.com| 日韩AV中文在线观看| 国产精品A片| 婷婷综合在线视频| 色色五月天网站| 91狠狠综合久久久久久| 五月婷婷色| 五月丁香久久丝袜啪啪| www.久久色.com| 激情亭亭五月| 五月开心婷婷极品激情| 疯狂做受XXXX高潮A片| dingxiangtingtingliuyue| 色播五月丁香综合| 粉嫩av懂色av蜜臀av熟妇| AV色五月婷婷| 97在线观视频免费观看| 五月婷婷六月综合| 淫视馆AV在线| 2018国产大陆天天弄| 婷婷五月激情在线| www.综合久久.com| 婷婷五月天网| 伊人久久丁香婷婷六月五月综合| 丁香六月激情毛片| 天天操比比| 成人AV在线网站| 天综合日日夜综合7799| 中文字幕在线观看视频www| 人人爱天天摸摸天天爱| 激情五月天.色网| 欧日韩成人| 九九热这里精品| 99精品综合在线| 日本久久婷婷| 五月丁香999| 久久日韩婷婷五月| 激情五月婷婷五月| 337午夜福利| 色色色综合色| 日本欧美成人片AAAA| 99爱视频在线| 六月丁香婷婷拍拍| 五月丁香婷婷激情爱爱| 婷婷亚洲色| 囯产精品一品二区三区| 丝袜激情网| 国产精品大香蕉| 日日天天干| 五月婷婷大香蕉| 国产九月婷婷| 综合婷婷| 五月丁香欧美综合| 婷婷五月天色| 丁香花五月天社区| 婷婷亚洲综合| 五月婷婷官网色| 99色这里| 99热在线观看99| www.99在线| 婷婷狠狠操| 五月天婷综合网站| 97超级碰碰碰| 亚洲成av人影院| 婷丁香五月天| 婷婷五月激情欧美大胆视频| 99在线免费视频| 久久您您综合网| 99热偷拍| 亚洲激情综合免费| 六月婷婷深深爱| www.综合久久| 国产精自产拍久久久久久蜜| 亚洲天堂大香蕉| 精品九九视频| 思思热这里只有精品视频666| 婷婷激情六月中文| 午夜大香蕉| 26uuu欧美| 热九九精品| 色色五月婷婷网| 综合婷婷| 大学生高潮无套内谢视频| 激情综合五月| 99久久这里只有精品| 日日日日日| 超碰99在线观看| 无人区码一码二码三码医生系列| 国产国产乱老熟女视频网站97| 成人在线日韩| 爱99干99| 人人综合色| 人人操 色| 香焦网五月天| 国产伦理精品高清在线观看网站一区二区 | 色五月大| 丁香婷婷六月天| 色噜噜狠狠一区二区三区| 天堂成人A片永久免费网站| 中文字幕无码AV| 久久久天堂国产精品女人| 就爱日五月天| 午夜成人网站在线观看| 中文字幕成人| 天天操夜夜夜拍拍拍| 午夜色丁香| 淫视馆AV在线| 国产99久久久国产精品免费看| 婷婷色狠狠| 婷婷综合精品| 狠狠色激情在线| 色婷婷六月天在线| 性综合网| 久久全色| 亚洲五月丁香综合网| 噜噜色com| 涩综合网| 欧美性生交XXXXX无码小说| 婷婷丁香社区| 广东99色在线| 日本久久人| 嫩草AV久久伊人妇女超级A| 六月婷婷最新网址| 天天开心婷婷丁香五月| 久久亚洲婷婷| 在线观看中文字幕| 在线色婷婷| 欧美日本VA| 五月天婷婷7米| 人妻久久久久久| 久久99免费视频网站| 9九热视频| 日韩啊啊啊| 久久香蕉影院| 五月天婷婷网站888| 99爱免费在线视频| 亚洲精品午夜国产va久久成人| 丁香五月亚洲综合| 日本狠狠爽| 久久精品五月天| 大鸡巴伊人网| 热久久66| 综合网激情| www热久久yy9| 丁香五月婷婷香| 丰满少妇猛烈A片免费看观看| 天天操婷婷| 久久婷婷五月综合伊人| 国产精品99久久久久久久女警| 丁香五月激情棕合| 九九精品在线观看视频6| 99精品偷自拍| 无码少妇高潮喷水A片免费| 久草婷妨| 人妻系列久久久久久久久久久| 色婷天天| 亚洲无码猫咪| 99热这里只有精品最新地址获取| 天天日天天插| 五月网激情| 亚洲精品99| 色五月色图| 丁香五月婷婷色偷偷| 日韩ww| 综合丁香婷婷五月天| 激情久久综合| 九九色之九九色之88| 婷婷综合精品视频97| BlACKEDRAW视频一区二区| www 五月天 com| 丁香六月婷婷久久综合| 综合逼五月激情婷婷| 五月丁香五月综合欧美| 五月丁香无码| 日韩欧洲亚洲| 色婷婷五月开心六月综合| 色婷婷a v| 丁香五月天激情| 91在线日| 超碰色婷婷| 婷婷操逼| 99热精品在线| 另类图片五月天| 天天搞夜夜六| 中国女人内射6XXXXX| 色五月激情综合| 丁香五月激情综合久久| 人人人舔人人人操人人人摸人人人97| 久久这里只有精品视频15| 亚洲天天综合| 东京热人妻一区二区三区在线| 九九亚洲视频| 超碰在线综合| 久久婷婷啪啪视频| 婷婷丁香射射| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | 五月婷婷视频| 国产资源91在线| 日韩在线成人电影| 丁香五月综合婷婷| 午夜理论片最新午夜理论剧| 婷婷五月天激情四射| 99爱免费在线视频| 五月狠狠| 26uuu日韩| 丁香五月人妻熟女| 日韩成人综合| 五月激情六月宗合| 天天天添天天操| 激情六月天婷婷| 超碰91在线| 密乳视频| 九九自拍网| 国产成人精品亚洲线观看| 久久久久久性爱视频| 91黄操| 精品国产乱码久久久久夜深人妻| 欧美日韩一区二区三区四区| 成人电影在线免费试看| 伊人综合网站| 干一干xxxx| 亚洲婷婷丁香五月天激情小说| 婷婷丁香六月天| AV在线观看网站| 国产一级婬片毛片| 六月色激情| 蜜乳久AV| 99久在线观看| 狠狠色噜噜色狠狠狠综合久久成人波| 久99久在线观看| 色综合久久久综合久久网| 99久在线精品| 色色色色色网站| 婷五月天天| 亚洲顶级VA在线观看-高清完整版在线影院观看-S022AV | 五月婷婷激情69| 婷婷五月丁香综合| 日本色超碰| 97人人干| 婷婷天天色| 婷婷五月天电影网| 婷婷深爱五月亚洲综合| 大香蕉婷婷丁香天堂AV| 色九月综合| 五月色综合| 亚洲精品午夜国产va久久成人| 天天色天天爱天天爱天天爱y| 热99视频| 人妻久久久久久久久妻久久久久久久久| 婷婷综合在线视频| 丁香六月亚洲| 专区无日本视频高清8| 日日杆天天| 日亚二欧美| 天天插天天插天天插| 天天爽曰日爽| 天天做天天视天天谢| 五月丁香福利| 91精产一区三区免费观看| 特黄三级又爽又粗又大| 亚洲精品**不卡在线播he| 另类少妇人与禽zOZZ0性伦| 99色色网| 操碰99| 激情99| 99视频在线播放大全| 久久这里99| 婷婷的激情五月| 另类在线| 五月婷婷综合激情| www.色综合| 久久精品91视频| 热热99爱爱| 超碰三级片| 香蕉国产2013| 狠狠爱综合| 丁香啪啪| 五月丁香综合啪啪| 玖玖色综合| 天天爽成人综合网站| 婷婷五月天成人在线视频| 在线99热| 久久性爱视频| 美女天天艹人人爽| 香蕉综合网| 天天综合亚洲综合网天天αⅴ| 思思久久网| 国产片天天爽夜夜爽| 五月婷久久| 综合五月天天天天天五月| 青草激情综合| 丁香五月天AV| 99免费热视频在线| 久久综合激情| 婷婷六月天| 亲子乱AV-区二区三区| 亚洲第二AV| 黄色五月婷婷| 五月天婷婷久久| 激情99。| 五月丁香六月婷婷姐| 婷婷五月天堂| 五月综合视频| 成人做爰A片免费看网站找不到了| 99精品国产在热久久| www.玖玖婷婷在线| 丁香六月色婷婷| 色五月天网| www.狠狠艹| 67194成I人在线观看线路1| 亚洲色色色| 国产做爰视频免费播放| 影音先锋91| 丁香婷婷色五月| www,五月天激情| 97碰碰视频| 成人综合网站| 91疯狂操操操操| 综合综合色色| www.婷婷,com| 日本欧美成人片AAAA| 在线99精品| 精品久久99| 第一区久久网站| 五月婷婷熟女| 色五月丁香五| 五月丁香啪啪网| 天天爽天天草| 成功精品影院| 亚洲4区国产欧美| 六月色日韩| 亚洲最大五月六月丁香婷婷| 亚洲超碰在线| 欧美激情-区二区三区| 天搞天天天天天| 人人摸人人干| 亚洲字幕AV一区二区三区四区| 六月婷婷网| 丁香五月天欧美| 九九视屏| 综合九色| 日本成人噜噜噜噜噜| 亚洲国产99| 日本一级黄色片。| 亚洲1区| 婷婷五月天综合小说网| 99热这里只有精品1| 婷婷玖玖丁香| 人人干AV| 这里只有精品视频| 日本色天堂| 欧美丁香婷婷五月| 人妻丰满精品一区二区A片| 五月丁香网视频| 五月天婷婷激情| 丁香伍月婷电影全集| 免费的日逼视频| 人人爱人人草| 九九激情综合| 五月天激情四射网站| 激情性爱网站| 噜噜色噜噜网| 玖玖九九9999在线观看视频精品| 婷婷区日本| 久久香蕉网| 99精品视频在线6| 丁香五月播播| 久热中文字幕| 婷婷丁香亚洲色综合91| 色婷婷激情四射视频| 久久这里只| 97操碰免费视频| 九九视频这里有精品| 综合五月激情| www.ppypp| 日本偷拍九九九| 久久开心五月天激情| 婷婷六月丁综合| 五月婷婷六月丁香在线视频| 婷婷干| 玖玖资源站蜜臀| 免费观看高清无码| 丁香六月婷婷综合在线| 韩国97天堂| 亚洲成人黄色网| 影音先锋男人站,影音先锋男人色资源网,影音先锋AV最新资源站,影音先锋AV资源 | 天天爱天天做天天操| 91人妻色色网| 久热这里只有精品99re| 思思热国产视频| 99热网站| 五月丁香激情综合欧美| 婷婷五月在线影院| 这里有精品2| 激情婷婷五月少妇| 日本一道久久| 色亚洲中文| 猫咪伊人AV| 五月色婷婷综合| 亚洲午夜电影| 99热在线精品观看| 国产欧美婷婷五月| www.91AV.com| 色婷婷a| 97丁香花五月天激情小说| 青草视频在线观看视频| 五月丁香六月香综合激情| 久99久视频免费观看| 五月天激情小说| 色婷婷成人在线| 91九色 熟| Av九九| 色欲日日躁| 激情五月天婷婷色色色色色色色色色色色| 激情综合五月天| 5月婷婷6月丁香aV| 亚洲综合成人网站| 天天爽天天| 骚。com| 久热欧美| 99国产精品白浆在线观看免费| 激情网五月| WWW五月婷婷| 99精品久久久久久久久| 天天爽天天干| 热思思| 第四色五月激情网| 五月丁香888| 熟妇无码乱子成人精品| 俺去也五月天| 欧美综合在线五月天色婷婷| 中文字幕丰满人妻无码专区| 五月婷亚洲精品| 丁香婷婷五月天色综合| 69人人操人人爽| 亚洲成人在线免费| 婷婷开心激情综合五月天| 五月天激情国产综合婷婷婷就去爱| 中字幕视频在线永久在线观看免费| 裸体美女丁香五月天。| 深爱激情网婷婷| 丁香五月中文字幕| 婷婷五月综合中文字幕| 啊v视频在线观看| 综合久久五月天| 婷婷丁香色五月天久久88| 猫咪伊人久久| 果冻传媒A片一二三区| 日本狠狠色| 婷婷五月天堂| 五月深爱网| 成人婷婷五月天| 亚洲热视频| 热99这里只是精品| 色婷婷精品视频| 97色碰碰公开视频| 男女啪啪做爰高潮无遮挡| 久九色| 日韩AAAAAAAAAAA片| 丁香五月婷婷色播艳门照| 色99视| 九九综合色| 99自拍网| 五月丁香激| 2050人人操免费工开爱| 色五月激情五月| 日本色婷婷| 97干欧美| 99人人干| 天堂久久精品| 丁香六月色婷婷| 99热在线看片| 丁香五月开心亚洲| 五月久久婷婷天堂视频| 狠狠干综合| 激情第四色| 婷婷午夜精品久久久| 五月综合久久| 五月天色不卡| 天天干天天日天天操| 五月天婷婷成人| 婷婷五月天激情电影小说| 亚洲五月天激情| 在线观看婷婷5月| 免费看欧美成人A片无码 | 丁香五月亚洲激情婷婷射| 色99网| 婷婷她六月天| 国产Va视频| 婷婷成人综合五月| 亚洲丁香五月在线观看| 九九热在线精品| 97操视频| 色色综合网站| 久久综合久色欧美综合狠狠| 丁香五月 性爱| 人橾人| 婷婷丁香射射| 九九久久视频| 日韩啊啊啊| 国产操碰| 成人无码精品1区2区3区免费看| 亚洲妇女熟BBW| 99热 日韩| 人橾人| 啪啪综合| 精品无码色| 欧美色色色色色色色| 九九婷婷综合| 操操操AV| 色婷婷9| 极品人妻VIDEOSSS人妻| 淫视馆av三区| 国产五月天婷婷| 狠狠狠狠狠狠狠狠狠狠狠色宗合图片| 久久99美女精彩视频| 中文字幕不卡+婷婷五月| 亚洲视频一区| 九九综合88| 另类的婷婷| 亭亭五月天黑人2014| 五月丁香激情四射| 99丁香婷婷综合网| 日本97在线视频| 五月婷婷免费| 日本九婷婷| 操老逼综合网| 九九九色综合| 五月色丁香激情| www.国产色| 色九月丁香婷婷蜜桃在线观看| 综合色色婷婷| 精品久久久久久久久久久久人妻| 67194中文字幕| 日韩ww| 九九黄色网| 五月天桃色深爱网| 国产av天堂| 97久久五月丁香婷婷| 99.色| 人妻久久久久久久 | 激情婷婷视频在线| 开心丁五月| www久久艹| 超碰cap| 色波激情五月天| 久久婷婷六月综合综合| 伊人久久婷婷| 91九色视频| 狠狠色噜噜狠狠狠888| 级人人91| 欧美va视频不用播放器的va视频网| 婷婷色色丁香五月天| 99日在线观看视频| 色噜噜在线| 青青草视频免费观看| 伊人春天av| 色欲天天综合| 99热狠狠操| 天天日,天天插| 四虎99热在线观看网站| 俺五月| www.99热| 丁香九月综合| 六月丁香综合| 婷婷色在线播放| 五月天婷婷在线视频| AV变态另类一区二区| 都市激情小说婷婷| 性av| 欧美婷婷| 激情综合网五月天| 香蕉久久国产AV一区二区| 日韩一级片| 婷婷中文无码| 99久久9| 99久久亚洲精品视频| 狠狠爱婷婷| 五月婷婷啪啪啪| 大香蕉网站,大香蕉综合| 97人人做| 五月婷亚洲精品AV天堂| 丁香婷婷久久| 五月婷婷六月色| 婷婷五月色花丁香社区| 色色色综合网| 亚洲色爽| 九月激情婷婷丁香| 思思热在线免费视频| 五月天大香蕉婷| 99爱视频在线观看这里只有精品| 久久日婷婷|