欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線(xiàn)實(shí)戰(zhàn)洞察。

多粒度評(píng)估長(zhǎng)視頻段落描述:CLIP-CC-Bench如何破解視頻理解難題

多粒度評(píng)估長(zhǎng)視頻段落描述:CLIP-CC-Bench如何破解視頻理解難題 你拿一段5分鐘的視頻丟給主流多模態(tài)大模型讓它把內(nèi)容完整描述出來(lái)。輸出可能是一段流暢的段落讀起來(lái)幾乎沒(méi)有破綻但你越對(duì)照視頻越覺(jué)得不對(duì)勁某個(gè)關(guān)鍵行為被一筆帶過(guò)某個(gè)時(shí)間點(diǎn)上的因果順序被寫(xiě)反。這種體驗(yàn)很常見(jiàn)也是CLIP-CC-Bench這類(lèi)新基準(zhǔn)想解決的問(wèn)題——長(zhǎng)視頻段落描述的評(píng)估到底應(yīng)該怎么設(shè)計(jì)模型并不是簡(jiǎn)單地“沒(méi)看懂”而是評(píng)估粒度從一開(kāi)始可能就不太對(duì)。最近看到一個(gè)新的基準(zhǔn)名字進(jìn)入視野CLIP-CC-Bench。從名字看它沿用了CLIP的語(yǔ)義對(duì)齊思路目標(biāo)落在長(zhǎng)視頻段落描述評(píng)估上并且明確把“多粒度”作為核心屬性。這類(lèi)工作真正想解決的不是“模型能不能描述視頻”而是“我們能不能在正確的粒度上評(píng)價(jià)模型”。下面把這個(gè)問(wèn)題拆開(kāi)講。1. 長(zhǎng)視頻段落描述評(píng)估難在哪里1.1 不是“能不能理解”的問(wèn)題而是“從哪個(gè)尺度理解”的問(wèn)題我們經(jīng)常把視頻語(yǔ)言模型評(píng)測(cè)想象成一道有點(diǎn)像“看圖說(shuō)話(huà)”的題目給模型看一段視頻讓它輸出一段文字然后拿這段文字和人工寫(xiě)的參考描述比一下相似度。但長(zhǎng)視頻場(chǎng)景下這個(gè)思路會(huì)很快失效。原因在于一段5分鐘的視頻不是一個(gè)均勻的輸入。它里面可能有場(chǎng)景切換、鏡頭運(yùn)動(dòng)、人物進(jìn)出、事件因果、轉(zhuǎn)場(chǎng)與停頓。模型不是只看一幀也不是只看一個(gè)鏡頭而是需要把時(shí)間軸上的視覺(jué)信息整合成一段描述。這時(shí)候“理解”這個(gè)概念被分成了好幾層它能不能判斷視頻里發(fā)生了什么能不能判斷這些事發(fā)生在哪個(gè)時(shí)間段能不能把這件事與該事件前后的狀態(tài)聯(lián)系起來(lái)能不能用自然語(yǔ)言把這種關(guān)系表達(dá)出來(lái)?;\統(tǒng)問(wèn)一句“描述得怎么樣”回答不了這些問(wèn)題。所以更準(zhǔn)確的說(shuō)法是長(zhǎng)視頻段落描述評(píng)估難在“尺度錯(cuò)配”。模型輸出的是整段視頻的一段話(huà)但人類(lèi)在評(píng)價(jià)時(shí)會(huì)自動(dòng)關(guān)注具體段落和具體事件。比如你看完某段描述發(fā)現(xiàn)“把前半段的物體安到了后半段的場(chǎng)景里”你其實(shí)是在用“時(shí)間區(qū)間”去對(duì)照模型輸出。但傳統(tǒng)評(píng)估指標(biāo)通常沒(méi)有時(shí)間區(qū)間這個(gè)概念它只會(huì)告訴你“這兩個(gè)句子語(yǔ)義上有多少重合”。這就會(huì)帶來(lái)很奇怪的現(xiàn)場(chǎng)模型漏掉一段關(guān)鍵內(nèi)容但因?yàn)樗哑渌糠终f(shuō)得很好最終分?jǐn)?shù)仍然不低。1.2 整段式評(píng)估為什么容易掩蓋關(guān)鍵錯(cuò)誤把“一個(gè)視頻”作為最小評(píng)估單元是很多評(píng)測(cè)的默認(rèn)做法。這樣做的好處是簡(jiǎn)單、成本低、統(tǒng)計(jì)方便。但壞處也很明顯信息被大量平均化。舉個(gè)例子一段視頻里有三個(gè)主要事件先是運(yùn)動(dòng)員做準(zhǔn)備活動(dòng)然后進(jìn)行比賽最后頒獎(jiǎng)。如果模型只描述了準(zhǔn)備活動(dòng)和頒獎(jiǎng)漏掉了比賽本身整段描述讀起來(lái)依然通順句子層面的相似度也可能不錯(cuò)。但你從真實(shí)使用角度去看這個(gè)輸出是失敗的因?yàn)橛脩?hù)最想看到的是比賽過(guò)程中的關(guān)鍵事件。整段評(píng)估無(wú)法暴露這種失敗因?yàn)樗鼪](méi)有要求模型在正確的位置輸出正確的描述。更麻煩的是不同的模型可能在“漏”的地方不一樣。有的模型擅長(zhǎng)捕捉動(dòng)作類(lèi)事件卻忽略物體類(lèi)細(xì)節(jié)有的模型能給出準(zhǔn)確的時(shí)間順序但對(duì)視覺(jué)外觀描述很泛。如果你只用一個(gè)總分去比較兩個(gè)模型你看到的可能是“差不多”但實(shí)際它們的錯(cuò)誤模式差異很大。而只有建立以“段落”“事件”為單位的評(píng)估才能把這些差異暴露出來(lái)。這也是為什么CLIP-CC-Bench這類(lèi)工作要把“多粒度”放在臺(tái)面上。2. 多粒度基準(zhǔn)設(shè)計(jì)的基礎(chǔ)先把“粒度”拆清楚2.1 視頻級(jí)、段落級(jí)、事件級(jí)三種粒度的差異“多粒度”聽(tīng)起來(lái)是一個(gè)很高級(jí)的詞但本質(zhì)上并不復(fù)雜它指的不是讓模型輸出任意長(zhǎng)度的描述而是在評(píng)估時(shí)把視頻內(nèi)容劃分成不同尺度的單元再讓模型輸出對(duì)應(yīng)尺度的描述。常見(jiàn)的有三種視頻級(jí)整段視頻對(duì)應(yīng)一段完整描述。適合回答“這個(gè)視頻大概講了什么”用于推薦、檢索、摘要等場(chǎng)景。段落級(jí)按鏡頭、場(chǎng)景或時(shí)間軸切成若干段落每段對(duì)應(yīng)一段描述。適合回答“每個(gè)階段分別發(fā)生了什么”用于視頻剪輯、內(nèi)容歸檔、分鏡理解。事件級(jí)以某個(gè)語(yǔ)義完整的事件為單元比如“一個(gè)人走進(jìn)房間”“兩個(gè)人開(kāi)始交談”“屏幕上出現(xiàn)了一串?dāng)?shù)字”。適合回答“具體事件的時(shí)間、位置、參與者”用于視頻問(wèn)答、目標(biāo)跟蹤、內(nèi)容審核等。可以這樣理解視頻級(jí)是粗顆粒段落級(jí)是中顆粒事件級(jí)是細(xì)顆粒。三者的評(píng)估重點(diǎn)不同。視頻級(jí)關(guān)注整體語(yǔ)義覆蓋段落級(jí)關(guān)注時(shí)間邊界和內(nèi)容連續(xù)性事件級(jí)關(guān)注事件元素是否齊全、時(shí)序是否準(zhǔn)確。2.2 為什么標(biāo)題偏偏強(qiáng)調(diào)“多粒度”而不是“多任務(wù)”有些評(píng)測(cè)同時(shí)包含很多個(gè)任務(wù)比如視頻問(wèn)答、視頻摘要、視頻分類(lèi)、視頻檢索它們也叫“多任務(wù)基準(zhǔn)”。但CLIP-CC-Bench強(qiáng)調(diào)的“多粒度”不是任務(wù)種類(lèi)的增加而是評(píng)估容器的變化。關(guān)鍵差別在于多任務(wù)評(píng)估問(wèn)的是“模型能不能做不同的事情”多粒度評(píng)估問(wèn)的是“模型對(duì)同一段內(nèi)容能不能在不同尺度上都具備穩(wěn)定的理解”。后者的難度更高因?yàn)槟P涂赡茉谀骋粋€(gè)粒度上表現(xiàn)很好在另一個(gè)粒度上卻崩潰。比如一個(gè)模型可以輕松回答“這個(gè)視頻里的人在做什么運(yùn)動(dòng)”但你讓它按時(shí)間順序描述“第40秒到第70秒發(fā)生了什么”它可能就會(huì)卡殼因?yàn)橹虚g有場(chǎng)景切換模型未必能把視覺(jué)信息和對(duì)應(yīng)時(shí)間區(qū)間對(duì)齊。所以設(shè)計(jì)一個(gè)多粒度基準(zhǔn)本質(zhì)上是把“視頻理解能力”切成可分別觀測(cè)的軸時(shí)間定位能力、段落切分能力、事件抽取能力、文本生成能力。它不是在給模型出一道更難的題而是在給模型做一次“能力體檢”。這也是為什么這類(lèi)基準(zhǔn)的價(jià)值不能只用榜單分?jǐn)?shù)來(lái)衡量而是要看它能不能幫助研究者找到模型的薄弱層。3. CLIP-CC-Bench的出現(xiàn)它試圖解決什么3.1 CLIP語(yǔ)義空間與長(zhǎng)視頻評(píng)估的結(jié)合點(diǎn)CLIP這類(lèi)模型的核心能力是把圖像和文本映射到同一個(gè)向量空間。這個(gè)東西在圖像分類(lèi)、圖文檢索里已經(jīng)用得很多了很多人也很熟悉一段文本和一張圖在語(yǔ)義相近時(shí)向量距離會(huì)拉近。但要把它用到長(zhǎng)視頻段落描述評(píng)估上不能只是把視頻抽幾幀、算個(gè)相似度就結(jié)束。因?yàn)橐曨l有長(zhǎng)度、有時(shí)間軸、有段落邊界一個(gè)段落描述對(duì)應(yīng)的是某一段時(shí)間窗口內(nèi)的視覺(jué)信息而不是整個(gè)視頻的平均語(yǔ)義。CLIP-CC-Bench如果把CLIP語(yǔ)義空間引入評(píng)估大概率是把它當(dāng)作“匹配工具”把模型生成的段落描述與某個(gè)視頻區(qū)間的參考描述做語(yǔ)義匹配同時(shí)判斷這個(gè)區(qū)間定位準(zhǔn)不準(zhǔn)。這個(gè)設(shè)計(jì)思路的進(jìn)步在于評(píng)估不再只是“文本和文本比”而是“文本和視頻時(shí)間段比”。它把大模型輸出的描述放回視頻時(shí)間軸里做對(duì)齊而不是懸浮在句子上空。這樣能回答比“像不像”更關(guān)鍵的問(wèn)題“說(shuō)得對(duì)但是不是對(duì)的這一段時(shí)間”這個(gè)問(wèn)題在長(zhǎng)視頻場(chǎng)景中非常重要。比如一個(gè)模型把“打完球之后喝水”寫(xiě)成了“開(kāi)始打球時(shí)喝水”句子語(yǔ)義上可能仍然高度相關(guān)但時(shí)間定位錯(cuò)了這在實(shí)際應(yīng)用里屬于事實(shí)性錯(cuò)誤。3.2 段落描述評(píng)估的關(guān)鍵閉環(huán)生成、定位、匹配、打分圍繞CLIP-CC-Bench這樣的基準(zhǔn)一個(gè)完整的評(píng)估流程大致應(yīng)該是一個(gè)閉環(huán)而不是簡(jiǎn)單的“輸入視頻—輸出分?jǐn)?shù)”兩條線(xiàn)。我一般會(huì)把閉環(huán)拆成四步生成段落描述模型輸出一段或若干段自然語(yǔ)言描述。定位時(shí)間區(qū)間判斷這段描述對(duì)應(yīng)視頻中的哪個(gè)段落通常由標(biāo)注數(shù)據(jù)或模型預(yù)測(cè)提供時(shí)間邊界。與參考描述匹配把模型輸出與人工參考描述做語(yǔ)義匹配例如在CLIP語(yǔ)義空間中計(jì)算相似度也可以用文本匹配模型輔助。給出多粒度得分分別計(jì)算視頻級(jí)、段落級(jí)、事件級(jí)的表現(xiàn)并輸出錯(cuò)誤類(lèi)型。第2步往往最容易被忽略。很多評(píng)測(cè)默認(rèn)模型輸出的描述是對(duì)應(yīng)整段視頻的但長(zhǎng)視頻里模型輸出的每句話(huà)未必覆蓋整段視頻可能只覆蓋某一段。如果不做時(shí)間定位后面所有打分都會(huì)失真。CLIP-CC-Bench把“段落”寫(xiě)進(jìn)名稱(chēng)里也是在提示這個(gè)關(guān)鍵評(píng)估模型輸出時(shí)要明確這句話(huà)到底寫(xiě)的是哪個(gè)時(shí)間段的內(nèi)容。3.3 注意不要把一個(gè)新基準(zhǔn)神化每當(dāng)一個(gè)“新基準(zhǔn)”出現(xiàn)社區(qū)里很容易出現(xiàn)兩種傾向一種是“太好了以后就用它了”另一種是“又一個(gè)刷榜玩具”。這兩種都過(guò)于極端。首先CLIP-CC-Bench能提供一個(gè)相對(duì)標(biāo)準(zhǔn)化的評(píng)估框架這當(dāng)然是好事。但一個(gè)新基準(zhǔn)能不能在社區(qū)中真正普及還取決于很多因素?cái)?shù)據(jù)規(guī)模、標(biāo)注質(zhì)量、語(yǔ)言覆蓋面、公開(kāi)接口、評(píng)測(cè)成本以及它能不能經(jīng)受住跨模型跨場(chǎng)景的穩(wěn)定性檢驗(yàn)。這些信息要看論文和開(kāi)源倉(cāng)庫(kù)的具體說(shuō)明不能只看標(biāo)題就下結(jié)論。其次即使一個(gè)模型在某個(gè)多粒度基準(zhǔn)上拿了高分也不代表它在所有長(zhǎng)視頻場(chǎng)景里都好用?;鶞?zhǔn)數(shù)據(jù)通常來(lái)自特定視頻分布可能是開(kāi)放域視頻也可能是某個(gè)垂直領(lǐng)域標(biāo)注者對(duì)“事件邊界”的理解也可能有差異。所以真正理性的用法是把這類(lèi)基準(zhǔn)當(dāng)作“參考系之一”和具體業(yè)務(wù)數(shù)據(jù)結(jié)合著看。別急著把宣傳語(yǔ)當(dāng)成能力保證。4. 從評(píng)測(cè)視角看多粒度基準(zhǔn)應(yīng)該怎么用4.1 先跑通一條小樣本評(píng)估流程不管CLIP-CC-Bench未來(lái)提供的是離線(xiàn)工具包還是在線(xiàn)評(píng)測(cè)接口使用方式都應(yīng)該遵循同一個(gè)原則先跑小樣本再?zèng)Q定要不要擴(kuò)量。直接在全量數(shù)據(jù)集上跑容易遇到數(shù)據(jù)格式不兼容、接口調(diào)用失敗、輸出粒度不符合要求、參考標(biāo)注不能完全對(duì)齊等問(wèn)題。尤其當(dāng)模型輸出是自由文本時(shí)清洗和歸一化的成本會(huì)比想象中高。如果是自建評(píng)測(cè)流程我建議先準(zhǔn)備10到20個(gè)代表性視頻。不需要追求數(shù)量但要覆蓋不同類(lèi)型的長(zhǎng)視頻有人物對(duì)話(huà)、有場(chǎng)景切換、有長(zhǎng)時(shí)間無(wú)動(dòng)作畫(huà)面、有多個(gè)并行事件。然后讓模型分別生成視頻級(jí)描述和段落級(jí)描述再與標(biāo)注好的參考段落對(duì)比。這一步的目的不是測(cè)出精確數(shù)值而是驗(yàn)證評(píng)估鏈路是否通暢。你以為的“參考描述”可能和模型輸出結(jié)構(gòu)差別很大比如參考描述按時(shí)間順序逐條列出模型輸出卻是連貫敘述這就需要在匹配前做句子切分或時(shí)間戳映射。流程跑順之后再擴(kuò)大樣本否則遇到大量邊界情況時(shí)你很難分清是模型能力問(wèn)題還是評(píng)估工具問(wèn)題。4.2 評(píng)估結(jié)果要拆著看不是只有一個(gè)總分多粒度基準(zhǔn)最大的一個(gè)好處是可以把“一個(gè)總分”拆成“一組分?jǐn)?shù)”。使用者在看結(jié)果時(shí)也要習(xí)慣按維度去看。評(píng)估維度典型問(wèn)題推薦指標(biāo)視頻級(jí)描述整體語(yǔ)義是否覆蓋核心內(nèi)容文本相似度、關(guān)鍵詞覆蓋率段落級(jí)描述每個(gè)段落是否有對(duì)應(yīng)描述、描述是否準(zhǔn)確平均段落相似度、段落邊界一致性事件級(jí)描述具體事件是否被提到、事件元素是否齊全事件召回率、元素準(zhǔn)確率時(shí)間定位描述對(duì)應(yīng)的時(shí)間區(qū)間是否與標(biāo)注一致時(shí)間重疊率、邊界誤差生成質(zhì)量句子是否通順、是否存在冗余和幻覺(jué)語(yǔ)言流暢度、人工可讀性評(píng)分如果你只告訴我“CLIP-CC-Bench得分是0.7”我沒(méi)有辦法判斷模型到底強(qiáng)在哪里。但如果告訴我“這個(gè)模型在視頻級(jí)描述上得分很高但事件級(jí)召回率非常低”我立刻知道它擅長(zhǎng)宏觀概括卻缺乏對(duì)具體事件的捕捉能力。這種能力畫(huà)像才是評(píng)估的最終價(jià)值。4.3 單次對(duì)齊檢查理解時(shí)間邊界、內(nèi)容邊界和輸出邊界使用多粒度評(píng)估時(shí)最容易忽略的一項(xiàng)是“對(duì)齊檢查”。簡(jiǎn)單來(lái)說(shuō)就是隨機(jī)抽取若干條模型輸出人工判斷它到底有沒(méi)有在正確的時(shí)間邊界內(nèi)描述正確的內(nèi)容。這一步聽(tīng)起來(lái)很原始但非常有效。具體做法是取一個(gè)模型輸出句子記錄它是從哪一段視頻中生成的然后播放那一段視頻人工判斷這句話(huà)是否準(zhǔn)確、是否完整。如果這句話(huà)看起來(lái)像是一段通用描述放進(jìn)任何視頻段落都能成立那就需要注意了——模型可能是在“打太極”并沒(méi)有真正理解具體內(nèi)容。這種案例的出現(xiàn)頻率比分?jǐn)?shù)更能說(shuō)明問(wèn)題。多粒度基準(zhǔn)強(qiáng)調(diào)“段落”本質(zhì)上就是想通過(guò)更細(xì)的評(píng)估單元把這類(lèi)“正確廢話(huà)”趕出高分區(qū)間。5. 在多模態(tài)模型上做段落評(píng)估的落地建議5.1 構(gòu)建自己的評(píng)估集時(shí)先解決三類(lèi)標(biāo)注不一致如果你不打算直接使用現(xiàn)成基準(zhǔn)而是想為自己的項(xiàng)目做一套長(zhǎng)視頻段落評(píng)估集最先要面對(duì)的問(wèn)題不是模型而是標(biāo)注。標(biāo)注不一致會(huì)直接影響評(píng)估結(jié)果而且這種問(wèn)題在小樣本階段不太明顯一旦擴(kuò)量就會(huì)變成災(zāi)難。第一類(lèi)是段落邊界不一致。兩個(gè)標(biāo)注者對(duì)“從第幾分幾秒開(kāi)始算一個(gè)新段落”往往會(huì)有不同意見(jiàn)。有人按鏡頭切換有人按語(yǔ)義結(jié)束有人按說(shuō)話(huà)人變化。如果標(biāo)注規(guī)范不明確模型輸出的段落就很難和參考對(duì)齊。建議在標(biāo)注前約定好切分規(guī)則優(yōu)先按鏡頭切換其次按語(yǔ)義場(chǎng)景再按事件完整性。第二類(lèi)是描述詳略不一致。同樣一個(gè)事件有人寫(xiě)成“一個(gè)人走進(jìn)房間”有人寫(xiě)成“一個(gè)穿藍(lán)色衣服的男人推開(kāi)門(mén)走進(jìn)左邊的房間”。兩種描述都對(duì)但信息量差距很大。如果不控制描述層級(jí)相似度計(jì)算會(huì)很不穩(wěn)定。建議為每個(gè)段落規(guī)定參考描述的粒度上限比如事件級(jí)描述不超過(guò)兩個(gè)短句段落級(jí)描述不超過(guò)三個(gè)短句。第三類(lèi)是時(shí)間戳與內(nèi)容不一致。標(biāo)注者可能把描述內(nèi)容對(duì)應(yīng)到了錯(cuò)誤的時(shí)間區(qū)間。時(shí)間戳一旦錯(cuò)誤后續(xù)所有“時(shí)間對(duì)齊”指標(biāo)都會(huì)失真。建議在標(biāo)注完成后增加一輪“時(shí)間戳抽檢”隨機(jī)抽取10%的數(shù)據(jù)由第二人校核。多粒度評(píng)估能力越細(xì)對(duì)標(biāo)注一致性的要求就越高這一點(diǎn)繞不過(guò)去。5.2 一個(gè)可復(fù)用的多粒度評(píng)估流程基于前面那些討論可以沉淀出一個(gè)相對(duì)通用的流程適用于大多數(shù)長(zhǎng)視頻段落描述評(píng)估任務(wù)定義評(píng)估目標(biāo)先明確你是要評(píng)估視頻級(jí)摘要、事件定位還是段落描述。不同目標(biāo)決定了你要用什么粒度。準(zhǔn)備參考標(biāo)注至少包含兩樣?xùn)|西文本描述和時(shí)間區(qū)間。做不到雙人標(biāo)注時(shí)也要用程序做一次邊界一致性校驗(yàn)。統(tǒng)一模型輸入輸出格式明確模型輸入是不是完整視頻、有沒(méi)有額外的時(shí)間提示模型輸出是自由文本還是結(jié)構(gòu)化JSON。這會(huì)影響后續(xù)解析。做語(yǔ)義匹配用CLIP或類(lèi)似模型計(jì)算候選描述與參考描述的相似度。如果候選輸出包含多個(gè)句子可以先按句切分再與參考段落做最大化匹配。計(jì)算時(shí)間對(duì)齊指標(biāo)給每個(gè)匹配上的段落計(jì)算時(shí)間重疊率判斷模型是否把描述放到了正確的時(shí)間段。人工抽檢錯(cuò)例隨機(jī)抽取高分和低分樣本各若干條人工分析錯(cuò)誤是發(fā)生在“沒(méi)看到”“沒(méi)定位”“沒(méi)表達(dá)”中的哪一層。如果CLIP-CC-Bench后續(xù)提供了評(píng)測(cè)接口這個(gè)流程大部分可以自動(dòng)化但第1步和第6步最好不要省。很多團(tuán)隊(duì)拿到一個(gè)現(xiàn)成基準(zhǔn)就直接開(kāi)跑最后只得到一個(gè)分?jǐn)?shù)完全不知道分?jǐn)?shù)背后的含義。這個(gè)習(xí)慣不太好。5.3 指標(biāo)之外還要看錯(cuò)例類(lèi)型評(píng)估結(jié)果出來(lái)之后會(huì)出現(xiàn)幾種常見(jiàn)的錯(cuò)例類(lèi)型。第一種是“位置正確但表述模糊”模型看到了那個(gè)事件但描述得泛泛而談。第二種是“表述流暢但位置錯(cuò)誤”模型寫(xiě)了一段很像回事的話(huà)但它對(duì)應(yīng)的時(shí)間區(qū)間完全不對(duì)。第三種是“事實(shí)混雜”把不同段落的事件拼在一起單獨(dú)看每個(gè)句子都說(shuō)得通放到時(shí)間軸上就漏洞百出。前兩種還比較好發(fā)現(xiàn)第三種最隱蔽。因?yàn)槿绻豢磫尉淠憧赡苡X(jué)得模型理解得不錯(cuò)只有把它放回時(shí)間軸上做段落級(jí)對(duì)比才會(huì)發(fā)現(xiàn)事件歸屬混亂。這也是多粒度評(píng)估相對(duì)單粒度評(píng)估的一個(gè)核心優(yōu)勢(shì)它逼著模型和評(píng)測(cè)者都必須面對(duì)“時(shí)間位置”這件事。如果你在自己的評(píng)測(cè)里發(fā)現(xiàn)大量第三種錯(cuò)例那說(shuō)明模型的長(zhǎng)視頻上下文建模還是有明顯短板不要再被整段描述的流暢度迷惑。6. 回到主判斷多粒度基準(zhǔn)改變的不是測(cè)評(píng)方法而是對(duì)長(zhǎng)視頻模型的認(rèn)知方式6.1 從“模型能描述視頻”走向“模型能不能在正確的時(shí)間粒度上描述”CLIP-CC-Bench這個(gè)名字本身不是最重要的。重要的是它背后代表的一類(lèi)趨勢(shì)長(zhǎng)視頻模型評(píng)測(cè)開(kāi)始從“整體語(yǔ)義是否接近”走向“分段、定位、匹配、驗(yàn)證”的精細(xì)路徑。這意味著我們對(duì)一個(gè)視頻語(yǔ)言模型的認(rèn)知方式會(huì)發(fā)生改變。以前我們習(xí)慣問(wèn)“這個(gè)模型看得懂視頻嗎”現(xiàn)在更準(zhǔn)確的問(wèn)題是“它在事件級(jí)、段落級(jí)、視頻級(jí)上分別表現(xiàn)如何”。一個(gè)模型可能在宏觀摘要上很優(yōu)秀卻在時(shí)間定位上一塌糊涂另一個(gè)模型可能事件抽取能力很強(qiáng)但生成摘要時(shí)組織混亂。沒(méi)有多粒度評(píng)估這兩種模型會(huì)在同一個(gè)總分上打平。有了多粒度評(píng)估它們的差異會(huì)立刻浮現(xiàn)。這種變化不僅影響研究者也會(huì)影響普通使用者的選型判斷。當(dāng)你要給一個(gè)長(zhǎng)視頻處理系統(tǒng)接入模型時(shí)你不能只看演示視頻里的驚艷效果而要看它在你關(guān)心的那個(gè)粒度上是否穩(wěn)定。如果你需要按鏡頭生成描述那么段落級(jí)和時(shí)間對(duì)齊指標(biāo)就比總分更重要如果你只是需要視頻標(biāo)題視頻級(jí)指標(biāo)就足夠。多粒度基準(zhǔn)提供的就是這種“按需查看能力”的便利。6.2 下一步最該做的事情如果你對(duì)CLIP-CC-Bench感興趣下一步不是急著去跑榜而是先回到自己的實(shí)際場(chǎng)景里想一想你最需要評(píng)估的長(zhǎng)視頻能力是哪一個(gè)粒度是整段視頻的摘要還是某個(gè)時(shí)間區(qū)間內(nèi)的動(dòng)作描述你現(xiàn)有的評(píng)估流程能不能回答“模型是在正確的時(shí)間段里描述了正確的內(nèi)容”這個(gè)問(wèn)題如果答案還不清晰建議先用手里的幾段視頻和現(xiàn)成多模態(tài)模型跑一次小規(guī)模人工對(duì)照。不需要復(fù)雜的基準(zhǔn)工具只需要一個(gè)人、幾段帶時(shí)間戳的視頻、一份簡(jiǎn)單標(biāo)注模板就能看出很多問(wèn)題。等你想明白了粒度、時(shí)間邊界、參考描述格式這些基礎(chǔ)問(wèn)題再去接觸CLIP-CC-Bench這樣的多粒度基準(zhǔn)收獲會(huì)完全不同。工具會(huì)更新基準(zhǔn)會(huì)迭代但“先定義清楚你在評(píng)價(jià)什么能力再選擇評(píng)價(jià)尺度”的思路不會(huì)過(guò)時(shí)。長(zhǎng)視頻段落描述評(píng)估這件事表面上是在考模型實(shí)際上也是在考評(píng)測(cè)設(shè)計(jì)者對(duì)人機(jī)交互邊界的理解。把粒度想清楚比多刷幾個(gè)高分榜單更重要。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
亚洲乱码精品久久久久..| 少妇高潮呻吟A片免费看软件| 大香蕉人人网| 五月婷婷丁香| 99热超碰天堂网| 婷婷五月天亚洲综合| 国产AV一区二区三区日韩| 熟女重口味αV| 色五月婷婷在线| 无码99| 亚洲av成人在线| 内射综合网| 丁香久久综合| 人人播| 综合五月天亚洲婷婷| 秋霞性爱AV| 国产成人在线不卡AV| 九九成人| 亚洲午夜精品久久久久久人妖| 97性视频| 国产日韩欧美性生活| 亚洲激情av| 婷婷五月天777| 欧美色激情四射| 手机免费福利视频| 激情久久久久久| 色色综合网站| 战争与艾拉电影免费观看| 亚洲六月综合激情久久下卡| 日韩av在线免费观看| 天天操加勒比| 610018岁成人视频| 丁香狠狠色婷婷| 色999五月色| 色婷婷影院| 久久机只有这里精品| 五月婷婷六月丁香在线| 99re热在线视频| 亚洲精品无码一区二区| 99亚洲精品视频| 91尤物九色在线| 激情综合网五月| ...婷婷国产成人亚洲日韩| 99燥99日| 亚洲成人在线免费| 国产亚洲精久久久久| 久久精品系列| 五月天色小说| 五月丁香成人网| 99精彩视频在线观看| 色婷婷亚洲在线观看| 久热9| 婷婷六月丁香久| 91色色色视频| 亚洲成人在线播放| 99丁香五月婷| 99热精这里只有精品| 五月婷婷性爱视频| 在线观看免费人成视频无码| 午夜爱爱网站| 日日噜狠狠色| 伊人成人宗合网| 9 1大香蕉| 91热在线| 99男人的天堂| 色婷婷网| 亚洲精品视频电影| 99这里是精品| 91艹人| 超碰精品国产首页| 五月成人丁香av91| 九九成人视频| 狼人久草| 天天干天天干天天| 丁香六月婷婷姐网| 亚洲中文无码成人| 久久综合激情| 五月久久婷婷天堂视频| 精品无码久久久久久久久| 免费看欧美成人A片无码| 精品国产人人爱人人| 五月丁香888| 色一情一乱一乱一区91Av| 婷婷五月丁香手机在线视频| 怡红院院久久| yazhou seshipin| A1片久久久| 国产精品色情AAAAA片软件| av在线免费网站| 六月天无码网址| 在线中文字幕视频| 狠狠色狠狠操| 99热99极品观看| 另类小说婷婷色| 日本精品99| 成人在线免费网址| 思思热99er| 久9热| 9l视频自拍9l视频自拍九色学生| 婷婷免费视频| 99色亚洲| 热99这里只有精品视频| 26UUU亚洲欧美| 丁香五月天啪啪| 狠狠综合色网| 色色婷婷色色| 日本三级网址| 99热费观看| 免费一区二区三区| 国产精品成人网址| 国产一二区爆乳_1国产日韩一区二区三-成人AV | 欧美日本VA| 九九综合图片网| 综合色、色综合| 99在线观看| 亚洲AV成人精品日韩在线播放| 五月天最新网| 热99在线精品| 色碰碰| 婷婷狠狠18禁久久| 婷婷综合九月| 日本九九视频| 九热免费视频| 五月停亭六月,六月停亭的英语 | 伊人大香蕉爱聚| 538在线精品| 无码操B| 中文字幕在线不卡| 久久婷婷色| 丁香五月欧美| 欧美性猛交99久久久久99按摩| 欧美在线视频99| 色七七九九| 美欧日韩国产成人在战| 色婷网| 五月婷婷色综图片| 99色热| 欧美色图天堂网| 五月婷婷av| 久久婷婷五月综合激情国产| 午夜丁香| 少妇搡BBBB搡BBB搡毛茸茸| 婷婷激情五月| 97涩婷婷| 久99热在线观看| 啪啪黄页网| 激情久久久久久久久久| 丁香色五月直播| 深爱五月月天| 大香蕉五月天婷婷| 大香蕉久久伊人网| 天天干天天干天天干天天干天天干天天| 婷婷五月天基地| 午夜精品人妻无码一区二区三区| 五月婷婷综合网| 综合网亚洲| 大地资源色婷婷视频在线| 97在线/亚洲| 常久最新免费的色吊丝| 天堂在线观看视频| 亚洲综合五月天| 五月伊人婷婷| 99人妻碰碰碰久久久久禁片| 五月天色五月| 色婷婷五月成人网| 五月丁香六月婷婷,婷| 色五月涩涩婷婷蜜桃| 婷婷伊人激情婷婷| 99热这里只有精品55| 婷婷的99视频网站| 密着浓厚中出乚交尾GvG935| 91婷婷五月丁香碰| 色爱99| 婷婷五月AV| 五月婷婷啪啪| 大香蕉久久| 婷婷婷狠狠| 欧美在线视频9| 亚洲综合视频网| 久久色五月| 色五月天在线| www.狠狠| 91男人资源站| AV激情五月| 日逼免费视频| 日韩成人免费电影| 超碰成人影视| 丁香婷婷激情综合五月激情 | 天天成人丁香美女AV| 韩国天天婷婷| 五月婷丁香| 色欲五月丁香| 九九黄色网| 色婷婷婷综合五月天| 热思思| 日韩久热| 玖玖九九9999在线观看视频精品| 日日骑夜夜撸| 久久婷婷六月综合| 伊人久久丁香狠狠婷婷综合香蕉| 色五月婷婷色五月| a九九热www| 久草性爱| 狠狠擼综合| 欧美亚洲色色色色| 久久五月天综合| 亚洲婷婷久久综合| 久草婷婷| 婷婷爱五月天| 六月婷婷之青青草| 舔色婷婷| 成人超碰网| 色五月婷婷91| 五月丁香六月婷婷久久| 国产成人精品一区二三区熟女在线| 五月丁香成年黄色| av性爱在线| 色区久久| 婷婷久久性爱| 丁香五月六月综合欧美| 我淫我色婷婷五月天激情四射| 色狠狠婷婷| 午夜无码精品色综合久久| 欧在线一区| 182TV大香蕉| 色五月综合网| 日韩三十六页| 色婷婷小说| 天天做天天双| 婷婷操久久| 欧美色色色| 大香蕉久| www.色9| 久99热| 五月婷婷色色| 亚洲小说五月婷婷| 激情六月天| 久久人视频| 婷婷五月天深爱| 99爱这里只有精品免费视频| 情色婷婷五月天| 五月丁香啪啪伦理电影| 99国产99| 日韩中文欧美| 91操女| www超碰| 五月婷婷丁香六月在线| 天天做天天爱高潮片| 婷婷激情六月中文| 亚洲激情综合| 另类 在线| 婷婷色色综合激情| 久操操| 久99久热| 狠狠另类视频| 久久多色| 国产 亚洲 在线| 99在线视频女女视频| 天堂久热| 人人妖人人97| 91久久久久久久久久| 久久婷婷青青| 激情五月,婷婷五月,丁香五月| 国产亚洲99久久精品| 丁香五月婷婷亚洲激情四射| 一本色道久久88综合日韩精品| 婷婷婷婷婷开心无码播放| 九九99一区| 热热色色五月天婷婷| 久久久www| www.minyis.com【JT】实力收量可预付QQ2101460746 | 久久久欧美精品sm网站| 婷婷五月天开心激情网| 无码人妻丰满熟妇奶水区码| 激情五月丁香综合蜜桃| 久久99久久久久久| 五月婷婷久久久| 丁香激激情网| 色婷婷无吗| 综合婷婷五月天| 久99999热视频在线观看免费| 色5月婷婷色| 99亚州综合精品成人网| 大香蕉久久伊人网| 丁香五月婷婷六月丁香| 日熟女| 九九这里有精品| 伊人影院久久网| 99热在线观看精品| 日本99色| 亚洲成av人影院| 青青草六月丁香| 9热久久在线| ss视频xx91| 大香蕉久久视频久久视频 | 久综合网| 丁六月激情| 丁香五月 性爱| 色五月在线播放| 日韩aⅴ视频| 成人丁香五月| 国产精品 的国产| 69热在线| 无码99| 婷婷综合在线| 一区二区传媒视频| 五月婷婷啪啪网| www.99久久久| 九九在线91| 天天综合亚洲综合| 丁香六月婷婷开心| 在线中文AV| 4438激情网| 五月天六月天| 婷婷五月天激情AV影院| 99视频精品| 欧美久人人| 亚洲人妻一区二区| 九九九九精品精| 久9久9久9久9久9久9| 亚洲尤物在线| 99热这里都是精品| 91精品啪| 国产真人做爰视频免费| 99亚洲精品| 天天爱综合网| 亚洲六月色| Av性爱网| 色五月婷婷在线| 特黄三级片| 97久久精品| 色在线99| www.色9| 色啪久| 久久99成人性爱高清视频| 免费视频无码| 在线播放 精品| 久久草大香蕉| 亚州成人综合在线| 91青娱乐青青草| 日本天堂网站99| 91大操| 五月婷婷色激情| 婷婷香草网| 综合性视频99| 色色网站日本91| 亚洲最大五月天成人网| 九一牛视频探花| 欧美成人精品老美女噜噜噜| 婷婷丁香五月激情综合站_久久五月丁香激情综合_开心五月综合激情综合五月_婷 | 伊人影院久久网| WWW、日本色丁香、co m| 99热精品在线观看| 激情久久五月网| 熟妇高潮一区av| 99热这里只有精品一区| 五月亭大香蕉| 久久免费精彩视频| 婷婷六月激情啪啪| 婷婷激情综合色五月久久图片| 可以直接看的av网站| 99思思热只有在这里看| 亚洲av成人在线| 五月天成人综合| 婷婷五月综合基地| 丁香五月社区| 亚洲久久婷婷丁香五月天| 九一九九黄色| 色屌丝中文字幕| 五月天婷婷成人资源站| 伊人五月综合网| 五月婷视频| 99热免费看| 超碰操网| 另类视在线| 色综合久久天天综合网 | 九久九精品| 婷婷丁香18| 日韩十国产极品久久| 在线看av| 狠狠搞狠狠操| 凹凸操Av| 激情五月天婷婷免费观看| 婷婷丁香五月天激情四射| 综合久久婷婷| 丁香六月婷婷色播| 久久AV电影| 色伊人婷婷| 亚洲色99综合天堂| 激情久久久| 欧美六月婷婷| 五月丁香婷婷啪啪| 欧美日韩一a.无| 百度4399有码精品V在线观看| 中字幕视频在线永久在线观看免费| 色九月婷婷丁香| 婷婷五月天激情丁香| 五月婷婷五月天| 婷婷欠久少妇| 色色五月婷| 成人网在线视频| 日操夜撸| 久久伊人婷| 夜夜撸日日操| 亚洲色啪| 夜夜操狠狠操| 日韩在线五月天婷婷| 久久九九re热| 天天综合五月天| 激情伊人| 青草青草视频2免费观看| 啄木鸟黑丝一区二区| 第九色区av天堂| 亚洲AV色婷婷人禽五月天| 色七七九九| 婷婷五月天av| 色婷婷婷婷五月天| 国产性爱一级| 啪啪91| 色色色热| 99性爱视频| 五月婷婷亚洲| 99热精品在线观看| 丁香六月激情网C0W| 色射7856五月天激情四射| 婷婷玖玖五月天| 亚洲中文无码成人| 99精品超在线播放| 99在线视频操999| av网址在线| 五月中旬婷婷丁香六| www九九| 狠狠色中色| 婷婷五月天色| 人人干人人看| 97人妻碰碰中文无码久热丝袜| 国产丁香五月天婷婷| 美日韩成人| 婷婷五月天丁香激情| 有码一区二区三区| 狠狠插日日干撸| 99re26视频| 亚洲成人综合在线| 九九热视频99| 五月婷中文字幕| 欧美综合婷婷网| 日韩操逼大片| 丁香婷婷色色| 久婷首页| 99热久草| 丁香五月天天| 天天干天天玩天天夜天天射天天操天天日蜜臀少妇 | 五月天激情国产综合婷婷婷| 色五月综合| 丁香婷婷色情社区成人小说| 思思99精品视频| 开心五月婷婷在线视频免费观看| 丁香婷在线| 这里只有精彩视频| 色综合久久久无码中文字幕999| www.9797国产| 99小视频网站| 99热97| 五月天丁香综合久久国产| 激情五月五月五月婷婷| 丁香五月天天日| 亚洲热综合| 97干在线视频| 九色七七| 牛牛热这里只有jingpin| 开心五月婷婷| 在线免费观看激情视频| 伊人91| 26uuu精品一区二区| 成人午夜无码视频| 国产免费AV网站| 情五月亚洲婷婷| 色五月天在线观看| 丁香六月欧美| 伊人婷婷五月| 欧美成人精品三区综合A片| 日韩无码性爱| 五月丁香久久激情网| av大香蕉| 五月久久噜噜| 99热这里只有精品55| 丁香花婷婷五月天| 区区欧美你爱| www色哟哟| 五月天成人免费视频| 色色色五月婷| 成人短视频在线观看| 性做爰A片免费视频A片直播 | 天天xxxxxx天天日| 亚卅毛片| 大香蕉久久视频久久视频 | 五月婷婷大香蕉| 天天综合色| 5月婷婷五月天| 欧美色久| 九一牛视频探花| 日韩一级网站| 色5月婷婷| 激情综合五月天| 激情婷婷丁香五月| 99在线免费视频| a69在线视频| 婷婷丁香精品视频在线观看| 天天操天天曰| 日本社区五月天激情| 天天噜天天插| 久久精品91视频| 熟女色色一区二区| a在线观看| 综合在线色婷婷| 婷婷五月情色| 色综合播放| 99色在线视频观看| 99色色网| 五月天综合激情网| 97资源碰碰在线| 碰超亚洲| 国产性av| 97久久综合网| 亚洲精品国产A久久久久久| 亚洲天天| 久久婷婷色综合| www久久久久久久久久久久久久久久久| 成人网站在线观看视频| 99人人干| 五月婷六月| 激情99| 五月丁香六月情| 五月停停丁香| 五月丁香网站在线播放| 久久亚洲色导航| 欧美99热| 五月婷在线视频免费播放| 亚洲婷婷开心五月| 中文字幕性爱丰满| 91色吧网| 婷婷五月av| 噼里啪啦完整版中文在线观看| 国产毛片欧美毛片久久久| 亚洲乱码日产精品BD| 玖玖爱伊人网| 97婷婷在线| 五月婷中文字幕| 亚洲综合一区二区| 久久九九99| sewuyue第四色| 色婷狠狠| 亚洲色久| 丁香 亚洲 久久| 丁香五月综合久久八| 婷婷五月天色网久| 激情五月综合网| 色情·com| 我爱婷婷五月天综合88| 97色婷婷| 欧美性生交XXXXX无码小说| 91日本在线免费| 美女亚洲五月丁香| 噜噜狠狠色综合久| 激情五月婷婷综合网| 香蕉久久六月| 亚洲综合激情五月| 欧美69久成人做爰视频| 日本人妻A片成人免费看片| 色五月丁香六月婷婷| 亚洲热视频| 99色五月| 99热精品在这里| 亚洲乱码日产精品BD| 淫视馆aV二区一区| 在线观看欧美| 狠狠干在线| 99热这里只有精品无码| 搡BBBB搡BBB搡18| av在线免费播放| 亚洲五月天另类小说图片| 人与禽A片啪啪| WWW丁香五月| 天天插综合| 天天色图| 五月综合久久| 五月天啪啪| 亚洲午夜AV| 91欧美日韩综合| 生活片五区| 五月丁香六月香综合激情| 91狠狠综合久久| 热99精品视频在线观看| 日日夜夜天天| 亚色网站小视频| 丁香五月综合| 高清无码中文字幕aVDV| AV中文网| 五月天天爱| 日韩精品一区二区刘| 丁香五月成人社区| 日韩久综合| 婷婷五月天综合久久| 8区视频在线| 99色亚洲| 丁香五月激情六月综合| 大香蕉太香蕉视频97| 色色射| 99狠狠| 综合网五月| 色五月综合在线| 久操无码| 99免费视频久久| 欧美色宗和激情| 丁香五月天导航| 亚美欧色影院| WWW.久久.COM| 天天肏屄夜夜爽| 天天在线XXX| 男女啪啪做爰高潮无遮挡| 大香蕉久久草| 婷婷激情视频欧美视频自拍视频欧美剧| 五月婷婷深深爱| 色吧五月婷婷六月丁香| 97碰免费视频在线| 人人人操Av| 玖玖婷婷色五月| 亚洲正能量欧美| 大波美女VA网站| 少妇高潮呻吟A片免费看软件| 日本久久人| 日日噜狠狠色综合久久| AA片在线观看视频在线播放| 亚洲av免费在线| www.日韩国产| 激情久久综合网| www.伊人天堂偷偷婷婷| 操B无码视频国语| 色欲日日躁| 国产看真人毛片爱做A片| 丁香五月天在线观看视频| 婷婷五月天亚洲综合| 另类精品视频在线观看| 日本啪啪网| 久久9视频| 天天射影院| www.婷婷网| 91色久| 婷五月丁香俺| 九九综合网| www.亭亭五月天| 葵花AV在线| 丁香五月婷婷日本| 婷婷五月亚洲综合| 婷婷五月综合性爱| 丰满少妇猛烈A片免费看观看| 色婷婷888| 久激情网| 插插网爽妇五月丁香| 182tv992tv人之初午夜免费观看| 六月丁香色婷婷| xx久久| 婷婷色综合| 夜夜骑操AV| 91九色白丝| WWW,五月| 这里只有免费的精品| 久久六月综合| 1024人妻| 99色亚洲| 夜夜爽日日躁| 伊人五月天| 色情五月停停丁香| 日日色五月天| www91久久| 五月天色五月| 91干视频| 婷婷五月天在线观看第二页| 五月熟妇婷婷久久| 婷婷色五月开心五月| 岛国在线观看91| 91九色首页| 国产精品久久7777777精品无码| 狠狠大香婷婷爱| 欧美日韩中国| 秋霞AV吧| 超碰九九热| 99愛国产| 激情五月婷婷在线区| 婷婷狠狠色| 狠狠色性| 超碰成人电影| 另类的婷婷| 综合激情在线| 青996青| 成人免费超碰| 久热99| 婷婷五月天影院| 五月天伊人综合| 婷婷久久免费| 亭亭五月丁香五月天激情| 精品成人无码A片观看香草视频| 欧美在线97| 久久婷婷夜| 三级毛片7979| 色噜噜狠狠色综合成人网| 激情综合九月| 天天射影| 五月熟妇婷婷久久| 成人精品在线观看| 91色在线/日韩| 网色99| 天堂在线9| 久久五月天色婷婷| 亚洲舔观看| av五月天婷婷丁香| 九九热视频在线观看| 伊人婷婷五月天| 天天澡天天狠天天天做| 久热黄色| 国产在线网| 五月丁香 狠狠爱| 日本精品九九九| www.婷婷,com| 五月激情综合婷婷| 色综合网页| 五月天婷婷激情六月久久| 大伊香蕉玖玖爱| 99小视频在线| 美女五月狠狠| 99re热视频这里只精品| 久久3级片| 精品99在线| 电影爱拉战争免费观看| 激情婷婷啪啪| 深爱综合网| 天天日天天肏天天奸| 色婷网站| 亚洲另类婷婷五月丁香在线播放| 色色婷| 人人爽欧美婷婷久久久五月丁香 | 激情色五月天| 另类激情综合| 久久久无码精品成人A片小说| www.色99| 99热久草| 嫩草AV久久伊人妇女超级a| 九九人人操| 男人的天堂99| 色婷婷五月天激情久久| 大天天伊人| 婷婷不干网| AV九九| 婷婷五月丁香手机在线视频| 99ER热精品视频| 97人人爱人人操| 色狠狠色噜噜噜a天堂一区| 婷丁香五月天| 思思热99er| 婷婷五月天日本国产| 日本五月婷婷| 无码橾| 成人精品视频99在线观看免费 | 七七色综合| 小视频一区 | 天天色综网| 五月激情偷拍婷婷| 人人摸人人干| 就爱啪啪婷婷| 91碰碰| 操操操操操操婷婷五月天| 99在线视频资源| 五月天婷婷色色首页| 99视频在线精品免费观看2| 91碰碰视频在线观看| 99热久草| www超碰com| 丁香 亚洲 久久| 久久99jiu9| 婷婷精品| bbwcuckold精品熟妇| 情欲禁地| 十月丁香九月婷婷综合| 1024欧美日韩精品久久久| 99亚洲色| 五月色亚洲| 九月色婷婷综合| 婷婷五月丁香花综合| 激情图片久久| 深爱五月月天| 9九九久久精品无码专区| 亚洲va欧美va国产综合久久久 | 永久地址 色| 五月丁香花激情啪啪网| 色色性爱视频| 久久五月激情综合| 六月丁香五月婷婷| 狠狠狠狠狠狠狠狠草| www夜夜操| 色情婷婷。| 九九九九精品精| www五月天com| www.色99| 亚洲欧洲一二| 天天干电影| 九九無妻| 99热日韩这里只有精品| www.com任你艹| 亚洲激情av| 丁香五月婷婷色| 丁香激情网| 9九九久久精品无码专区| 网站免费一站二站| 99视频在线观看欧| 99久热在线精品| AV中文字幕夜夜操b天天摸bb| 六月婷婷五月丁香| 另类五月婷婷| 午夜在线成人网站免费观看| 五月婷婷中文字幕AV| 无码网| 色在线免费观看| 久久五月天激情| 色色激情五月天| 99国产精品久久久久久久久久久| 性爱AV天堂| 婷婷99狠狠躁天天| 日本九九九九九九| 97日本在线播放| 婷婷五月天成人网| 九九热只有精品| 婷婷五月天美女21p| 天天日天天干天天天| 色综合色欲综合天天免费| 久久综合激情| www.久久爱.com| 五月丁香综合中文| 五月天丁香综合在线| 久久综合五月情| 五月婷婷色欲| 五他月天啪啪啪| 五月婷婷影视| 婷婷五月日本| 无语停婷丁香网| 九九性爱网| 丁香五月天之婷婷影院| 99这里热| 26uuu精品一区二区| 丁香激情网| 六月色色| 五月丁香激情综合| 伊人综合网站| 嫩草视频。| 色吊操色妞| 九九美女视频| 日日爽日日| 人人爽欧美婷婷久久久五月丁香 | 99在线69| 国产成人网| 亚洲亚洲人成综合网络| 激情丁香五月综合| 婷婷激情人妻| 六月丁香婷婷五月天| 精品无码色| 激情网五月婷婷| 六月丁香五月婷婷| 国产伦亲子伦亲子视频观看| 激情五月天天| 在线视频你懂得| 另类五月激情| 99九九久久| 丁香婷婷六月| 激情久久综合| 日本高清综合网五月丁香| 婷香五月| 日本操B片| 五月综合色| 久久精品视频9| 我爱大香蕉| 丁香五月影| 色婷婷五月在线| 密桃激情五月天综合网| 久综合色| 91国产精品视频播放| 丁香五月色网| 深爱丁香激情| 亚洲精品成人| 久9综合| 丁香五月激情婷婷视频| 思99热精品久久只有精品| 天天做夜夜爽| 九九九九精品精| 日本色道视频网站| 久热只有精品| 婷婷五月天渟渟| 丁香五月婷婷成人色区| 久久大香蕉| 天天色丁香| 99久热这里只有精品| 熟女人妻视频| 婷婷五月免费观看| 激情五月丁香五月| 五月婷啪啪| 99在线视频操999| 亚州婷婷五月激情综合| 九九热区一区二区三区| 色播综合| 九九这里只这里只有精品| 黄网在线免费观看| 991精品在线视频| 激情小说婷婷五月| 香蕉色色网| 思思久日精品视频| 青青色com久久| 亚洲 五月 婷婷 成人| 婷婷丁香五月社区亚洲| 午夜爱爱爱成人| 色婷婷网大全在线| www 五月天 com| 亚洲国产精品VA在线看黑人| 亚州激情网| 五月婷婷综合视频| www.粉嫩av.com| 五月综合激情| 欧美婷| a免费在线| 天天色天天| WWW免费视频碰碰碰碰| 色婷婷电影网| 久久这里只有国产| 久色精品| 九九一综合精品| 影音先锋男人站,影音先锋男人色资源网,影音先锋AV最新资源站,影音先锋AV资源 | 色播五月丁香综合| 性爱七区| 亚洲天堂色色| 狠狠色狠狠鲁| 亚洲欧美国产A片免费观看| 婷婷五月天久久| 五月天狠狠网站| 99熟女| 欧美日本99| 五月天成人网在线观看| 五月婷婷五月天激情视频| www,黄色在线,con| 99久在线精品99re8| www.狠狠狠.com| 婷婷五月色影视先锋| 狠狠色色| 另类综合色| 99综合激情久久精品久久| 国产精品视频免费看| 青青草青青草五月天| 欧美色99| 淑女丝袜bi操逼123| 久草天堂| 中文字幕婷婷在线| 97久久久久久久久久久| 丁香六月啪啪啪| 亚洲热久久| 国产视频久色| 色五月婷婷影院| 婷婷五月天综合网| 婷婷丁香宗合888| 丁香五月婷婷成人网| 五月丁香久人妻中文| 激情久久久久| 婷婷五月天AV在| 五月激情婷婷偷拍| 日韩人妻AV在线| 婷婷丁香五月综合| 婷婷丁香五月天激情| 亚洲秘 无码一区二区三区妃光/1| 丁香激情综合| 大地资源色婷婷视频在线| 丁香五月成人论坛| WWW丁香五月| 色情五月天视频网| 91狠狠色丁香婷婷综合久久| 日韩人妻在线观看| 黄色片区子| 欧美精品99| 黄网免费看| 婷婷丁香九月| 99精品人人| 九九九热精品| 99在线热| 六月婷五月丁香| 欧美色六月婷婷| 五月婷在线色视频| 思思精品久久艹| 精品99只有。| 天天激情欧美美女| 丁香在线视频| 91热网址| 九九黄色网| 久久精彩视频| 99久久婷婷国产综合亚洲| 91日婷婷在线| av操一操| 五月天婷婷久久日| 欧美综合激情五月| pacopacomama 070722_670 素人奥様初撮りドキュメント 103 大久保純子 | 久久色天堂| 青草青草久热这里只有精品| 国产日批视频| 五月天婷婷丁香社区| 67194中文字幕| 69精品人人人人| 久久精品一区二区三区四区| 九月婷婷在线观看| 99er6免费视频热播| 色天天综合色| 综合激情在线| 综合AV网| 九九九热精品| 人人操人av| 国产成人网址| 影音先锋AV男人站| 丁香 婷婷 激情 综合 五月| 色欲AV导航| 亚洲色啪| 狠狠色婷婷色| 亚洲色欲欧美一区二区三区| 五月天激情网站| 伊人久久丁香狠狠婷婷综合香蕉 | 亚洲国产网址| 桃色伊人在线| 激情综合色| 大香蕉欧美在线| 亚洲综合色五月| 香蕉久久国产AV一区二区| 婷婷五月激情在线| 成人天天爽| 久热超碰91| 日韩婷久| 91人妻视频| 国外亚洲成AV人片在线观看| 大香蕉久艹| 五月天久久网站| 97丁香视频| Www.se.久久| 深爱激情网噜噜色| 少妇水多A片太爽了| 天天色月| 天天做夜夜爽| 五月天婷婷色| 成人丁香五月| 亚洲视频a| 色五月人妻| 婷婷五月丁香av网站| 操碰99| 日本久久婷婷| 三级黄网站| 任你草| 可以免费观看的av| 人妻五月天激情开心网| 强壮公让我夜夜高潮A片视频| 亚州激情网站无码| 四色永久成人网站| 九九免费精品在线视频| 中文字幕日产A片在线看| 五月丁香视频在线观看| 五月日韩中文字幕| 深爱激情网五月天| 国产亚洲色婷婷久久99精品9j| 九九热精品| 亚洲美女高潮久久久久久69| 色综合天天综合成人网| 伍月激情天| 亚洲成人在线观看网址| 超碰男人色| 婷婷五日b| 欧美色片中文字幕久久久久| 欧美成人网99网| 婷婷射丁香| 国产精品涩涩涩视频网站| 人人摸人人干人人做| 九月婷婷综合网| 色色亚洲视频| 天天操夜夜爽歪歪| 婷婷亚洲影院| 久久九九激情五月天 | 森林影视大全,最好看的2019年视频| 日本视频不卡123区| 狠狠色噜噜色狠狠狠综合久久成人波| 九热久| 99视频免费播放| 91日本在线| www.成人婷婷综合| 无码九九| 婷婷丁香91| 国产成人精品一区二三区熟女在线| 天天做天天爽| 天天久久综合| 欧美99热| 97AV人人插人人操| 色色色热| 色丁香久久| 激情婷婷六月天| xxx综合在线| 99热这里是精品| 伊人久久综合| 婷婷五月天免费99| 五月天婷婷成人网| 久久婷婷五月天激情四射| 综合色色婷婷| 一本久久亚洲五月婷婷 | 婷婷国产成人| 亚洲aV写真天天综合网久久| 热的国产99热| 激情婷婷| 婷婷丁香久久| 国产avapp 网| XX久久| h亚洲| 操碰久| 色综合视频| 七七色色综合| www.99精品视频| 六月丁香婷婷大香蕉| 好大好粗嗯啊-一级黄色大片免费观看-成人AV | 99热这里只有精品50| 丁香五月激情月| 亚洲激情无码久久| 五丁香激情综合| 怡红院院久久| renrencaoav| 婷婷丁香五月天狠狠| 丁香婷婷伊人| 亚洲操b| 狠狠干,狠狠操| av色婷婷| 天天插天天插| 国产成人片| 亚洲黄色操逼| 色噜噜狠狠色综合网| 色9999日韩国产| 激情美女五月天| 五月丁香激情婷婷综合字幕| 色婷婷五月天激情综合| 99成人免费视频| 亚洲色网址| 99久久久久| 成人免费120分钟啪啪| 亚洲永远av在线播放| 99啪啪网| 色婷婷在线视频久| 伊人深爱综合| www.91婷婷| 91碰碰碰| 狠狠爱婷婷色| 五月婷丁香花| 九九在线这里只有精品视频| 色欲天天综合网| 伊人久久婷婷五月综合97色| 色婷婷操逼网| 天天粽合合合合| 黄色成人网站在线播放| 亚洲妇女熟BBW| 99.N在线视频| 能看的av片| 久超超碰| 二区成人视频| 看黄的网站18禁| www.五月.com| 中文字幕在线免费看线人| 丁香五月婷婷亚洲综合精品| 婷婷丁香五月天中文字幕| 婷婷金品综合视频| 成人在线视频男人的天堂4399| 婷婷五月天,影院| 涩五月婷婷| 五月丁香趴趴| 丁香婷婷五月六月天| 婷婷天堂综合| 丁香五月激情综合婷综| 欧美色骚婷婷五月天| 天天色播| 欧美色99| 久久99大全| 97超级碰碰碰| 激情五月,色播五月| 久久探花91swag| 情欲综合网| 五月婷婷激情综合| 激情深爱综合| 五月婷婷性爱| 色婷婷婷av| 久久五月丁香| 丁香五月天在线视频| 婷婷五月天堂| 伊人五月天97| 色婷婷亚洲婷婷| 婷婷五月丁香人妻无码高清| 亚洲色婷婷五月| 玖玖激情网| 狼人婷婷综合| 日日夜夜干| 丁香五月婷婷欧美激情-中文天堂最新版在线观看| 色丁香久综合在线久综合在线观看| 色婷婷综合网| 婷婷六月开心网| 激情操逼婷婷| 99热这里只有精品22| 久激情| 久婷婷婷| 五月天日日操夜夜操 | 91超级碰在线| 超碰超碰在线| 五月激情婷婷图片基地| 久久人妻熟女一区二区| aaa日韩| 女人天堂久久| 五月婷婷丁香六月| 五月丁香六月婷婷在线小说视频| 万月丁香狠狠爱| 亚洲人成色A777777在线观看| 7777激情基地| 99亚洲天堂| 五月伊人婷婷| 伊人91| 日韩人人操| 婷婷五月天丁香花| 天天干天天玩天天夜天天射天天操天天日蜜臀少妇 | 可以看的av| 五月丁香亚洲综合| 色婷婷丁香五月天| 国产精品人人做人人爽人人添 | 亚洲妇女熟BBW| 91九色视频在线观看| 久久狠色噜噜狠狠狠狠97| 99热99| 中文字幕日产A片在线看| 色色色热| 婷婷色日本| 亚洲人妻av| 六月丁香婷婷大香蕉| 久久久久人妻| 婷婷黄色| 丁香五月天资源网| 天天摸,天天爽| 色婷婷欧美| 丁香五月婷婷五月| 色九月综合| 精品一二三区久久AAA片| 九九这里是免费的视频5| 五月开心深深爱激情综合| 婷婷爱综合| 狠狠色色| AV动漫不卡无码免费| 微拍92| 亚洲午夜国产成人电影VA国产欧…| 任你草| 中文字幕在线免费观看视频| 91人人操.COM| A1片久久久| 激情九色| 五月婷婷中文字幕| 可以免费观看的AV| 天天久综合| 99国产小视频| 五月天伊人手机在线播放AV| 99精品这里只有免费视频| 色九月| aaaaaa片|