欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

基于生成式模型的Agentic空間認(rèn)知評(píng)估框架解析

基于生成式模型的Agentic空間認(rèn)知評(píng)估框架解析 空間智能是最近幾年大模型討論里被頻繁提到但評(píng)估方式仍然混亂的能力維度。人類(lèi)判斷一個(gè)模型是否理解“桌子左邊”“杯子前方”不會(huì)要求它輸出一組坐標(biāo)而是看它能否在真實(shí)或模擬環(huán)境中做出正確布局。浙江大學(xué)研究團(tuán)隊(duì)提出的一種 Agentic 空間認(rèn)知評(píng)估框架正是順著這個(gè)思路讓生成式模型把空間理解“畫(huà)”出來(lái)而不是強(qiáng)迫 LLM 在文本里輸出數(shù)值坐標(biāo)。這個(gè)轉(zhuǎn)變看起來(lái)只是從數(shù)值輸出變成圖像輸出背后卻涉及任務(wù)定義、動(dòng)作空間、評(píng)估指標(biāo)和 Agent 循環(huán)設(shè)計(jì)的一系列調(diào)整。這篇文章會(huì)圍繞這個(gè)框架思路拆解它的設(shè)計(jì)動(dòng)機(jī)、核心模塊、一個(gè)簡(jiǎn)化版原型實(shí)現(xiàn)以及落地時(shí)容易踩的坑。適合關(guān)注多模態(tài)大模型、具身智能、模型評(píng)估和 Agent 開(kāi)發(fā)的同學(xué)閱讀。1. 為什么“輸出坐標(biāo)”這條評(píng)估路徑走不遠(yuǎn)1.1 LLM 用文本表達(dá)空間時(shí)的信息瓶頸大語(yǔ)言模型本質(zhì)上是把文本 token 序列映射成下一個(gè) token 的概率分布。即使最強(qiáng)的 LLM也只能在它學(xué)過(guò)的文本分布里“猜測(cè)”坐標(biāo)數(shù)字。對(duì)于“把杯子放在桌子右側(cè) 50 厘米處”這個(gè)問(wèn)題模型可能會(huì)回答“(154, 320)”但它并不具備連續(xù)幾何推理能力它只是在文本統(tǒng)計(jì)規(guī)律里找到了一個(gè)看起來(lái)合理的數(shù)值。問(wèn)題在于空間場(chǎng)景往往是連續(xù)的、關(guān)系型的。兩把椅子之間的“中間位置”不是一個(gè)唯一坐標(biāo)而是一條線段一個(gè)物體“在另一個(gè)物體前方”取決于觀察角度、朝向和基準(zhǔn)線。LLM 如果只能輸出坐標(biāo)就必須把一組連續(xù)變化的空間關(guān)系壓縮成若干個(gè)離散數(shù)字。這種壓縮會(huì)丟失大量空間語(yǔ)義比如“離桌子很近但沒(méi)碰到”和“在桌子正前方 10 厘米”在坐標(biāo)上可能只有很小的差異但語(yǔ)義差別很大。因此如果想要評(píng)估一個(gè)模型是不是具備空間智能應(yīng)該給它一種更適合表達(dá)空間結(jié)構(gòu)的方式——圖像、布局、拓?fù)潢P(guān)系而不是坐標(biāo)數(shù)值。生成式模型擅長(zhǎng)從語(yǔ)義描述生成視覺(jué)結(jié)構(gòu)正好可以在空間認(rèn)知評(píng)估中充當(dāng)“輸出通道”。1.2 坐標(biāo)輸出評(píng)估的五個(gè)具體問(wèn)題即使不考慮 LLM 的能力極限強(qiáng)迫模型輸出坐標(biāo)來(lái)評(píng)估空間認(rèn)知工程上也非常別扭。以下五個(gè)問(wèn)題在實(shí)際項(xiàng)目里最容易遇到。問(wèn)題典型表現(xiàn)產(chǎn)生的原因數(shù)值精度不穩(wěn)定模型多次嘗試同一任務(wù)坐標(biāo)相差很大LLM 生成數(shù)字只靠文本概率缺少規(guī)約和驗(yàn)證坐標(biāo)基準(zhǔn)難對(duì)齊模型認(rèn)為的“左上角”和評(píng)估方實(shí)現(xiàn)的“左上角”不一致沒(méi)有統(tǒng)一坐標(biāo)系、縮放比例和原點(diǎn)定義空間關(guān)系無(wú)法直接體現(xiàn)坐標(biāo)正確但擺放后互相遮擋、重疊坐標(biāo)本身不包含物體尺寸、方向和碰撞約束評(píng)估粒度粗糙答案只能判對(duì)或錯(cuò)無(wú)法判斷“接近正確”坐標(biāo)距離閾值需要人工拍腦袋且不同任務(wù)語(yǔ)義不一致場(chǎng)景擴(kuò)展性差換一張地圖或換一種任務(wù)定義坐標(biāo)體系就要重做坐標(biāo)本質(zhì)上是任務(wù)相關(guān)的局部編碼不具備通用性這幾點(diǎn)不是某個(gè)模型的問(wèn)題而是評(píng)估設(shè)計(jì)的問(wèn)題。如果我們考核的重點(diǎn)是空間關(guān)系理解就應(yīng)該給模型一個(gè)能夠自然表達(dá)關(guān)系的輸出空間。坐標(biāo)不是關(guān)系坐標(biāo)只是從關(guān)系推導(dǎo)出來(lái)的一種結(jié)果。1.3 生成式輸出把空間認(rèn)知拉回可視世界生成式模型有一個(gè)特點(diǎn)它可以把一個(gè)描述性的語(yǔ)義空間轉(zhuǎn)換成一個(gè)可被人類(lèi)和算法反復(fù)查看的視覺(jué)空間。例如讓模型“畫(huà)”出桌子右側(cè)有一個(gè)杯子生成的圖像即便不是真實(shí)照片也能直觀反映出左右關(guān)系、遮擋關(guān)系、遠(yuǎn)近尺度。這種做法的本質(zhì)是改變?cè)u(píng)估接口。舊接口模型輸出坐標(biāo)評(píng)估器解析數(shù)字。新接口模型輸出動(dòng)作或語(yǔ)義元素生成式模型渲染成場(chǎng)景評(píng)估器觀察場(chǎng)景。把空間認(rèn)知評(píng)估從“數(shù)字比較”變成“場(chǎng)景生成與場(chǎng)景理解”能同時(shí)測(cè)兩種能力模型是否理解了空間語(yǔ)義以及模型是否能把自己的理解轉(zhuǎn)換成可執(zhí)行的空間結(jié)構(gòu)。它也更接近人類(lèi)認(rèn)知心理實(shí)驗(yàn)中常用的“擺放任務(wù)”設(shè)計(jì)。2. Agentic 空間認(rèn)知評(píng)估框架的設(shè)計(jì)思路2.1 整體流程不是讓模型直接回答而是讓模型在環(huán)境中“做”傳統(tǒng)評(píng)估是一次性問(wèn)答給定問(wèn)題取模型回答和標(biāo)準(zhǔn)答案比較。Agentic 評(píng)估則不同它把評(píng)估過(guò)程設(shè)計(jì)成一個(gè)多步交互閉環(huán)??蚣艿暮诵牧鞒炭梢愿爬槲宀饺蝿?wù)管理器生成自然語(yǔ)言空間任務(wù)例如“請(qǐng)把藍(lán)色方塊放到紅色圓形上方”。Agent 接收任務(wù)和當(dāng)前場(chǎng)景狀態(tài)輸出一個(gè)動(dòng)作指令而不是直接輸出最終答案。生成式模型或空間模擬器執(zhí)行該動(dòng)作將場(chǎng)景狀態(tài)更新并渲染成圖像或結(jié)構(gòu)化場(chǎng)景圖。評(píng)估器檢查執(zhí)行后的場(chǎng)景是否滿足任務(wù)要求并反饋給 Agent。Agent 根據(jù)反饋繼續(xù)嘗試直到滿足終止條件。這個(gè)流程的關(guān)鍵在于空間任務(wù)不是靠一次完整答案來(lái)判定而是靠一系列動(dòng)作和中間結(jié)果來(lái)評(píng)估。這種范式天然適合 Agentic AI 的測(cè)試場(chǎng)景因?yàn)?Agent 的每一步?jīng)Q策都可能影響最終布局。偽代碼形式的整體流程如下def run_evaluation(task, agent, renderer, evaluator, max_steps5): state renderer.empty_state() for step in range(max_steps): action agent.generate_action(task, state.to_prompt()) state renderer.apply_action(state, action) scene renderer.render(state) is_done, score, feedback evaluator.evaluate(task, state, scene) if is_done: return {solved: True, score: score, steps: step 1, scene: scene} return {solved: False, score: score, steps: max_steps, scene: scene}在這個(gè)循環(huán)里Agent 不一定要是 LLM它可以是任何能輸出動(dòng)作的模型生成式模型在這里也不是為了“畫(huà)得好看”而是把不可直接觀察的空間狀態(tài)變成可評(píng)估的視覺(jué)產(chǎn)物。2.2 四個(gè)核心模塊任何 Agentic 空間認(rèn)知評(píng)估框架都可以拆成四個(gè)模塊任務(wù)管理器、Agent、渲染器、評(píng)估器。任務(wù)管理器負(fù)責(zé)構(gòu)造任務(wù)集合??臻g任務(wù)至少包括三類(lèi)關(guān)系擺放A 在 B 的右側(cè)、路徑規(guī)劃從起點(diǎn)走到終點(diǎn)并避開(kāi)障礙、布局完成在限定區(qū)域內(nèi)安排多個(gè)物體。在實(shí)際項(xiàng)目中任務(wù)管理器應(yīng)該輸出結(jié)構(gòu)化任務(wù)描述而不能只給一句話因?yàn)闄C(jī)器解析“把球放到桌子的左邊”時(shí)需要知道“桌子”有哪些候選實(shí)體、坐標(biāo)系是什么、成功條件是什么。Agent 是待評(píng)估模型。它可以接收文本狀態(tài)描述也可以接收渲染后的圖像。在框架原型里通常先讓 Agent 輸出文本動(dòng)作后續(xù)再擴(kuò)展為直接輸出圖像操作。這里最大的設(shè)計(jì)約束是動(dòng)作空間。如果動(dòng)作空間仍然是“輸出坐標(biāo)”那就又回到了起點(diǎn)。推薦的做法是讓 Agent 輸出語(yǔ)義動(dòng)作例如“move table left”或“place cube above circle”再由渲染器執(zhí)行這些語(yǔ)義動(dòng)作。渲染器把動(dòng)作變成空間狀態(tài)。最輕量的方式是使用規(guī)則模擬器物體用矩形框表示關(guān)系由幾何計(jì)算決定。更接近前沿的方式是調(diào)用擴(kuò)散模型生成圖片例如用 Stable Diffusion 或 ComfyUI 工作流生成一張包含指定物體的場(chǎng)景圖。渲染器不一定需要和 LLM 在同一臺(tái)機(jī)器上兩者可以通過(guò) API 解耦但如果是在本地開(kāi)發(fā)要注意顯存、端口和工作流版本。評(píng)估器負(fù)責(zé)判斷最終狀態(tài)是否滿足任務(wù)要求。它可以由規(guī)則計(jì)算、視覺(jué)模型識(shí)別或人工復(fù)核組成。規(guī)則計(jì)算速度快、可解釋性強(qiáng)適合作為 ground truth視覺(jué)模型識(shí)別適合處理圖像中的遮擋和模糊場(chǎng)景人工復(fù)核適合小樣本評(píng)測(cè)。生產(chǎn)環(huán)境一般建議三層結(jié)合不能只依賴(lài)單一定性判斷。2.3 為什么“Agentic”是這種評(píng)估方式的必要條件空間認(rèn)知不是一次作答可以測(cè)完的。一個(gè)模型能正確回答“杯子在桌子右邊”不代表它能在沒(méi)有桌子的情況下自己規(guī)劃出一個(gè)新杯子放在合適位置更不代表它能通過(guò)多步操作調(diào)整布局。使用 Agentic 方式可以讓模型在嘗試過(guò)程中暴露更多信息模型第一次動(dòng)作是否正確。模型能否理解反饋并修正錯(cuò)誤。模型面對(duì)開(kāi)放空間時(shí)能否自主選擇穩(wěn)定路徑。模型是否會(huì)在多余動(dòng)作中破壞已有的正確布局。這些信息在一次性問(wèn)答評(píng)估里全部丟失。Agentic 評(píng)估的價(jià)值不只是“多給模型幾次機(jī)會(huì)”而是把空間認(rèn)知從靜態(tài)知識(shí)測(cè)試變成動(dòng)態(tài)決策測(cè)試。Agentic AI 當(dāng)前的一個(gè)核心挑戰(zhàn)就是如何在長(zhǎng)周期任務(wù)中保持目標(biāo)一致性空間認(rèn)知評(píng)估正好提供了一個(gè)非常適合檢驗(yàn) Agent 規(guī)劃能力的環(huán)境。3. 從零搭建一個(gè)最小原型這一節(jié)實(shí)現(xiàn)一個(gè)簡(jiǎn)化版的原型。它不追求真實(shí)擴(kuò)散模型渲染而是用一個(gè)規(guī)則渲染器先把框架跑通。真實(shí)項(xiàng)目里可以把 renderer 替換成 ComfyUI 或 Stable Diffusion 后端但原型階段的重點(diǎn)是驗(yàn)證動(dòng)作接口和評(píng)估邏輯。3.1 環(huán)境準(zhǔn)備原型使用 Python 3.9核心依賴(lài)只有 Pillow 和 numpy。如果后續(xù)要接入真實(shí)生成式模型再按需要安裝 diffusers、torch 或請(qǐng)求 ComfyUI API。python -m venv .venv source .venv/bin/activate pip install pillow numpy這里不把 PyTorch 作為前置依賴(lài)因?yàn)榭蚣艿膬r(jià)值在于評(píng)估邏輯不在于具體生成器。生產(chǎn)環(huán)境如果要接視覺(jué)生成模型通常需要單獨(dú)部署一臺(tái)帶 GPU 的推理服務(wù)Agent 進(jìn)程和渲染服務(wù)可以通過(guò) HTTP 通信。也就是說(shuō)LLM 和 ComfyUI 不要求必須在同一臺(tái)電腦上但你需要約定好圖片輸入輸出的格式和任務(wù)回調(diào)地址。3.2 定義空間場(chǎng)景和渲染器場(chǎng)景用一組矩形物體表示。每個(gè)物體有名稱(chēng)、類(lèi)別、位置、尺寸和顏色。渲染器把物體繪制成一張 256x256 的圖片用于后續(xù)可視化。from dataclasses import dataclass, field from typing import List, Dict dataclass class SceneObject: name: str category: str x: int 0 y: int 0 width: int 30 height: int 30 color: str blue dataclass class Scene: width: int 256 height: int 256 objects: List[SceneObject] field(default_factorylist) def to_prompt(self) - str: lines [] for obj in self.objects: lines.append(f{obj.name}({obj.category}): at {obj.x},{obj.y}) return \n.join(lines)渲染器可以先用 Pillow 畫(huà)矩形框后續(xù)再替換成真實(shí)圖片生成模型。from PIL import Image, ImageDraw def render_scene(scene: Scene) - Image.Image: img Image.new(RGB, (scene.width, scene.height), white) draw ImageDraw.Draw(img) for obj in scene.objects: x0 obj.x - obj.width // 2 y0 obj.y - obj.height // 2 x1 x0 obj.width y1 y0 obj.height draw.rectangle([x0, y0, x1, y1], fillobj.color, outlineblack) return img這個(gè)階段只做基礎(chǔ)繪制不做透視、遮擋和光照。評(píng)估邏輯必須能脫離視覺(jué)效果獨(dú)立工作否則生成器的畫(huà)風(fēng)會(huì)影響評(píng)估結(jié)果。3.3 給 Agent 定義一套不依賴(lài)坐標(biāo)的動(dòng)作接口為了讓評(píng)估框架?chē)?yán)格避免“通過(guò)坐標(biāo)作答”Agent 的動(dòng)作接口只提供語(yǔ)義操作。示例動(dòng)作集合包括place、move、remove。下面是一個(gè)動(dòng)作格式action { action: place, object: cup, category: cup, relation_target: table, relation: to_the_right_of, distance: medium }注意這里沒(méi)有 x/y 坐標(biāo)。Agent 只需要描述“在什么位置放什么物體、相對(duì)誰(shuí)是什么關(guān)系”坐標(biāo)由渲染器依據(jù)規(guī)則計(jì)算。這樣設(shè)計(jì)的原因很簡(jiǎn)單如果 Agent 仍然輸出坐標(biāo)那么生成式模型只是變成了一個(gè)后處理畫(huà)圖工具模型的空間認(rèn)知仍然停留在數(shù)字猜測(cè)階段。下面是一個(gè)簡(jiǎn)化的關(guān)系位置求解函數(shù)演示渲染器如何把語(yǔ)義關(guān)系轉(zhuǎn)換為坐標(biāo)def resolve_position(scene: Scene, target_name: str, relation: str, distance: str): target next(obj for obj in scene.objects if obj.name target_name) delta 40 if distance medium else 60 if relation to_the_right_of: return target.x delta, target.y if relation to_the_left_of: return target.x - delta, target.y if relation above: return target.x, target.y - delta if relation below: return target.x, target.y delta raise ValueError(funsupported relation: {relation})實(shí)際框架中關(guān)系計(jì)算會(huì)更復(fù)雜比如需要考慮物體尺寸、邊界、朝向和多個(gè)約束條件。但核心原則一致Agent 產(chǎn)生語(yǔ)義意圖坐標(biāo)是環(huán)境層解析的產(chǎn)物。3.4 評(píng)估器實(shí)現(xiàn)評(píng)估器檢查最終場(chǎng)景中物體之間的關(guān)系是否滿足任務(wù)要求。這里用結(jié)構(gòu)化關(guān)系檢查作為 ground truth而不是直接讓視覺(jué)模型判斷。def evaluate_scene(scene: Scene, task: dict) - tuple[bool, float, str]: required task[target] relation required[relation] target_name required[target_object] obj_name required[object] try: obj next(o for o in scene.objects if o.name obj_name) target next(o for o in scene.objects if o.name target_name) except StopIteration: return False, 0.0, missing object or target obj_center (obj.x, obj.y) target_center (target.x, target.y) distance_threshold 60 if relation to_the_right_of: ok obj_center[0] target_center[0] distance_threshold success_score 1.0 if ok else 0.2 feedback right relation if ok else not enough to the right elif relation above: ok obj_center[1] target_center[1] - distance_threshold success_score 1.0 if ok else 0.2 feedback above relation if ok else not high enough else: ok False success_score 0.0 feedback frelation {relation} not implemented return ok, success_score, feedback評(píng)估器要返回三個(gè)值是否完成、獎(jiǎng)勵(lì)分?jǐn)?shù)、反饋文本。Agent 的下一次動(dòng)作可以依賴(lài)反饋文本進(jìn)行修正。3.5 主流程和運(yùn)行結(jié)果主流程把 Agent、渲染器、評(píng)估器串起來(lái)。下面的 Agent 是一個(gè)模擬實(shí)現(xiàn)假設(shè)它能調(diào)用任意 LLM 的對(duì)話補(bǔ)全接口但在原型里用固定邏輯代替。def mock_agent_action(task, scene_text, feedback): # 實(shí)際項(xiàng)目中這里調(diào)用 LLM輸入 task scene_text feedback輸出結(jié)構(gòu)化動(dòng)作 return { action: place, object: cup, category: cup, relation_target: table, relation: to_the_right_of, distance: medium, } def run(task, max_steps3): scene Scene() scene.objects.append(SceneObject(nametable, categorytable, x120, y128, width60, height20, colorbrown)) feedback for step in range(max_steps): action mock_agent_action(task, scene.to_prompt(), feedback) if action[action] place: ox, oy resolve_position(scene, action[relation_target], action[relation], action[distance]) scene.objects.append(SceneObject(nameaction[object], categorycup, xox, yoy, colorgray)) done, score, feedback evaluate_scene(scene, task) if done: img render_scene(scene) img.save(fresult_step_{step}.png) return {solved: True, steps: step 1, score: score, scene: scene} return {solved: False, steps: max_steps, score: score, scene: scene} task {target: {object: cup, target_object: table, relation: to_the_right_of}} result run(task) print(solved:, result[solved], score:, result[score], steps:, result[steps])運(yùn)行后的預(yù)期結(jié)果中solved為 True場(chǎng)景渲染圖片里桌子的右側(cè)會(huì)出現(xiàn)一個(gè)灰色矩形杯表示關(guān)系滿足。4. 評(píng)估指標(biāo)和關(guān)鍵參數(shù)設(shè)計(jì)4.1 動(dòng)作空間設(shè)計(jì)原則Agentic 空間評(píng)估最容易被忽略的是動(dòng)作空間。設(shè)計(jì)動(dòng)作空間時(shí)有三個(gè)原則第一動(dòng)作必須是語(yǔ)義級(jí)的不能是像素級(jí)或坐標(biāo)級(jí)。例如“place object A to the right of B”是好的動(dòng)作而“set A.x 140, A.y 128”不是。后者會(huì)繞回坐標(biāo)評(píng)估。第二動(dòng)作集合必須覆蓋常見(jiàn)空間任務(wù)的原子操作。至少包含放置、移動(dòng)、刪除、旋轉(zhuǎn)和縮放。否則 Agent 無(wú)法完成復(fù)雜任務(wù)。第三動(dòng)作必須可回滾。多步任務(wù)中Agent 可能把一個(gè)物體放錯(cuò)位置之后必須允許它重新移動(dòng)或刪除否則評(píng)估只能測(cè)一次擺放能力測(cè)不了修正能力。常見(jiàn)動(dòng)作空間如下動(dòng)作參數(shù)說(shuō)明placeobject, relation_target, relation, distance生成一個(gè)新物體并放置在目標(biāo)相對(duì)位置moveobject, relation_target, relation, distance移動(dòng)已有物體到新關(guān)系位置removeobject刪除已有物體rotateobject, angle旋轉(zhuǎn)物體測(cè)試朝向理解set_constraintobject, min_distance_to, value設(shè)置空間約束適合復(fù)雜布局任務(wù)4.2 評(píng)估指標(biāo)評(píng)估指標(biāo)不能只看“最終有沒(méi)有成功”還要看過(guò)程質(zhì)量。建議記錄以下幾類(lèi)指標(biāo)。指標(biāo)計(jì)算方式關(guān)注點(diǎn)任務(wù)成功率完成任務(wù)次數(shù) / 總測(cè)試次數(shù)空間語(yǔ)義理解是否足夠準(zhǔn)確平均步數(shù)成功任務(wù)使用的總步數(shù) / 成功任務(wù)數(shù)Agent 是否高效是否反復(fù)試錯(cuò)動(dòng)作合法率合法動(dòng)作次數(shù) / 總動(dòng)作次數(shù)是否輸出越界、目標(biāo)缺失等非法動(dòng)作關(guān)系準(zhǔn)確率滿足目標(biāo)關(guān)系數(shù)量 / 全部目標(biāo)關(guān)系數(shù)量多約束任務(wù)下逐項(xiàng)拆解能力場(chǎng)景一致性多次運(yùn)行同一任務(wù)的布局 IoU 或距離標(biāo)準(zhǔn)差模型是否穩(wěn)定還是靠隨機(jī)猜修正成功率第一次錯(cuò)誤后第二次是否修正是否具備利用反饋調(diào)整的能力其中“修正成功率”是 Agentic 評(píng)估獨(dú)有的指標(biāo)傳統(tǒng)坐標(biāo)問(wèn)答無(wú)法測(cè)試。這個(gè)指標(biāo)能反映模型的空間推理是否具有閉環(huán)能力。4.3 關(guān)鍵參數(shù)表原型實(shí)現(xiàn)中有幾個(gè)影響評(píng)估結(jié)果的關(guān)鍵參數(shù)需要根據(jù)任務(wù)復(fù)雜度設(shè)置。參數(shù)默認(rèn)值影響調(diào)大影響調(diào)小影響max_steps5最大嘗試步數(shù)容忍更多試錯(cuò)但可能隱藏低效策略更容易失敗嚴(yán)格測(cè)試一次性決策能力distance_threshold60關(guān)系判斷容差更寬松容易誤判為“在右側(cè)”更嚴(yán)格但可能因坐標(biāo)解析誤差而失敗render_size256渲染分辨率圖片更清晰生成成本更高節(jié)省資源但小物體可能看不清action_modesemantic動(dòng)作輸出格式可擴(kuò)展復(fù)雜動(dòng)作限制表達(dá)空間feedback_leveltext反饋粒度模型更容易修正錯(cuò)誤反饋模糊模型難以定位問(wèn)題4.4 與坐標(biāo)輸出評(píng)估的對(duì)比下面的對(duì)比表可以幫你快速向團(tuán)隊(duì)解釋為什么新的框架值得做。維度坐標(biāo)輸出評(píng)估Agentic 生成式評(píng)估輸出形式數(shù)字坐標(biāo)語(yǔ)義動(dòng)作 圖像/場(chǎng)景測(cè)量能力數(shù)字記憶空間語(yǔ)義理解和決策可解釋性坐標(biāo)對(duì)錯(cuò)無(wú)法解釋每一步動(dòng)作可見(jiàn)可回放錯(cuò)誤分析只能看偏差值能定位錯(cuò)在哪個(gè)關(guān)系或哪一步場(chǎng)景擴(kuò)展換地圖要重新定義坐標(biāo)換任務(wù)只需改任務(wù)管理器工程復(fù)雜度低中高需要渲染器和狀態(tài)管理如果只是驗(yàn)證一個(gè)模型能不能記住圖片中的大概坐標(biāo)坐標(biāo)輸出夠用。但如果目標(biāo)是評(píng)估“空間智能”本身Agentic 生成式評(píng)估明顯更合理。5. 運(yùn)行驗(yàn)證與結(jié)果解讀5.1 最小驗(yàn)證用例用上一節(jié)的原型跑三個(gè)任務(wù)放置把 cup 放到 table 右側(cè)。移動(dòng)把 box 移到 circle 上方。多約束把 lamp 放到 desk 左邊并且離 wall 至少 40 像素。每個(gè)任務(wù)跑 10 次記錄成功率、平均步數(shù)、動(dòng)作合法率。5.2 預(yù)期輸出正常通過(guò)時(shí)運(yùn)行日志大概長(zhǎng)這樣task 1: solvedTrue, steps1, score1.0, legal_rate1.0 task 2: solvedTrue, steps2, score1.0, legal_rate1.0 task 3: solvedFalse, steps5, score0.6, legal_rate0.8第三個(gè)任務(wù)失敗可能有兩個(gè)原因模型沒(méi)有輸出set_constraint動(dòng)作或者約束關(guān)系解析器不支持。建議先檢查任務(wù)是否設(shè)計(jì)得過(guò)于復(fù)雜再檢查 Agent 是否理解動(dòng)作空間。5.3 如何判斷模型是真正理解還是猜對(duì)一個(gè)評(píng)估框架如果只報(bào)一個(gè)成功率很容易被隨機(jī)策略干擾。要判斷模型是否真正具備空間智能至少做三個(gè)對(duì)照實(shí)驗(yàn)。首先是動(dòng)作空間消融。給 Agent 提供一個(gè)“隨機(jī)動(dòng)作”基線如果隨機(jī)動(dòng)作也能得高分說(shuō)明評(píng)估器太寬松。正常情況下隨機(jī)動(dòng)作成功率應(yīng)該遠(yuǎn)低于一個(gè)基礎(chǔ) LLM。其次是場(chǎng)景干擾。同一個(gè)任務(wù)換用不同尺寸、不同初始位置成功率如果急劇下降說(shuō)明模型只是在記訓(xùn)練時(shí)的位置模式。最后是反事實(shí)任務(wù)。例如把“桌子右側(cè)”改成“桌子右后方”模型如果仍然只知道“右”而忽略“后”就能暴露出對(duì)方向組合的薄弱理解。5.4 學(xué)習(xí)環(huán)境與生產(chǎn)環(huán)境的差異原型階段用規(guī)則渲染器很容易跑通。生產(chǎn)中接入真實(shí)擴(kuò)散模型做渲染時(shí)需要考慮幾個(gè)額外問(wèn)題。第一渲染服務(wù)建議獨(dú)立部署。LLM 和 ComfyUI 不要求在同一臺(tái)電腦上可以通過(guò) API 調(diào)用。否則生成式模型的顯存占用會(huì)影響 LLM 的批量推理。第二視覺(jué)評(píng)估不能替代結(jié)構(gòu)化狀態(tài)。生成圖像可能因?yàn)楫?huà)風(fēng)問(wèn)題導(dǎo)致視覺(jué)識(shí)別失敗但結(jié)構(gòu)化狀態(tài)里的物體位置是可靠的。生產(chǎn)環(huán)境建議始終維護(hù)一個(gè)結(jié)構(gòu)化狀態(tài)表作為 ground truth視覺(jué)模型只用于額外一致性校驗(yàn)。第三評(píng)估任務(wù)需要版本管理。空間任務(wù)描述、動(dòng)作空間、關(guān)系解析規(guī)則都會(huì)迭代任何改動(dòng)都可能讓歷史評(píng)估結(jié)果不可比。最好給每次評(píng)估打上任務(wù)版本號(hào)。6. 常見(jiàn)問(wèn)題與排查路徑6.1 模型仍然輸出坐標(biāo)而不是語(yǔ)義動(dòng)作現(xiàn)象Agent 返回的動(dòng)作里出現(xiàn)x、y字段甚至直接輸出一段帶坐標(biāo)的 JSON。原因Base LLM 訓(xùn)練數(shù)據(jù)里包含大量“位置信息用坐標(biāo)表達(dá)”的示例模型默認(rèn)沿用這種模式。如果 prompt 里沒(méi)有明確約束動(dòng)作空間模型傾向于回到坐標(biāo)輸出。排查方式打印 Agent 原始輸出檢查是否有坐標(biāo)數(shù)字檢查 prompt 是否給定了合法的動(dòng)作枚舉。解決方式在 prompt 中明確列出可用動(dòng)作并給出幾個(gè)語(yǔ)義動(dòng)作示例。更穩(wěn)妥的做法是使用工具調(diào)用或結(jié)構(gòu)化輸出讓模型只能選擇合法動(dòng)作字段。對(duì)于不合法輸出可以直接丟棄并要求重新生成。6.2 渲染器生成的內(nèi)容不穩(wěn)定同一動(dòng)作兩次結(jié)果不一致現(xiàn)象使用真實(shí)擴(kuò)散模型生成圖像時(shí)同一句話生成的布局每次差異很大評(píng)估結(jié)果不穩(wěn)定。原因擴(kuò)散模型本質(zhì)上是采樣過(guò)程隨機(jī)種子會(huì)影響結(jié)果。而且文本生成圖像模型對(duì)空間關(guān)系的表達(dá)能力有限可能導(dǎo)致“桌子右側(cè)的杯子”被畫(huà)成“桌子前面”。排查方式固定隨機(jī)種子比較兩次生成的差別檢查 prompt 是否包含額外位置詞查看渲染器是否對(duì)輸出圖像做了裁剪或后處理。解決方式原型階段先用規(guī)則渲染器做評(píng)估視覺(jué)模型只做二次展示如果必須用擴(kuò)散模型可對(duì)生成的圖像做后處理約束比如根據(jù)語(yǔ)義分割結(jié)果把物體移動(dòng)到目標(biāo)區(qū)域。評(píng)估指標(biāo)也要以結(jié)構(gòu)化狀態(tài)為主。6.3 Agent 來(lái)回重復(fù)無(wú)效動(dòng)作步數(shù)耗盡現(xiàn)象模型在多個(gè)任務(wù)上不斷輸出相同或者相近的動(dòng)作分?jǐn)?shù)始終停留在低分。原因反饋文本太模糊模型無(wú)法判斷應(yīng)該修改哪個(gè)物體或者max_steps過(guò)大讓模型有機(jī)會(huì)試錯(cuò)而不優(yōu)化策略。排查方式在每一輪打印反饋文本和動(dòng)作觀察模型是否根據(jù)反饋改變動(dòng)作檢查動(dòng)作空間是否缺少修正操作比如move和remove。解決方式增加反饋的定向性例如“cup 仍然在 table 上方需要向右移動(dòng)”而不是只返回“失敗”。也可以縮短max_steps強(qiáng)制模型提高首步質(zhì)量對(duì)于需要長(zhǎng)期規(guī)劃的任務(wù)單獨(dú)引入規(guī)劃器模塊。6.4 評(píng)估結(jié)果和人工判斷不一致現(xiàn)象評(píng)估器認(rèn)為任務(wù)未完成但人類(lèi)看渲染圖覺(jué)得布局合理或者反過(guò)來(lái)評(píng)估器判定成功但人類(lèi)明顯看出物體遮擋嚴(yán)重。原因規(guī)則評(píng)估器只檢查了物體中心點(diǎn)距離關(guān)系沒(méi)有檢查遮擋、邊界和碰撞或者評(píng)估器的容差過(guò)小。排查方式保存最終渲染圖片和結(jié)構(gòu)化狀態(tài)逐項(xiàng)對(duì)照評(píng)估器的判斷條件。解決方式評(píng)估器增加“碰撞檢測(cè)”“遮擋檢測(cè)”“邊界檢查”。例如物體矩形框相交比例超過(guò)一定閾值就降低分?jǐn)?shù)。另一個(gè)重要做法是加入人工復(fù)核抽樣定期檢查評(píng)估器閾值是否合理。7. 最佳實(shí)踐與擴(kuò)展方向7.1 評(píng)估框架有效性檢查清單在正式使用這套框架之前建議先回答以下問(wèn)題動(dòng)作空間是否完全排除了坐標(biāo)輸出渲染器是否維護(hù)一份結(jié)構(gòu)化狀態(tài)而不是只有圖片評(píng)估器是否被隨機(jī)動(dòng)作基線驗(yàn)證過(guò)是否存在“只要隨機(jī)放置一個(gè)物體就能成功”的簡(jiǎn)單任務(wù)是否考慮了遮擋、碰撞、邊界等物理約束每輪是否給 Agent 提供了可執(zhí)行的反饋是否固定了任務(wù)版本和渲染器版本如果這些問(wèn)題的答案有任何一個(gè)是“否”評(píng)估結(jié)果都需要打折扣。7.2 空間任務(wù)設(shè)計(jì)清單生成高質(zhì)量空間任務(wù)比實(shí)現(xiàn)框架本身更需要經(jīng)驗(yàn)。設(shè)計(jì)任務(wù)時(shí)可以從下面幾個(gè)維度逐步加碼單關(guān)系 vs 多關(guān)系先測(cè)“A 在 B 右側(cè)”再測(cè)“A 在 B 右側(cè)且 C 在 A 下方”。靜態(tài) vs 動(dòng)態(tài)先測(cè)“放一個(gè)物體”再測(cè)“移動(dòng)一個(gè)物體并保持其他物體不動(dòng)”。絕對(duì) vs 相對(duì)先測(cè)“物體在區(qū)域右上角”再測(cè)“物體在另一個(gè)物體前方偏左”。無(wú)遮擋 vs 有遮擋先測(cè)“兩個(gè)物體無(wú)重疊”再測(cè)“一個(gè)物體部分遮擋另一個(gè)物體時(shí)如何描述”。無(wú)歧義 vs 有歧義加入“之間”“靠近”等模糊概念測(cè)試模型是否能主動(dòng)澄清或選擇合理默認(rèn)值。任務(wù)庫(kù)建議按照難度分級(jí)每個(gè)級(jí)別至少 20 個(gè)任務(wù)保證評(píng)估穩(wěn)定性。7.3 環(huán)境部署檢查清單如果想在生產(chǎn)環(huán)境接入視覺(jué)生成模型部署前檢查這些項(xiàng)LLM 服務(wù)和渲染服務(wù)是否通過(guò) API 解耦兩條服務(wù)之間是否有超時(shí)、重試和降級(jí)策略生成模型是否固定了模型版本、采樣器和種子策略圖片傳輸格式是 base64 還是文件 URL大小是否可控渲染服務(wù)是否具備 GPU 資源監(jiān)控和排隊(duì)機(jī)制是否保存了每輪動(dòng)作、場(chǎng)景狀態(tài)、渲染圖片和評(píng)估日志方便回溯這里的平衡點(diǎn)是評(píng)估主鏈路盡量輕量重資源操作放到獨(dú)立渲染服務(wù)。不要把視覺(jué)生成模型嵌進(jìn) Agent 的主推理鏈路否則一次評(píng)估的延遲和硬件成本都會(huì)難以接受。7.4 擴(kuò)展方向Agentic 空間認(rèn)知評(píng)估框架有兩個(gè)自然延伸方向。第一個(gè)方向是具身智能。算法評(píng)估里“擺放杯子”可以遷移到機(jī)器人操作任務(wù)中。機(jī)器人收到語(yǔ)義指令后生成操作序列仿真器渲染場(chǎng)景或真實(shí)環(huán)境反饋傳感器數(shù)據(jù)評(píng)估器判斷是否完成任務(wù)。這種評(píng)估可以直接復(fù)用動(dòng)作空間和結(jié)構(gòu)化狀態(tài)設(shè)計(jì)。第二個(gè)方向是訓(xùn)練數(shù)據(jù)增強(qiáng)。一旦評(píng)估框架穩(wěn)定運(yùn)行它生成的大量“任務(wù)-動(dòng)作-場(chǎng)景-反饋”軌跡可以作為多模態(tài)模型的訓(xùn)練語(yǔ)料。把成功和失敗的軌跡都保存下來(lái)再用 Agentic RAG 的方式在推理時(shí)檢索相似空間布局實(shí)例可以讓模型快速理解新場(chǎng)景。從更本質(zhì)的角度看空間認(rèn)知評(píng)估不應(yīng)該停留在“模型能不能說(shuō)出空間關(guān)系”的文本層面而應(yīng)該測(cè)量“模型能不能在空間里做出正確決策”。浙大提出的這個(gè)方向核心貢獻(xiàn)是讓生成式模型成為空間語(yǔ)義的輸出媒介讓 LLM 的文本能力與空間推理能力解耦。實(shí)際落地時(shí)不需要一開(kāi)始就追求真實(shí)圖像生成先把動(dòng)作空間、狀態(tài)管理、關(guān)系評(píng)估器設(shè)計(jì)好再逐步接入更復(fù)雜的渲染后端會(huì)是一條更穩(wěn)妥的路徑。對(duì)剛接觸這個(gè)方向的同學(xué)可以先從本文的規(guī)則渲染原型開(kāi)始跑通一個(gè)任務(wù)再用自己的 LLM 替換 mock agent觀察它在多步空間任務(wù)里會(huì)暴露哪些問(wèn)題。這一步做完再討論生成式圖像和更復(fù)雜的評(píng)估指標(biāo)思路會(huì)清晰得多。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
九九99视频精品| 操人妻90p| 任你爽视频| 国产xxxxx在线观看| www.色五月.com| 欧美超碰亚洲| 色综合天天| 九九视频这里只有精品在线播放| 国产九月婷婷| 九色婷婷| 青青草原中文字幕| 五月 丁香 欧美| 日操五月婷| 91久久久久久久久| 色情五月丁香婷婷网| 伊人久久丁香狠狠婷婷综合香蕉 | 激情五月婷黄版| 色欲婷婷夜夜| 91AV婷婷| 国产精品操| 极品人妻VIDEOSSS人妻| 色五月婷婷中文字幕| 五月丁香少妇网| 99se丁香| 五月婷婷爽爽爽| 婷婷五月天美女21p| 亚洲五月天色| 99综合视频| 亚洲欧美国产A片免费观看| 色色色色色色网站| 色综合婷婷| 五月婷婷丁香瑟瑟视频| 激情5月天天天| 只有精品在线观看| 99热这里在线精品| 中文网AV| 99热99ai| 婷婷成人综合免费视频| 日韩狠狠色婷婷| 日韩高清成人| 人人干99| 婷婷99狠狠躁天天躁中| 激情久久久久久| 激情啪啪五月天| 搡BBBB搡BBB搡18 | 综合色色五月| 爱穴久久| 日韩AV中文字幕在线| 一级AV片| www.99精品日操伊人乱碰在线| 丁香五月天视频| 九九综合| 婷婷丁香六月天| 超碰在线看| 九九无码| www久| WWW.17C亚洲精品| 色色色成人网| 97操女视频| 99久在线精品99re8热| 亚洲天天操| 伊人午夜综合色啪| 激情五月影院| 五月婷婷六月丁香在线| 99热精品在线观看| 六月成人网| 人人爽天天爽| 亚洲V国产V欧美V久久久久久| 99热精品无码| 九九九九九999999| 无码一级片| 国精产品一区二区三区| 久久多色| 婷婷综合网在线| 插少妇综合网| 五月丁香六月婷婷姐| www色五月| 99在线免费视频| 天天透天天爱| 久热九九| www.五月天| 亚洲六月婷婷| 日韩黄色影院| 91精品婷婷国产综合| 9精品视频在线| 九色七七| 六月婷伊人| 另类小说婷婷色| 五月天色网站| 色综合婷婷| 色丁香久久| 欧美色综合天天久久综合精品| 丰满女老板BD高清A片| 欧美色综合天天久久综合精品 | 欧美日韩五月婷婷| 综合性视频99| 狠狠激情五月天| 开心激情五月天网| 中文字幕按摩做爰| xx久久| 色九九综合| 国内婷婷丁香社区在线播放| 激情亭亭五月| 色婷婷五月综合激情中文字幕| 五月婷久久综合| 色五月婷婷操逼| 日韩成人AV在线播放| VA婷婷| 欧美va亚洲va在线播放| 天天干夜夜谢| 五月婷婷日| 激情婷婷五月女| 五月丁香六月情婷婷久久| 夜夜操天天干| 国产精品涩涩涩视频网站| 色级停停| 五月丁色AV| 五月色亚洲| 99在线综合视频| 婷婷五月另类网站| 五月花婷婷在线精品视频| 天天舔天天插天天干| 六月婷婷色| 九九色色网| 日本精品人妻无码77777| 91日综合欧美| 啪啪激情网站| 久热久| 1024你懂的欧美曰韩| 99婷婷五月天| 超碰超碰在线| 亚洲视频久久| www开心激情网| 色婷婷色99国产综合精品| 五月天激情网站| 久久加勒比| 玖玖资源部在线播放| 妻久久人久久| 182.t午在线观看| 婷婷丁香久久| 97超碰在线免费观看| 先锋影音av色五月天资源站| 丁香五月亚洲激情婷婷射| 伊人五月天婷婷| 亚洲色99| 日本一道久久| 日本久久性| 国产古装妇女野外A片| 超碰在线超碰| 婷婷开心五月| 97碰碰九九视频| 91婷婷丁香五月天免费视频网站| 日本高清久| 激情www| 开心五月激情网| 五月婷婷色色网址| 五月丁香婷婷网在线在线| 亚洲欧洲国产精品| 色狠狠色噜噜AV天堂五区消防| 大香蕉综合| 综合一区二区三区| 久热这里| 在线中文亚洲| www.maotanji.com| 久久99精品久久久久久噜噜| 五月天婷婷丁香基地在线观看| 久热一区| 午夜电影网VA内射| 97超级碰人人| 色播五月丁香| 色婷婷五月成人网| 免费观看大片视频 丁香婷婷 六月欧美| 热91久| 色色色777| 91肏| 99操视频| 久久久99免费视频| 99视频内射三四| 五月天久久综合| 丁香伊人五月色婷婷五十路| 99热官网| 婷婷五月天奸女| 五月激情综合网| 久热9热| 狠狠干综合网| 综合伊人久久| 91久久久久久| 天天日天天狠狠操| 97碰碰碰免费公开在线视频| 色婷婷五月天堂资源| A片试看50分钟做受视频| 五月天天天综合| 日韩啊啊啊| 99在线精品视频免费观看20| 久久婷五月影院| 激情www| 综合久久久婷| 成人无码髙潮喷水A片| 五月激情久久综合| 第四色五月婷婷| 国产成人av在线播放| 99操逼| 欧美交换配乱吟粗大25P| 丁香婷五月| 色色色色色九九九九九| 99九九精品| 少妇激情五月婷婷| 97碰碰在线看视频免费| av国产精品| 激情都市五月天| 久久九⑨| 九九Av| 婷婷五月 丁香六月| 五月婷丁香久久综合| 大香蕉婷婷久久| www.色婷婷| 丁香花社区av| 丁香六月激情综合| 色玖玖综合网| 成人.在线日韩| 伊人五月天婷婷| 日韩黄在免| 丁香六月婷婷综合啪啪| 婷婷六月视频| 色婷婷成人做爰A片免费看网站| 婷婷色播综合五月| 另类 在线| AV人人操| 五月天激情网开心网| 婷婷五月天色| 九九九九热99超碰| 99国产精品久久久久久久久久久| 色播婷婷五月天| 色香五月天| www.91婷婷| 国产又爽又猛又粗的视频A片| 精品人妻伦一二三区久久| 另类综合国产| 丁香五月天激情四射网| 99久在线精品99re8热| 99热在线中文字幕| 日本啪啪天堂| 月丁香久久久| 思思久久99热只有频精品66| 五月丁香网站| 五月天婷婷深深爱| 久久婷婷激情五月天一区二区| 大香蕉在九| 日熟女| 欧洲色| 婷婷综合五月天亚洲综合| 人妻久久做| a九九热www| 色天使久久综合| 亚洲久艹| 天天爱天天爽| 婷婷综合色| 色五月婷婷啪啪五月| 天天爽天天摸人妻综合网| 亚洲操精品| 婷婷97色| 国产人妻人伦精品一区二区| 91色色色| 99热这里只有精品3| 亚洲色色图片| 亚洲激情AV| www99xxxx五月丁| 啪啪啪综合网| 1024操逼视频| 久久婷婷五月综合| 五月婷婷丁香网| 一区二区成人电影| 91|九色|动漫| 日韩精品电影| 五月婷婷欧洲| 九九99精品免费播放| Va另类视频| 丁香综合网| 真实熟女-91九色| 天天色播| 五月丁香狠狠爱| 成人五月天丁香| 婷婷丁香色无五月| 色天天综合| 久久一热免费视频| 色五月丁香六月资源站| 婷婷五月激情热播| 色色爽爽天天| 日韩一级片| 99超碰在线观看| 一起草日本| 亚洲亚洲人成综合网络| 开心五月色婷婷综合开心网| 婷婷亚洲天堂| 色色国产| 国产又色又爽又黄又免费| 五月丁香啪啪综合| 亚洲乱码在线观看| 99狠狠色| 97热视频| 色欲Av五月天| 狠狠干综合| 二色AV| 青青草tp| 狠狠搞五月天| 大波美女VA网站| 蜜臀av无码久久久久久久久 | 五月婷婷丁香网| 色色综合网www| 欧美成人猛片AAAAAAA| 丁香六月天| 另类少妇人与禽zOZZ0性伦| 思思热视频在线| 五月丁香激情啪啪| 97五月天| 色五月丁香A欧美com| 五月丁香花成人社区| www.91av.com| 91人妻人人操| 色婷婷综合影院| www.五月天色色色| 激情婷婷| 涩涩五| 开心五月综合激情综合五月| 五月婷婷丁香网| 五月色亚洲| 婷婷五月激情的图片| 色五月婷婷91| 99热只有这里有精品| 国产成人+综合亚洲+天堂| 久久精彩视频| 91男人资源站| 国产亚洲成AV人片在线| 天堂资源欧日浪女在线播放| 99综合| 国内婷婷丁香社区在线播放| 欧美爆乳一区二区三区| 婷婷五月丁香啪啪| 在线99热| 婷婷国产五月天17c| 成人丁香五月婷| 91超级碰在线视频| 视频一二区| 五月婷婷片| 亚洲成人av在线观看| 一区=区操屄高清大全av| 人妻激情网| 丁香婷婷五月色成人网站| 五月激情丁香六月狠狠干| 色丁香综合影院| 五月天综合图片| 欧美色色色色色色色| 久久久97| 欧美123区免| 婷婷操逼| 夜夜操,天天撸| 最新色色五月天| 丁香五月天色综合| 精品久久9| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | 丁香五月婷婷基地| 五月丁香狠狠爱| 五月丁香色综合| 中字幕视频在线永久在线观看免费| 9操在线| 丁香六月婷婷缴情欧美| 99热这里只有精品4| 91精品又长又大又粗又爽又猛| www.xtbsty.cn.com蜜乳AV| 开心五月婷婷99| 99视频只有精品| 久久AAAA片一区二区| 久久香视频| 婷婷激情伍月网| 五月天色丁香| 双性美人被调教到喷水A片| 色情五月丁香婷婷网| www色色com| 大香蕉久久久久| 粉嫩av蜜桃av蜜臀av| 九色视频入口91| 我要看激情五月天| 久久AV无码精品人妻系列试探| 天天操无码| 久久久999精品| 激情婷婷六月| 亚韩在线视频| 狠狠色综合网站| 九九热99精品| 狠狠爱丁香婷| 综合激情啪啪| 日韩AV在线免费| www.91AV.com| 亚洲无线视频| 丁香六月婷婷综合激情欧美| 久操香蕉| 五月天伊人久久久久| 六月丁香色色| 专区无日本视频高清8| 我爱va亚洲va52| 91人人人人人人人| 伊人玖玖精品| 青青草蜜臀| 色综合激情图区| 婷婷 月 丁香| 伊人久久艹| 婷婷丁香五月在线播放| 免费播放AV| 97五月婷婷| 99热日韩这里只有精品| www.maotanji.com| www99热| 黑人熟妇一区二区三区| 五月丁香六月激情综合| 少妇搡BBBB搡BBB搡毛茸茸 | 99碰| 婷婷五月天亚洲综合| 色三级色三级| 婷婷五月丁香六月伊人网| 人。妻久久| 91丨九色丨43老版熟女| 激情五月天啪啪| 婷色五月天| 9色婷婷| 丁香五月天堂网AV| 99免费| av狠狠操| 婷婷丁香五月在线播放| 99热啪啪| 五月婷婷亚洲色图| 狠狠狠狠狠狠| 超碰在线免费| 99免费热视频| 色狠狠激情五月| 亚洲国产黄色电影| 丁香五月婷婷啪啪| 99热这| 久久视频这里都是精品| 丁香六月激情综合| 五月丁香在线观看99| 中字幕视频在线永久在线观看免费| 桃色激情网| 激情五月伊人婷婷| 97人人射| 激情综合色婷婷啪啪六月天| www,99热在线观看| 另类少妇人与禽zOZZ0性伦| 丁香婷婷激情网站| 五月婷婷丁香五月婷婷| 久久99这里| 91日韩美女被插视频| 亚洲国产精品VA在线看黑人| 99热这里只有精品55| 色色色99| 日本熟女二区| 久热视频这里只有精品| 天天日人人| 丁香五月婷婷影院| 久热婷婷| 日韩成人av在线| 噜噜视频| 日本五月天婷婷丁香| 99er6| 超碰超碰在线| 久久99久久99精品免观看粉嫩| 亚洲色就是色色色| 性爱激情综合网| 婷婷五月在线视频| 丁香激情网| 丁香五月天啪啪| 久婷五月| 婷婷综合| 91狠狠综合久久久| 日本欧美成人片AAAA| 丁香五月激情啪| 五月婷婷六月天| 五月婷婷五月天激情网| 久久99性爱| www色中色综合| 婷婷在线操| site:minyis.com| 91狠狠综合久久久久久| 天天插天天插天天操| 天堂久久精品| 毛片网站谁有| 日日操日日干| 伊人五月天婷婷| 天天 日综合| 桃色伊人在线| 色久综合天天做视频| www.sezonghe| 激情小说五月天| 久久与婷婷| 91无码视频| 91蜜桃婷婷狠狠久久综合9色| 五月天婷婷色色| 丁香六月欧美| 超碰人人摸人人操| 1024你懂的欧美曰韩| 久久五月情| 伊人网啪啪| 婷婷五月激情欧美| 欧美美女国产日韩一区二区久| 婷婷五月天激情综合婷婷五月天激情综合| 久久这里只有精品无码| 思思re视频在线| www.av骚货| 婷婷五月激情丁香| 天干夜夜操| 熟妇内谢69XXXXXA片| 久久九九Com| 色色九区| 欧美群妇大交乱婬网| 日日操,日日爽| 婷婷五月图片小说视频| 天天色图| 色九九综合色| 婷婷成人综合| 久久婷婷五月丁香| 26.uuu丁香五月婷婷| 丁香六月婷婷久久综合| 欧美婷婷色五月网| 久久99这里只有精品| 丁香色五月婷婷91桃色| 色色狼人综合| 美女婷婷激情亚洲| 日本一道久久| 五月婷六月| 婷婷导航| 超碰99热在线观看| 99高级会所久久| www.五月.com| 国外亚洲成AV人片在线观看| 综合狠狠干| 色婷婷五月天成人网| 久婷五月| 六月婷婷毛片| 91ncom.色| 色天天综合| 大香蕉手机视频| 久久九九热re6这里有精品| 99热九九在线| 丁香五月第四色88| 97久久超碰| 《丁香激情综合久久伊人久久》影视在线观看 -高清预告手机免费播放 -三妹影院 | 婷婷丁香18| 色五月大香蕉| 插逼综合网| 天天日日夜夜爽。| 亚洲视频在线观看| 99碰超| 婷婷丁香基地在线| 激情五月天影院| 欧美日韩五月婷婷| www.俺去也com| 久久久久久人妻| 99亚洲精美视频在线观看| 丁香五月天精品| 99热九九热| 国产婷婷五月天| 婷婷干五月综合在线播放| 狠狠操狠狠操AV| 五月天婷婷基地综合网| 激情六月色| 大香蕉九九| 99综合久久| 婷婷综合五月天| 中文幕无线码中文字蜜桃| 婷婷五月综合色小姐小说| 国产在线6| 色色色无码| 欧美色97| 精品久久9| 激情床戏| 成片免费观看视频大全| 色综合婷婷| 天天干天天干天天操| www.色五月| 色婷婷五月基地在线| 91色噜噜狠狠狠狠色综合| 久久五月婷婷视频| 丁香六月婷婷综合缴| www.久久久久久久久久.com| 婷婷五月深爱五月| 婷婷五月丁香四射| 五月天综合在线观看| 99福利视频导航| 狠狠擼综合| 日韩精品AV一区二区三区| 99激情视频热| 成人免费黄色短视频| 亚洲综合色丁香五月天| 日韩99无码| 久久婷婷五月激情网站| 五月婷婷综合色啪首页| cc精品国产性传播| 97操碰在线97| 婷婷久久五月天丁香| 九热免费视频| 无码激情| 狠狠色性| www.久久99精品| 天天天干夜夜夜操| 六月婷婷天堂| 激情六月婷婷| www.色综合| 天天插天天射| 天天日天天日天天搞| 丁香五月天亚洲综合| 伊人玖玖网| 丁香五月综合首页| 色色色图| 人妻精品久久久久久| 亚洲第一成人无码A片| 色永久| 久久人人九| 色五月五月婷婷| 森林影视大全,最好看的2019年视频 | 亚洲色夜| 婷婷5月色| 亚洲AV久久久久久久久久久久久久久久 | 毛片毛片毛片毛片| 九九婷婷综合| 日韩成人AV在线| 五月天婷婷在线观看精品男人| 20253AV| 玖玖婷婷五月| 国产六月婷婷| 色婷婷精品视频| 五月婷婷色五月| 婷婷五月天电影在线| 六月久久婷婷| A短视频免费在线观看| 七七九色| 天天射影视综合网| 色综合久久88色综合天天99| 欧美人妻一区二区| 激情婷婷五月基地| AV伊人青草丁香六月| 日碰日| 开心五月婷婷激情| 婷婷色丁香六月| 婷婷五月丁香五月| 亚洲国产色婷婷| 91九色精品熟女内射| 五月婷婷在线免费观看| 激情六月五月婷婷综合网| 久久一级片| 国产乱人偷精品人妻A片| 五月激情小说| 五月综合婷婷久久在线| 偷偷狠狠久久婷婷五月天| 二区成人视频| 偷偷与邻居做爰完整视频| 成人在线99| 9999热这里只有精品| 日韩欧美颜射| 免费亚洲成人电影AV| 久操欧美在线观看97| 五月天丁香网| 色五月大| 去干网最新版本亚洲版| 久久亚洲婷婷综合色五月| 中文字幕丰满人妻无码专区| 日本三级日本黄色| 9在线9在线婷婷在线国产| 色色五月天婷婷| 成人av在线网站| 色五月丁香五月天| 五月婷婷花| 天天做天天爰天天爽天天无遮挡| 超碰人人在线| 婷婷99狠狠躁天天| 亚洲视频伍月婷婷| 免费视频WWW在线观看网站| 好叼操在线观看| 五月丁香九九| 伊人超碰| 婷婷在线精品| 欧美激情综合色综合啪啪五月| 欧美影院| 少妇AB又爽又紧无码网站| 亚洲成人一区| 激情六月丁香| 开心色五月天久久久久久久| 激情五月天开心网丁香无码| 亚洲深喉AV| 婷婷的色色五月天| 青青草免费公开视频| 五月婷综合| 人妻免费网站| 极品嫩草| 91色五月在线观看| 色播激情| 9久热在线视频| 五月丁香婷婷成人网| 免费观看全黄做爰的视频| 国产乱妇无乱码大黄AA片| 激情欧美五月丁香| 少妇高潮呻吟A片免费看软件| 色性五月天| 丁香五月亚洲| 久久婷婷色综合| 亚洲综合婷婷| 中文字幕人妻在线| 天天日天天干天天操| 激情图片五月天| 久久精品系列| 九月婷婷综合| 色婷婷成人做爰A片免费看网站 | 99久久婷| 婷婷九月激情| 天天色域综合网| 99热这里只有精品5| 久婷婷婷| 国产乱子轮XXX农村| 99热传媒| 色婷狠狠| 91干| 婷婷激情综合网| 久久色这里只有精品| 婷婷丁香六月| 日本狠狠色| 深夜婷婷 丁香| 亚洲精品成人片在线播| 噜噜噜噜噜在线| 久久五月婷婷开心网| 日日夜夜狠狠操| 婷香五月激情视频| 久久99激情五月天| 丁香六月婷婷开心| 新激情五月天色播| 久操福利| se色婷婷视频| 五月丁香六月婷婷啪啪| 五月婷婷视频ab| 9999三级片| 做爰丰满少妇1313| 久久综合中文字幕| 9999热精品在线免费播放| 久机视频这只有精品| 九九热最新地址| 天堂伊人干| 五月丁香激情四射| 久草xx性爱视频| 久久久久9| seuuu婷婷| 久久婷婷亚洲| 五月婷婷啪| 五月丁香成人网| 九九热精品99| 色五月天在线| 九九碰九九爱97超| 666555。COm毛片| 亚洲成人日韩无码精品| 婷婷五月激情四月综合 | 伊人干综合| 五月丁香久人妻中文| 青草视频在线观看视频| 日韩aaa| 国产免费AV在线| 色色网站在线| 国产精品五月丁香| 三人荫蒂添的好舒服A片| 色五月婷婷激情五月| 亚洲视频99| site:901-07.com| 欧美大肥婆大肥BBBBB| 97碰在线视频| 狼人久草| 91色逼| 中字幕视频在线永久在线观看免费 | 97在线视频观看| 丁香五月婷婷Av| 色丁香久久| 99这里只有精品国产| 婷婷视频在线| 五月天色色婷婷| 五月丁香婷婷色| 懂色AⅤ| 国产免费一区二区在线A片视频| 91久久精品国产91性色TV| 成人欧美Va| 99热这里有精品| 日本色婷婷久久99精品91| 亚洲V国产V欧美V久久久久久| 五月丁香六月香香蕉| 午夜69成人做爰视频| 拍真实国产伦偷精品| 九月激情综合| 久久ww| 99九九视频精彩在线| 久久9久| 五月婷婷激情在线| 婷婷五月av| 婷婷丁香五另类网站| 97在线观视频免费观看| 狠狠干综合网| 婷婷丁香激情五月天色色| 久久久日韩特色特黄AAAA| 五月色综合| 九九婷婷网五月天| 丁香婷婷伊人| 97操碰碰无码视频| 激情五月最新网址| 激情五月黄色| 成人超碰网| 成人国产欧美大片一区| 婷婷人人操| www.婷婷| 色婷婷久久综合| 久婷婷婷| 99只有精品| 国产高潮A片羞羞视频涩涩| 久操大| 香焦网五月天| 六月丁香网| 亚洲综合五月天婷婷丁香| 五月天婷婷深深爱| 99日本在线| 色噜噜狠狠色综无码久久合欧美| 成人免费在线电影| 国产9色在线/日韩| 超碰免费在线| 婷婷激情综合色五月久久91| 99色色| 色婷婷视频| 开心五月天激情网| 丁香婷婷浪潮AV久久综合| 婷婷久久五月天| 婷婷香蕉精品| 丁香玖玖| 任你操精品免费| www.com色播五月天| 九九综合| 啄木鸟丝袜美女福利视频| 伊人玖玖网| 亚洲欧洲中文日韩久久AV乱码| 精品九九九久| 五月丁香好婷婷A片网| 五月丁综合在线观看| 色色亚洲| 色www久视频| 91碰在线| 99在线精品视频在线观看| 五月天,激情四射,婷婷频道| 五月天社区狠狠| 国产欧洲欧洲精品久久| 狠狠狠狠狠狠| 韩国中文字幕91| 亚洲欧洲国产精品| 91性交在线播放| 婷婷五月丁香综合| 干亚洲天堂| 婷婷涩五月| 狠狠狠狠狠狠| 国外亚洲成AV人片在线观看| 色欲AVV| www.狠狠操.com| 婷婷五月丁香五月| 五月天激情黄色小说在线观看| WWW.桔色成人.COM| 99精品偷自拍| 色噜噜狠狠色综合无码久久欧美| 六月婷婷综合| Aα在线免费观看| 五月综合缴情网| 超碰免费人| 丁香五月第九色| 9l视频自拍9l九色成人| 成人在线二区| 99精品在线下载| 91超级碰| VA婷婷| 啪啪啪大香蕉| 亚洲AV第二区国产精品| 婷婷久久五月天亚洲欧美国产日韩在线观看 | 丁香婷婷六月激情| 大香蕉220| 免费99情趣网视频| 成人欧美日韩| 日hao1区| 六月丁AV| 99丁香五月| 六月丁香停| 棕合影院色色| 色9月| 色播五月天激情| 九九九日本熟女| 久婷五月| 思思视频这里是精品| AV在线不卡播放| 5月丁香六月婷婷| 999九九九久久久99HD| 中文字幕av在线播放| 91久久色| 熟妇人妻中文字幕无码老熟妇| 欧美va国产va| 91丁香色五月| 99热这里只有精品手机在线观看| 久热超碰| 午夜天堂一区人妻| 婷婷五月天受日本法律保护| 久热精彩视频98| caopeng超碰| 91中文狠狠综合| 大香蕉久热| 疯狂做受XXXX高潮A片| 人妻性爱| 五月丁香六月婷婷综合| 欧美成人精品A片免费一区99| 五月天堂在线| 97碰碰人人视频| 六月婷婷开心| 人人97碰| 99综合99| 免费超碰在线观看| 99久久网站| www.亚洲激情| 五月天停婷基地| 婷婷综合久久综合| 五月激情综合网| 久久伊人婷婷| 婷婷的色色五月天| 激情伍月 欧美| 久久婷婷激情| 久操无码| 九色视频91疯狂| 九热免费视频| 99五丁香月| 思思热在线观看| 欧美色色色| 伊人爱爱日本| 色综合婷婷| 六月丁香五月婷婷| 亚洲婷婷五月天激情| 无月播播激情在线观看视频| 婷婷色五月色妇| 婷婷娱乐丁香综合网| 99re思思精品在线观看| 激情五月天网页| 操一操| 成人五月天视频播放| 婷婷五月中文字幕| 日韩AC在线免费观看| 精品少妇人妻AV无码专区偷人| 丁香狠狠色婷婷久久无码视频| 色5月婷婷| 无码动漫av| 婷婷色色五月| 五月激情啪啪啪| 丁香五月婷婷性爱| Va另类视频| 九九激情| 久久一二三视频| 日本色狠狠| 新97人人上人人| se影音资源在线观看| 亭亭丁香aV| 停停色综合伊人| 9l视频自拍9l视频自拍九色学生| 日韩成人AV在线播放| 好好干Av| 色色色精品无码区| 婷婷色五月情| 开心激情站| 99色色网| 丁香五月婷婷综合激情啪啪啪啪啪啪啪| 久久人操-久草婷婷-成人AV| 91久久久久久| 精品久久66| 色五月丁香五月天| 亚洲激情在线| 丁香婷婷超碰 | 色玖玖| 丁香蜜臀黄色婷婷五月天| 成人狠狠成人狠狠成人狠狠成人狠狠| 九九免费视频| 久热伊人| tingtingzonghewang| 性婷婷| 米奇影视资源777狠狠色婷婷五月天激情网| h在线看免费版在线看| 国产在线另类五月婷婷| 欧美性爱特黄一级aaaassss| 丁香婷婷综合五月天| 精品三区影院| 色色五月丁香| 日本WwW色偷偷丁香花久久久京东热| 色综合99无码| 免费V片在线| 色五月激情| 色 五月俺去也| 九九热超碰| 99综合视频| 天天久久狠狠色综合| 奇米影视777在线_在线观看午夜_h小视频在线观看_岛国大片 | 久思思久视频| 91色涩| 久久精品99久久久久久| 26uuu日韩| 五月婷啪啪| 97久久久久| 这里只有精彩小视频视频网站| 婷婷色情五月| 五月丁香888| 人妻激情在线| 五月丁香激情啪啪| 久久99视频| 色色色干| 亚洲综合在线视频| 九九热这里精品| 国产乱子轮XXX农村| 狠狠色 综合色区| 久久久久视剧HD| 99九九玖玖| 亚洲天堂爱爱| 97在线视频人妻九色| 无码AV免费精品一区二区三区| 91久久五月天| 五月天成人综合| 丁香花五月天婷婷成人社区| 婷婷六月色| 丁香五月综合| 狠狠色狠狠鲁| 最近免费中文字幕大全高清大全1 免费看欧美成人A片无码 | 五月开心深深爱激情综合 | 五月天社区| 激情六月天| 99九九在线观看免费| 极品人妻VIDEOSSS人妻| 丁香五月激情性色郤| 天天草女人| VA婷婷亚洲| 日韩精品电影| 激情性爱五月天| 亚洲成人在线播放| 天天做天天爱天天高潮| 5月婷婷6月六月丁香| 精品99视频| 都市激情亚洲| 五月天婷婷激情在线色图| 丁香五月婷婷无码AV| 久久99看免费| 亚洲亚洲人成综合网络| 五月激情婷婷在线| 婷婷五月天在线看| 99热最新精品| 色九月丁香婷婷蜜桃在线观看| 日本欧美成人片AAAA| 麻豆五月丁香婷婷| 久久综合激情| 欧美在线看| 日韩精品视频中文字幕| 五月婷婷天| 久久激情五月| 襙逼网| 久久久久久久97| 色久影院| 热99视频精品在线| 五月丁香网站| 久久综合婷婷五月| 天天干com| 激情都市五月天| 亚洲五月天婷婷综合| 婷婷丁香色五月亚洲| 亚洲影院婷婷色| 狠狠色噜噜狠| 欧美99热| 丁香五月婷婷高清| 天天做天天爱天天爽| WWW,五月| 国产AV国片偷人妻麻豆| 大香蕉综合在线| 国产激情综合五月久久| 亚洲五月婷| 丁香六月婷婷| 五月丁香六月激情欧美综合| 桃色五月天| 一级黄色影片| 韩国中文字幕91| 国产精品扒开腿做爽爽爽A片唱戏| 色五月婷婷五月天| 九九精品热| www,奇米影视| 国产性爱大片久久| 国产精品天天狠天天看| 天天做天天爽| 超碰色碰碰| 97se视频在线| 色综合爱综合| 色色色色五月| 超碰男人色| 秋霞丝袜啪啪啪| 婷婷五月色播天| 香蕉久久国产av一区二区| 91婷婷伊人牛牛| 2050人人操免费工开爱| 午夜激情五月| 色丁香婷婷美女视频网站| 九九热在线视频| 亚洲成人婷婷| 亚洲午夜av| 婷婷六月激情丁香| 久久婷婷综合五月天| 色五月丁香五月天| 国产肥白大熟妇BBBB视频| 又大又粗九一在线| 亚洲区1| 性爱综合网| 丁香午夜天| 另类在线免费视频| WWW.婷婷五月天.COM| 丁香六月婷婷综情欧美| 久久婷婷五月综合| 大香av| 国产无人区大片| 伊人大香久久| 五月天激情小说电影| 天堂综合久| 亚州在线中文字幕| 丁香婷婷六月天| 激情丁香五月| 99re熱| 色色色色色色色色网站| www,色综合| 色婷婷五月在线| 日本nghangse中文字幕| 天天噜天天爱| 风流少妇A片一区二区蜜桃| 色六月丁香婷婷啪啪啪| 99.N在线视频| 黄色中文字目| 成人五月丁香社区| 五月婷婷综合热| 99色热| 99自拍网| 亚洲成人超碰| 日本九九九九| 婷婷五月婷婷| 激情综合网五月激情| 黄色笑话深爱激情网丁香五月婷婷啪啪啪啪啪| 久久婷婷五月国产激情综合片| 97色欧美| 五月天另类图片区99| 中文字幕在线人妻| 99热在线观看成人| 免费看欧美成人A片无码| 另类视频五月天| 99九九视频| 欧美性爱五月天| 丁香亚洲婷婷五月| 欧美婷婷五月激情| 激情婷婷五月天网址| 五月丁香婷婷色色| 91热久久| 99资源在线| 综合视频久久| 亚洲热久| 色婷婷色99国产综合精品| 夜夜嗨一区二区三区直播内容 | 婷婷丁香五月在线播放| 6080av| 国产激情久久久| 热久69| 免费啪啪亚州视频| 国产超碰人人| 婷婷丁香五月亚洲17cao| 久热这里只有国产| 99精彩视频| 思思热精品免费视频| 欧美精品狠狠色丁香婷婷| 真实亲子乱子伦高清在线观看| 色色色网站| 五月丁香婷婷伊人| 久久久久九九九九视屏小说88| 日本色色视频| 久久99久久久| 91精品国产综合久久久不卡电影| 婷婷亚洲丁香五月| 五月丁香在线视频观看| 97人妻超级碰碰碰碰碰| 欧美综合五月丁香五月天| 91色婷婷综合久久中文字幕二区| 成人做爰黄A片免费看直播室男男| 操啊操av| 久久婷婷影院| 国产av第一专区| 久久视频这里99| 激情五月天视频| 99re久热| 九九热最新| av网站不卡在线| 九月婷婷色色| 六月丁香五月婷婷首页| 五月婷婷激情| 婷婷色五月激情| 婷婷成人综合| 久久草婷婷丁香网站| 99亚洲视频| 在线视频你懂得| 97在线精品| 夜色爱爱亚洲| 碰碰91| 婷婷久久五月丁香| 爆乳熟妇一区二区三区爆乳| 超91热| 综合久久激情久久| 五月丁香六月激情综合| 色激情五月| 婷婷婷色五月| 五月婷婷丁香91| 中文字幕 中文字幕明步| 综合九九| se色99| WWW.开心五月天.COM| 色综合中文色综合网| 五月丁香婷色| 裸体美女丁香五月天。 | av九九| 99思思热只有在这里看| se99视频| YW无码| 激情五月综合久久| 天堂婷婷丁香六月网| 99热久草| 丁香五月婷婷老师网站| 激情欧美婷婷| 一區四區歐美日韓| 色噜噜五月天| 久久久精品婷婷五月天| 99热这里在线精品| 99热精品无码| 激情综合色婷婷啪啪五月天| 五月丁香啪啪综合网| 五月综合六月婷婷| 亚洲欧洲另类| 婷婷久久图片| 五月婷婷丁香六月在线| 激情图片五月天| 色五月婷婷777| 麻豆科斗777| 丁香花五月天激情| 日本少妇裸体做爰高潮片| 亚洲、欧美、国产另类笫二区| 在线可以看的av网址| 先锋影音av色五月天资源站| 日韩色色色色色| 黄色一级影片| 月丁香久久久| 五月激情综合激情五月| 色~性~乱~伦~噜| 久久天堂婷婷五月| 精品51XX| 亚洲人妻av伦理| 九九热黄色| 99九无网码| AV大片在线观看| WWW五月婷婷| 激情五月天无人视频在线| 日韩三十六页| 激情五月六月丁香| 国产精品99久久久久久久女警| 五月天激情综合首页| 日本久久爱| 九九色中文|