跳至正文
原文导读 · 原标题中译

超越单轴测试:视觉—语言—动作策略复合鲁棒性的配对评估

Beyond Single-Axis Testing: Paired Evaluation of Compound Robustness in Vision-Language-Action Policies

材料发布 2026-10-15 · arXiv · 作者论文 · 核查 2026-10-18
图 1:LIBERO-CTRL 在物体任务 2、配置 0 下的扰动示例,任务为拾取沙拉酱并放入篮子。(A)标称观测。(B)执行扰动不改变静态图像;左图比较同一开环指令在标称条件及 L1–L3 下的末端轨迹,右图显示十组执行预设的平均跟踪误差、中位数与四分位距,归一化尺度另在 Spatial 上标定。(C)相机、光照、机器人位姿、传感器及同时扰动。同等级预设具有相同归一化半径、不同方向;同时扰动合并对应配置。语言改写不在 RGB 观测中显示。 图片出处
图 4:五种策略、三个扰动等级的复合鲁棒性分解。灰色为独立、逐轴合取及同时扰动的绝对成功率;蓝、红分别表示相邻统计口径的正、负变化,同一等级采用相同纵轴尺度。总结果不一致率进一步分为橙色的涌现失败与青色的补偿成功,揭示两个方向的转变可能在汇总净变化中相互抵消。 图片出处

内容摘要

作者提出 LIBERO-CTRL 六轴配对评测协议,检验单轴测试能否刻画视觉—语言—动作策略面对同时扰动时的鲁棒性。协议覆盖相机、光照、机器人初始位姿、传感器、执行与语言扰动;对同一初始状态,分别施加各轴扰动,再将相同扰动值同时施加。主评测涉及六种语言条件策略、三个严重程度等级,使用固定的 400 个任务—配置配对。分析区分两类结果转变:“涌现失败”指各单轴均成功、同时扰动却失败;“补偿成功”指至少一个单轴失败、同时扰动却成功。

两者对总体成功率的影响方向相反,可能相互抵消。作者报告,UniVLA 在轻度扰动下,两类转变的净差异置信区间包含零,但 29.00% 的配对配置仍改变成败结果;全部受测条件中,最大结果不一致率为 VLA-JEPA 中度扰动下的 34.50%。作者还对三种随机推理策略更换随机种子复测,发现两类转变分量较稳定,但其较小净差异的统计判断更敏感。论文据此主张,不能仅凭单轴汇总成功率判断复合鲁棒性,应保留逐实例配对结果并分别报告两个方向的转变率。

点评

为鲁棒性评测提供更细的诊断方式:在已有配对单轴测试上增加一个匹配的同时扰动条件,揭示总体成功率可能掩盖的双向结果变化。

证据来自作者论文,随机性复测也是作者实验,不应视作独立团队复现。研究限于仿真中的单一本体,不能外推任意真实分布变化;同时施加六轴也无法定位具体由哪些低阶扰动组合引发结果转变。

版本与核查范围

版本 2609.15940v2 · 原文定位与程序检查、独立上下文模型复核;不代表独立研究复现。。依据已核查材料整理;未运行模型或机器人。

原文与定位

  • 原文链接 #abstract1.1;#S3.SS1.p3.1;#S1.p4.1;#S3.SS1.p4.1;#abstract1.1;#S4.SS2.p3.1;#S4.SS2.p4.1;#S3.SS5.p2.1;#S4.SS3.p1.1;#S6.p2.1;#S5.SS1.p3.1;#S6.SS0.SSS0.Px1.p1.1