跳至正文
原文导读 · 原标题中译

StressDream:引导视频世界模型,用于鲁棒策略评估与改进

StressDream : Steering Video World Models for Robust Policy Evaluation and Improvement

材料发布 2026-10-07 · arXiv · 作者论文 · 核查 2026-10-18
图1:结果——Naughty Dubins Car。(a) 在世界模型(WM)想象结果中检测潜在失败的TPR(真正例率)与TNR(真负例率)。(b) 标称想象与受控引导想象的叠加对比。StressDream对世界模型想象进行引导,从而发现标称想象所遗漏的合理失败。更多结果与细节见附录C与项目网站。 图片出处
图25:经微调的π0.5-droid策略在各任务上的成功率。采用基于悲观(pessimistic)视频世界模型想象的鲁棒微调后,与标称微调相比,策略在各任务上的成功率均有所提升。 图片出处

内容摘要

视频世界模型可按机器人动作生成未来观测,但常规生成可能漏掉高影响后果。作者提出StressDream,在推理时按文本目标引导模型寻找可能的失败。方法固定生成模型,优化扩散模型初始噪声:以视觉语言模型提供语义梯度,并约束范数、各向同性和频谱白性,使噪声保持高斯先验的典型性,减少不合理生成。

作者在已知动力学与不确定性的受控实验中报告,该方法比常规生成和Best-of-N更有效地发现可能失败;去掉合理性约束则会生成不合理失败。驾驶与操作实验分别使用Vista和Ctrl-World,均进行了任务相关微调;作者认为这对其场景中的罕见事件生成和视频质量很重要。作者还报告,以悲观生成辅助示范重加权后,π0.5-droid鲁棒微调策略在所评估各任务上的成功率均高于常规微调。

以上均为作者实验结果。风险评估针对候选轨迹,并非完整策略闭环评估。噪声优化只是局部细化;“合理”仅相对于模型已学分布,不能修正基础模型的物理错误,也不能生成其分布中缺失的真实可能结果。

点评

该研究展示了用引导生成筛查候选轨迹失败风险、并以悲观生成辅助示范重加权的路径;证据限于作者所评估的设置,不外推为通用策略能力。

不能据此推断全局最坏情形覆盖或现实安全保证:噪声搜索是局部细化,生成受基础世界模型分布约束。作者还指出,当前模型每次未来生成可能耗时数分钟。所给材料未提供独立研究复现证据。

版本与核查范围

版本 2606.00267v2 · 原文定位与程序检查、独立上下文模型复核;不代表独立研究复现。。依据已核查材料整理;未运行模型或机器人。

原文与定位

  • 原文链接 #abstract1.1;#abstract1.1;#A1.SS4.p3.1;#abstract1.1;#A2.SS1.p2.1;#S5.p1.1;#S5.p6.1;#S6.p2.1;#S6.p3.1;#A4.SS1.p2.1;#A5.SS4.p1.1;#A1.SS3.p6.1