跳至正文
原文导读 · 原标题中译

CAP:通过学习式去噪实现感知—盲行连续自适应的人形机器人运动

CAP: Continuously Adaptive Perception-Blind Humanoid Locomotion via Learned Denoising

材料发布 2026-09-10 · arXiv · 作者论文 · 核查 2026-10-19
图2:感知鲁棒的足式运动(legged locomotion)范式对比。盲策略不使用深度信息,感知策略消费深度信息,二元切换系统则在感知分支与盲分支之间做门控(gating)。CAP 另辟蹊径:让去噪世界模型(world model,从观测重建未来状态的自监督模型)通路与本体感知(proprioception,机器人自身关节与身体状态的内部测量)通路同时保持激活,并持续相互融合。仅在训练期使用的评论家(critic)与特权信号(privileged signal,训练时可得、推理时不可得的信息)未在图中画出。 图片出处
图4:CAP 在 G1 上的真机部署。(a) 混合地形下的遮盖—显露(cover–uncover)实验。(b) 混合地形上由闪光(flash,强光照射)引起的深度污染。(c) 在平台、草地与楼梯场景中的室外部署。内嵌小图显示同步采集的原始深度输入(左,红色)与世界模型重建结果(右,绿色)。 图片出处

内容摘要

复杂地形行走需要提前感知障碍,但深度信号可能局部受损或间歇失效。作者提出CAP,针对部分受损深度中仍可恢复的地形信息,以双通路连续融合替代感知与盲行子策略之间的离散切换。

CAP采用单阶段训练:世界模型编码器接收受损深度,以独立的干净、姿态稳定深度为重建目标;本体感知变分编码器同时提供不依赖深度的身体状态信息。训练将输入端的深度噪声课程与策略端的世界模型特征丢弃配合,覆盖不同感知质量。世界模型用于去噪感知,不生成供策略优化的想象轨迹。

作者报告,仿真中CAP在Clean、Noisy条件下的平均成功率分别为99.6%、97.9%;这里Noisy仍保留部分有效深度,并非完全失明。仿真训练策略直接部署到宇树G1后,在楼梯、平台、沟隙及混合地形的干净与部分遮挡条件下合计完成39/40次试验。但完全遮挡时,楼梯成功5/5,平台、沟隙和混合地形各为0/5,表明连续退化不等于失去视觉后仍能跨越所有障碍。

点评

这项作者研究展示了世界模型作为去噪感知模块、与本体感知持续协同的运动控制路径,而非依靠想象轨迹优化策略。

证据来自作者论文,并非独立复现;真机每个条件—地形单元仅5次试验。完全失去感知时仍受地形限制,大幅分布外几何误差与失步后的安全恢复尚未解决。

版本与核查范围

版本 2609.11553v1 · 原文定位与程序检查、独立上下文模型复核;不代表独立研究复现。。依据已核查材料整理;未运行模型或机器人。

原文与定位

  • 原文链接 #S1.p1.1;#S1.p3.1;#S1.p3.1;#S3.SS2.SSS0.Px1.p1.1;#S1.p3.1;#A1.SS2.p1.1;#S4.SS2.p1.1;#S4.SS4.p1.1;#S1.I1.i3.p1.1;figcaption[74];#S5.SS0.SSS0.Px2.p1.1