跳到正文
原文
arXiv cs.CV· Yue Su, Bokai Lin, Xinkai Wang, Chubin Zhang, Xiangnan Wu, Kuan Zhang, Weiyang Jin, Jiwen Yu, Yiming Li, Cewu Lu, Lixin Yang, Xihui Liu·· 3 小时前AI 评分36

OneWM:世界建模与动作建模在统一因果训练下能否相互受益?

Can World and Action Modeling Benefit Each Other under Unified Causal Training?

AI 导读

OneWM 是统一因果训练框架,将动作同时作为世界预测条件和策略学习目标,在共享 video-action 架构中验证世界建模与动作生成能相互受益。基于 LIBERO、LIBERO-Plus、RoboCasa365 及真实世界策略实验,学习指定动作的视觉后果可提升策略性能与跨场景泛化,动作学习则提升多视角世界预测保真度。

来源:arXiv cs.CV · arxiv.org