arXiv cs.CV· Yue Su, Bokai Lin, Xinkai Wang, Chubin Zhang, Xiangnan Wu, Kuan Zhang, Weiyang Jin, Jiwen Yu, Yiming Li, Cewu Lu, Lixin Yang, Xihui Liu·· 3 小时前AI 评分36
OneWM:世界建模与动作建模在统一因果训练下能否相互受益?
Can World and Action Modeling Benefit Each Other under Unified Causal Training?
AI 导读
OneWM 是统一因果训练框架,将动作同时作为世界预测条件和策略学习目标,在共享 video-action 架构中验证世界建模与动作生成能相互受益。基于 LIBERO、LIBERO-Plus、RoboCasa365 及真实世界策略实验,学习指定动作的视觉后果可提升策略性能与跨场景泛化,动作学习则提升多视角世界预测保真度。
来源:arXiv cs.CV · arxiv.org