arXiv cs.CV· Rikhat Akizhanov (MBZUAI), Yangsong Zhang (MBZUAI), Nikolai Kaliazin (MBZUAI), Peter Wolf (ETH Z\"urich), Yoshihiko Nakamura (MBZUAI), Pascal Fua (EPFL), Fabio Pizzati (MBZUAI), Ivan Laptev (MBZUAI)·· 4 小时前AI 评分35
PACT:从视频端到端联合学习人体姿态、接触与接触力
PACT: End-to-End Learning of Human Pose, Contacts, and Forces from Video
AI 导读
PACT 是端到端模型,可从单目视频联合估计人体姿态、接触与接触力,取代分阶段重建流程。它在人体重建基础模型上加入可学习的接触力 token 和时序 Transformer,以物理监督约束运动与交互力一致,并发布含力传感器真值接触力的真实攀岩基准 ForceWall。实验显示其接触与力估计达到 SOTA,优于分阶段方法。
来源:arXiv cs.CV · arxiv.org