跳到正文
原文
arXiv cs.CV· Rikhat Akizhanov (MBZUAI), Yangsong Zhang (MBZUAI), Nikolai Kaliazin (MBZUAI), Peter Wolf (ETH Z\"urich), Yoshihiko Nakamura (MBZUAI), Pascal Fua (EPFL), Fabio Pizzati (MBZUAI), Ivan Laptev (MBZUAI)·· 4 小时前AI 评分35

PACT:从视频端到端联合学习人体姿态、接触与接触力

PACT: End-to-End Learning of Human Pose, Contacts, and Forces from Video

AI 导读

PACT 是端到端模型,可从单目视频联合估计人体姿态、接触与接触力,取代分阶段重建流程。它在人体重建基础模型上加入可学习的接触力 token 和时序 Transformer,以物理监督约束运动与交互力一致,并发布含力传感器真值接触力的真实攀岩基准 ForceWall。实验显示其接触与力估计达到 SOTA,优于分阶段方法。

来源:arXiv cs.CV · arxiv.org