跳到正文
原文
AGI Hunt· HKUCDS·· 2 小时前AI 评分31

港大提出 JoHan:视频生成式联合恢复 2D-3D 手部运动更流畅

AI 导读

香港大学与 UC Berkeley 团队提出 JoHan,一个从视频序列直接恢复 3D 手部运动的统一生成式框架,不依赖逐帧姿态中间预测。模型从头训练,联合生成对齐的 2D 与 3D 局部手部姿态序列,借 2D 轨迹的时空线索引导 3D 重建并提升时间一致性,2D-3D 对应关系还可恢复手部相对相机的全局位置与朝向。在多个基准上,局部手姿与相机空间重建的精度和速度显著提升,运动比以往方法更平滑。

来源:AGI Hunt · agihunt.info