arXiv cs.CV· Wang Tang, Fethiye Irmak Dogan, Linbo Qing, Ce Zhu, Hatice Gunes·· 2 小时前AI 评分26
HiRe-DRR:面向双人关系识别的分层多模态交互推理框架
Hierarchical Multimodal Interaction Reasoning for Dyadic Relationship Recognition
AI 导读
HiRe-DRR 提出分层多模态交互推理框架,从特征层级、交互类型与关系层级三个视角组织关系证据,识别两人之间的潜在社会关系。其 MoI-Former 将多样交互视为专家并用关系感知稀疏路由筛选关系相关证据,HC-Loss 则以由粗到细的监督利用关系的层级结构。在三个双人关系 benchmark 上,HiRe-DRR 优于近期代表性图像、视频和多模态方法,代码已公开。
来源:arXiv cs.CV · arxiv.org