跳到正文
原文
arXiv cs.CV· Weihuang Lin, Xianing Chen, Zhibin Wang, Congzhi Zhang, Yiwei Ma, Jiayi Ji, Miao Chen, Jun Song, YuCheng, Bo Zheng, Xiaoshuai Sun, Rongrong Ji·· 2 小时前AI 评分36

MVRCap:以分层多维可验证奖励迈向全面视频描述

MVRCap: Towards Comprehensive Video Captioning via Hierarchical Multi-Dimensional Verifiable Rewards

AI 导读

MVRCap 框架将视频描述生成重构为受结构化验证引导的强化学习任务,其细粒度可验证奖励机制由分层概念覆盖奖励、事实性验证奖励和简洁性约束三部分组成。研究团队为此构建 MVRCap-QA 数据集以衡量多维完整性与语义深度,并整理覆盖六个关键维度的 MVRCap-SFT 数据集用于强化学习策略初始化。实验显示 MVRCap 在 VDC、CAPability、VC4VG 等基准上取得 SOTA。

来源:arXiv cs.CV · arxiv.org