arXiv cs.AI· Shishi Xiao, Zichao Wang, Alexa Siu, David H. Laidlaw, Jennifer Healey·· 4 小时前AI 评分33
FigAct:把科学图表变成可主动解释的演示画布
FigAct: Turning Scientific Figures into Active Canvases for Explanation
AI 导读
FigAct 可将静态科学图表转化为问题条件下的可视化演示,通过生成简短旁白、将每句旁白定位到对应视觉证据并施加视觉动作来引导注意力。其分层搜索策略让 token 用量降低约 40×,并用 grounding 准确率、搜索效率、渲染质量三项奖励训练出 FigAct-8B。团队还基于真实科学论文图表构建了人工核验 benchmark,评测 MLLMs 生成有依据视觉解释的能力。
来源:arXiv cs.AI · arxiv.org