AGI Hunt· _reachsumit·· 3 小时前AI 评分35
PILOT 框架:把推理当隐变量,提升多模态嵌入检索效果
AI 导读
arXiv 论文提出 PILOT 框架,将推理建模为隐变量以提升多模态嵌入检索:用同一个 MLLM 的先验与后验两种推理模式,先验只见输入,后验在训练时利用正负候选等额外关系证据引导探索。方法通过重要性加权变分目标,让两者在共享的推理兼容奖励下共同进化。推理时只需输入、无需额外证据即可得到更好的多模态嵌入。
来源:AGI Hunt · agihunt.info