跳到正文
原文
arXiv cs.CV· Jianghuai Li, Andrew Ren, Greg Shakhnarovich·· 4 小时前AI 评分34

用 No-False-Positives 测试检测视频 Transformer 中的时间概念特征

Detecting Temporal Concepts in Video Transformers via a No-False-Positives Test

AI 导读

研究提出 No-False-Positives(NFP)测试,一种对统计特异性给出形式化保证的统计检验,用于识别视频模型中编码物体运动等时间概念的特征。将该测试用于 VideoMAE、V-JEPA2 和 TimeSformer 的表示时,三个模型均检出时间特征,而 DINOv2 图像编码器未检出。对时间 SAE 特征的干预在各模型上结果不一,未必优于非时间特征基线。

来源:arXiv cs.CV · arxiv.org