arXiv cs.CL· Faiz Ghifari Haznitrama, Afrizal Hasbi Azizy, Faeyza Rishad Ardi·· 4 小时前AI 评分53
大规模因子分析显示语言模型的机器智能仅部分可解释
Large-scale factor analysis shows machine intelligence is only partially interpretable
AI 导读
一项对13,251条已发布评测分数的大规模因子分析显示,通用智能因子在最宽松估计下仅解释70.8%的语言模型性能方差,多数方案中远低于这一数值。该分析覆盖1,618个语言模型和456个纯文本基准,发现内容相似的基准不一定聚在一起,g 因子也不被任何常见主题主导。作者据此认为,把通用智能当作可定义、可瞄准的实体来推进语言模型开发缺乏支持。
来源:arXiv cs.CL · arxiv.org