AGI Hunt· micoolcho·· 5 小时前AI 评分37
学界提议用「挑战赛+共享评测」取代灌水会议论文
AI 导读
针对 AI 论文灌水问题,phamblnh 提议用围绕大挑战的挑战赛取代会议收论文,所有投稿共用一套共享评测,并可能由社区共同出资出评测。挑战沿用历史挑战与奖金机制,胜出论文就是「在所有人的评测上赢」的那篇;若社区连挑战本身都达不成共识,这个问题也许就不该解。会议挑战赛组织者 micoolcho 表示认同,认为这类挑战本质是真实世界的 eval。
来源:AGI Hunt · agihunt.info