AGI Hunt· jd_pressman·· 3 小时前AI 评分28
jd_pressman:对齐基本问题众所周知,却几乎没人在认真解决 Goodhart
jd_pressman:对齐基础问题众所周知,却几乎没人在认真解决 Goodhart
AI 导读
jd_pressman 在 X 上与 enormochungus、koreindian 讨论时表示,对齐领域的基本问题其实已经清楚,却几乎没人在直接解决,更糟的是没人在意。他希望看到针对 RL 过程中各种 Goodhart 形态的实用干预手段。enormochungus 则较悲观,认为除以往的 emergent misalignment 结果外,乐观只能来自零散反证证据的缓慢积累。
来源:AGI Hunt · agihunt.info