DeepMind一名安全研究员辞职去了METR,理由是概率高得吓人

AI资讯32分钟前发布 tindall
2.4K 0

乔希·恩格尔斯从谷歌 DeepMind 的通用人工智能安全团队离职,去了 METR——一家独立的 AI 评估机构。

他给的离职理由是一句概率判断:未来五年内 AI 系统造成巨大危害的概率”高得吓人”。他在 X 上补充说,自己非常喜欢在 DeepMind 的工作,也拒绝过 Anthropic 和 OpenAI 的邀约,最终还是选择了在这个时间点离开,因为他认为现在最缺的是”给 AI 研发速度踩刹车的人”。

拒过两家前沿实验室的 offer 之后去一家评估机构,这个选择本身比他说的话信息量更大。

METR 做的事是第三方评估——在模型发布前测它的危险能力,比如自主复制、规避监督、协助研发武器。这类工作的价值完全取决于独立性,一旦评估方拿了被评估方的钱,结论就没人信了。人才从实验室流向评估机构,对这个生态来说是好事。

时间点上,这事跟阿莫代伊那封呼吁放缓的公开信撞在同一周。信里的核心主张是把能力提升的速度降下来,给安全对齐留时间;恩格尔斯的行动是同一个判断的个人版本。

行业里这类流动还很稀疏。一个人的去向说明不了趋势,但值得记下这个坐标。

© 版权声明

相关文章

DeepMind一名安全研究员辞职去了METR,理由是概率高得吓人 暂无评论

none
暂无评论...