人工智能安全研究员退出 OpenAI,称其轨迹令她感到担忧

360影视 2024-12-05 16:34 4

摘要:正如她在消息中指出的那样,她的决定是由于公司前通用人工智能(AGI)负责人迈尔斯·布伦戴奇(Miles Brundage)的离职而引发的,迈尔斯·布伦戴奇是她的亲密同事,他的辞职也导致OpenAI 彻底解散了该团队。

由于对 OpenAI 的安全实践和对潜在人类级别 AI 的准备程度存在担忧,另一位 OpenAI 研究人员离开了公司。

OpenAI 安全研究员 Rosie Campbell 在她的个人 Substack 帖子中分享了她几天前在公司 Slack 上发布的宣布辞职的消息。

正如她在消息中指出的那样,她的决定是由于公司前通用人工智能(AGI)负责人迈尔斯·布伦戴奇(Miles Brundage)的离职而引发的,迈尔斯·布伦戴奇是她的亲密同事,他的辞职也导致OpenAI 彻底解散了该团队。

坎贝尔在留言中写道:“在这里工作了近三年半后,我将离开 OpenAI。我一直强烈地被确保 AGI 的安全和有益的使命所驱使,在 [布伦戴奇] 离职和 AGI 准备团队解散后,我相信我可以在外部更有效地追求这一目标。”

虽然她没有过多谈论此事,但这位前 OpenAI 员工表示,她决定离开是因为过去一年左右公司发生的变化让她感到不安。目前尚不清楚她所指的变化具体是什么,但这个时间范围与去年 11 月下旬针对首席执行官兼联合创始人 Sam Altman 的失败政变相吻合。据报道,董事会成员担心公司在 Altman 的领导下缺乏对安全的关注,因此发动了政变。

除了奥尔特曼 在被罢免后复职之外,随着 OpenAI 不断提高的知名度和价值,以及其日益增长的商业重点,过去一年中还有其他几位值得注意的高管辞职。

“虽然发展必然带来变化,但过去一年里发生的一些变化以及许多塑造我们文化的人的离去让我感到不安,”这位研究员写道。“我真诚地希望这个地方对我来说如此特别的原因能够得到加强,而不是削弱。”

坎贝尔继续补充说,她希望她的前同事们记住,公司的“使命不仅仅是‘建立 AGI’”,而且还要继续努力确保它“造福人类”。

她还写道,她希望她的前同事们“能够认真考虑这样一个前景:我们目前的安全方法可能不足以应对我们认为可能在本十年问世的更强大的系统。”

这是一个突出的警告,随着人们越来越担心 AGI 会从根本上改变甚至伤害人类,这一警告变得更加迫切。不幸的是,其他即将离开 OpenAI 的人也表达了同样的看法。

来源:人工智能学家

相关推荐