前OpenAI安全报告负责人离职发声:AI行业需要核电级防护

曾负责OpenAI模型发布安全报告的David Robinson离职后公开表示,AI行业文化已经“根本性损坏”,并呼吁前沿实验室采用类似核电站的多层安全机制。

曾为OpenAI每一次重要模型发布撰写配套安全报告的David Robinson本周正式辞职,并在《大西洋月刊》发表署名文章,公开批评当前AI行业的文化已经“根本性损坏”。他的离开,为近期不断扩大的AI安全人员离职潮再添一例。

从安全报告撰写者到公开预警者

据The Verge报道,Robinson此前在OpenAI负责撰写伴随每次重大模型发布的安全报告。这类工作通常处于模型公开前的关键审查环节,其职责涉及评估模型能力、潜在风险以及安全控制措施是否到位。

离职后,Robinson并未选择沉默。他在文章中指出,问题并不只是通过增加几条规则或监管措施就能解决。他认为,整个行业长期在一种“极度自信”和“持续冲刺”的状态下运转,科技圈惯有的“快速行动、打破常规”文化,使公司在追求更大、更强模型的过程中,往往低估甚至忽略潜在风险。

Robinson表示,AI公司现在需要培养一种谦逊感,并把目光从封闭、追求速度的科技行业内部移开,借鉴更高风险行业的经验。他尤其提到,面对当前风险,前沿AI实验室应当像核电站或繁忙机场一样运行,建立多层冗余机制,并进行谨慎、耗时的规划,以避免偶然且不可避免的人为错误酿成灾难。

安全团队人员接连离开

Robinson并不是唯一一位公开表达担忧并离开原岗位的安全研究人员。The Verge梳理称,近期已有多位来自头部AI公司的研究者相继离职,并发出不同形式的预警。

  • Jacob Coxon离开Anthropic后公开表示,AI“可能在本十年末杀死我们所有人”。
  • Robert O’Callahan、Bilal Chughtai和Josh Engels来自Google DeepMind,也出现在这轮离职名单中。
  • Anthropic的Joe Benton同样已经离开。

这一连串人员变动显示,AI安全岗位正成为行业内部压力最集中的位置之一。安全研究者既要参与模型能力评估,又要在商业化竞速中承担风险把关职责。当公司持续追求模型迭代速度时,安全团队能否获得足够话语权和资源,正在成为外界观察AI公司治理的重要窗口。

对行业意味着什么

Robinson的批评指向的并非单一公司或单一模型,而是整个前沿AI开发模式。他将当前行业问题概括为“不受阻碍的乐观主义”,认为这种文化会把潜在风险后置,直到问题变得难以收拾。

这一表态之所以受到关注,与其此前岗位有关。作为曾深度参与模型发布安全流程的人,Robinson对内部安全机制如何运作、是否存在薄弱环节,具有比一般外部观察者更直接的了解。因此,他的公开预警也为监管层、投资人和企业客户审视AI公司安全能力提供了新的参考。

目前,OpenAI尚未就Robinson的言论作出回应。随着越来越多安全研究人员离开并公开发声,AI公司如何平衡研发速度与安全治理,已成为行业无法回避的问题。

分类:大模型

原创文章,作者:点点,如若转载,请注明出处:https://www.dian8dian.com/qian-openai-an-quan-bao-gao-fu-ze-ren-li-zhi-fa-sheng-ai

Like (0)
点点的头像点点
Previous 12小时前
Next 2024年9月16日

相关推荐