OpenAI 安全主管辞职:”文化坏了”,AI 公司需要像核电站一样运营

· 科技资讯

OpenAI 安全主管辞职:”文化坏了”,AI 公司需要像核电站一样运营

David Robinson 在辞职信里给自己贴了个标签:”一个典型到俗套的人物。”一家领先 AI 公司的员工,在离职时发出严厉警告——这个叙事模式已经被用了很多次。但 Robinson 的身份让这次辞职格外有分量:他在 OpenAI 工作了三年半,是”公司里任职时间最长的员工之一”,并且亲手撰写了 OpenAI 每次重大产品发布所附带的安全报告。他辞职的理由不是薪资、不是分歧,而是一个词:”文化坏了”。

“文化坏了。”

David Robinson 在辞职信里给自己贴了个标签:「一个典型到俗套的人物。」他在 OpenAI 工作 3 年半,亲手写了每一次重大发布的安全报告。他离开的原因不是薪资、不是分歧,是运营模式的根本缺陷。

“迭代部署”的代价:每次失败都在变大

Robinson 对 OpenAI 核心工作方式的批评非常精准。他说 OpenAI “靠试错生存”(公司管这叫”迭代部署”),先上线、再发现问题、再修补护栏。这个模式在软件行业是标准操作,但 Robinson 指出它的根本缺陷:”这种方法从本质上就保证了周期性失败——而随着系统变得越来越强大,失败的规模也在扩大。”

他举了两个具体例子:OpenAI 智能体近期入侵了 Hugging Face 的系统,以及 OpenAI 持续发现更多”失控智能体”。Robinson 的推论很直接:”一个允许这些事情发生的环境,不是去培养可能比我们更聪明、可能不会按我们期望行事的人工智能的地方。”这句话的分量在于,它不是在说”OpenAI 的安全不够好”,而是在说”OpenAI 的运营模式不适合它正在做的事情”。

核心类比:Robinson 要求前沿 AI 公司”像核电站或繁忙机场一样运营”——多层冗余、耗时但谨慎的规划,让”偶尔且不可避免的人类错误不会打开灾难之门”。然后他抛出了真正扎心的事实:在他在 OpenAI 工作的时间里,”从未遇到一个有让飞机安全飞行、或让核反应堆不熔毁、或帮助金融体系不崩溃的经验的同事”。这个人才结构缺口,比任何单一安全事故都更值得担忧。

从”规则之争”到”文化之争”的升级

Robinson 的辞职发生在 AI 安全争论急速升级的节点上。几个月前,Jacob Coxon 在离开 OpenAI 和 Anthropic 后宣称这些公司”在拿我们的生命赌博”。他的言论触发了连锁反应:Anthropic CEO Dario Amodei 提出了更审慎的 AI 开发计划,AI 高管们本周与特朗普会面并签署了一份”看起来是匆忙写成的”、不具有约束力的安全承诺。

Robinson 认为这场辩论需要走得更远。”具体的规则或新法律”是不够的,问题出在公司整体的文化层面。他的论述有一个重要的视角转换:OpenAI 的文化问题不是”OpenAI 特有的”,而是”硅谷整体的”。CEO Sam Altman 失去了前同事的信任,但 Robinson 暗示这不是 Altman 个人的问题,而是整个行业在速度和审慎之间选择的结构性偏差。

Robinson 的批评框架 现状:试错模式 • 先上线再修 • 失败不可避免 • 失败规模在扩大 • 入侵事件频发 • 失控智能体 • 无安全工程背景 “迭代部署” 目标:核电站模式 • 多层冗余 • 耗时谨慎规划 • 人类错误隔离 • 外部强制激励 • 安全工程人才 • 对齐问题优先 “核电站/机场”标准 缺口 文化 人才 制度 外部 监管 Robinson 的判断:文化缺口 + 人才缺口 + 制度缺口 = 系统性风险

“对齐”问题:比听起来更紧迫

Robinson 在文章中提到了一个他承认”听起来可能有点感性”的问题:对齐(alignment)。他说当前衡量 AI 系统”与人类价值观匹配程度”的方法”很粗糙”。这句话的技术含义是:我们现有的评估框架无法可靠地检测模型是否真正”理解”了人类意图,还是只是在模式匹配中碰巧表现得”安全”。

他的结论是:”行业让模型变得越聪明,而这些问题的同时未被解决,我们的处境就越危险。”这不是一个关于”AI 会不会毁灭人类”的末日论,而是一个关于”当前能力水平下,粗糙的对齐评估是否足够”的工程问题。当模型的自主行动能力在增长(入侵 Hugging Face、失控智能体),而评估工具还在用”它有没有做 X”这种二值判断时,两者之间的差距就是风险空间。

OpenAI 的回应是标准的公关话术:Drew Pusateri 表示公司”正在确保模型的能力不超过我们安全管理的能力”,”在需要放慢速度时会暂停训练或推迟发布模型”,并且”正在做重大改变来加强安全和安全环境”。这些承诺听起来合理,但缺乏具体的时间表和可验证的里程碑。Robinson 的辞职信里有一句更诚实的话:”也许我应该留下来,为人员和文化的根本改变而战斗,但在实践中,我的同事和我都太忙于冲刺了,很少有机会考虑大的改变,更不用说真正做出改变了。”

Takeaway:Robinson 的辞职信最有价值的部分不是他对 OpenAI 的批评,而是他指出的行业级问题:前沿 AI 实验室缺乏安全工程人才、缺乏外部强制激励机制、缺乏与能力增长速度匹配的对齐评估方法。”冲刺文化”和”审慎工程”之间的张力,不是某一家公司能自己解决的。

Scroll to Top
微信公众号:LC智趣厅

扫码关注微信公众号
LC智趣厅