跳到正文
原文
TechCrunch · AI· Anthony Ha·· 4 小时前AI 评分55

微软 CEO Satya Nadella 称 AI 模型需要紧急制动

Microsoft’s Satya Nadella says AI models need an ‘emergency brake’

AI 导读

微软 CEO Satya Nadella 周六在 X 发文称,现在应退一步评估 AI 的信任架构,不能把超级智能当成层层嵌套的黑箱来简单接受或拒绝。他提出把模型与编排其工作的 harness 分开、外置控制与防护,为每一次有意义的模型行动留下防篡改的人类可读证据,并确保授权人员能在任务中途暂停或关闭模型。

正文 · AI 翻译

简讯

发布:

2:47 PM PDT · October 10, 2026

Satya Nadella at Microsoft Ignite 2023
图片来源:Dan DeLong
  • Anthony Ha

微软首席执行官 Satya Nadella 是最新一位就如何改进 AI 安全发表长篇见解的科技高管。

在周六上午于 X 发布的一篇帖子中,Nadella 写道,现在是时候“退一步,评估”AI 的“信任架构”了。

“我们不能把 Super Intelligence 当作一组嵌套的黑箱,只是简单地接受或拒绝它的建议、答案和行动,”Nadella 写道,他使用了特朗普政府偏好的 AI 术语。 

正如 Nadella 所概述的,这种方法“意味着将模型与编排其工作的 harness 分离开来”,以及“将控制和保障措施外部化”。他还呼吁用“防篡改的人类可读证据”记录“每一次有意义的模型行动”,并建立始终让“经授权的人”能够“在任务中途暂停或关闭模型”的系统。

“我们必须假设模型已被攻破,并从一开始就对其进行遏制,”他说。“可以把它想象成紧急制动。”

Nadella 的评论发表之际,领先的 AI 公司正承认越来越多它们似乎失去了对自己模型的控制的事件,而这发生在Anthropic 首席执行官 Dario Amodei 发布了一项计划、主张更谨慎地发展 AI 之后。

来源:TechCrunch · AI · techcrunch.com