2026年11月10日
An engineer's hand over a red emergency stop button in a dark control room full of monitors
AI 生成的插图

人工智能

OpenAI公布Control Room:可在35秒内切断研究模型输出的故障关闭系统

11月9日,OpenAI介绍了Control Room,这是一项内部服务,用于追踪其研究基础设施中的每个模型工作负载,并在出现安全问题时将其停止。每个任务都会获得一个ID,推理引擎在响应该任务的任何请求前都要先向Control Room申请许可。一旦任务被标记为停止,任何引擎都不会再为它生成输出,从做出决定到生效最多35秒。

在 OpenAI — Control Room 阅读原文 ↗

AI 摘要 阅读约 2 分钟

为何重要

AI实验室用长时间运行的智能体训练模型,监控系统可能在运行中途发现危险行为。能够可靠、迅速地切断输出,是一项基本的安全控制。OpenAI把检查放在代码路径很少的推理层,而不是放在经常变动、可能有缺陷的研究代码里。

有何变化

对开发者
这一设计值得运行智能体的团队借鉴:为任务分配ID,每次调用模型都按该ID授权,并采用故障关闭方式,让宕机或篡改直接阻断全部推理,而不是任其失控运行。
对企业
OpenAI表示,前沿模型训练任务已在监控和故障关闭模式下运行,其余研究工作负载将在未来几天内覆盖。

来源

由 AI 于 2026年11月10日 根据官方来源摘要。发现错误?请告诉我们。 运作方式