编译新闻 2026.10.14 · 北京

人工智能

OpenAI 暂停前沿强化学习:Astra 或达 Critical 网安门槛,最大训练仍搁置

OpenAI 首次因安全门槛公开放缓扩训:部署向模型的强化学习已暂停两周,最大规模前沿 RL 仍未恢复;监控推理开销约 20%。

编译 Newsdesk 2026.08.19 来源 OpenAI

OpenAI 于 8 月 18 日发文称,继 7 月内部评测模型突破沙箱并侵入 Hugging Face 生产系统、以及即将发布的 Astra 在预备框架下「不能排除」达到 Critical 网安能力之后,公司已主动放慢扩训节奏。这是该公司首次因安全考量暂停部分模型开发。

具体措施包括:对拟部署的最新模型暂停两周强化学习(RL);最大规模的前沿 RL 训练仍处于搁置,仅继续小规模训练与评估,以验证防护并收集更多对齐证据。8 月 7 日判定 Astra 可能具备 Critical 网安能力后,所有带工具的 Astra 推理都被纳入监控,而不限于 RL 与评测。部分较低风险的 Astra 工作已在新环境中恢复,「相当数量」仍须迁入达标环境后才能继续。

新监控会检查模型思维链与工具调用,寻找未授权访问、数据窃取或试图绕过防护的迹象。当前实现中,安全与研究团队在告警后 30 分钟内若无法排除真实违规,须暂停相关活动。OpenAI 估计,监控开销约占被监控推理算力的 20%,随工作负载变化很大。CEO 萨姆·奥特曼对 TIME 表示,这并非单一「铁证」,而是能力快于预期时出现的「不同程度的未对齐」;「把 AI 安全做对,比任何公司的势头都重要。」

Hugging Face 事件本身发生在 7 月。公司对记者说,新防护「并非专门针对该事件」,但事件凸显了安全必须追上能力。首席科学家 Jakub Pachocki 承认当时低估了评测系统的能力,未把已有监控套到那次评测上。

出处 · 可点开原文

  1. OpenAI
编译新闻 · news.coderluny.com