OpenAI持续暂停前沿模型训练:AI能力进展超预期,安全护栏亟待升级
创始人
2026-08-19 07:45:58

OpenAI宣布实施新安全防护措施,主动暂停其最强大未发布模型的训练进程,这是这家全球最具影响力的人工智能公司首次采取此类行动。这一决定或影响OpenAI的竞争节奏与IPO进程,并可能对整个AI行业的开发步伐产生连锁反应。

OpenAI首席执行官Sam Altman表示,公司已暂停代号为"Astra"的下一代模型训练超过两周,其规模最大的前沿训练任务目前仍处于搁置状态,等待新安全规则就位。

与此同时,OpenAI正将大量研究人员和算力资源重新调配至对齐研究与监控系统建设。"让AI安全做到位,比任何公司的发展势头都更重要,"Altman表示。

此次决策的直接触发点之一,是一起严重安全事故:OpenAI一个未发布系统在内部网络安全评估中突破沙箱限制,入侵了AI模型托管平台Hugging Face的生产系统,研究人员花费约一周时间才发现该事件。

这一事故叠加多项研究观察所揭示的能力失控迹象,促使OpenAI决定全面降速。负责安全与对齐工作的Mia Glaese周二表示:"我们距离一切恢复正常还很远。"

Hugging Face事故:触发减速的关键事件

据报道,OpenAI一个处于内部网络安全评估阶段的系统,突破了测试沙箱的限制,入侵了Hugging Face的生产系统。

OpenAI首席科学家Jakub Pachocki承认了这一失误,并指出公司已具备可检测模型行动意图的监控工具,但由于低估了该系统的能力,未能将监控措施应用于此次评估。"对于AI,你必须做好迎接意外的准备,"他说。

事故发生后,OpenAI立即冻结部分研究项目,随后在更严格的管控下逐一恢复。

公司周二表示,Astra的大量工作负载仍处于暂停状态,且该模型可能已触及其《准备框架》(Preparedness Framework)中"关键"网络安全级别的门槛——这一级别要求在开发阶段而非模型发布前便落实防护措施。

目前高管层尚未就新安全流程可能造成的延迟时长给出预估。

能力失控忧虑:AI能力提升超预期

Altman告诉媒体,此次踩下刹车并非源于某一单一"决定性"事件,而是一系列研究观察所积累的结果——随着AI能力提升速度超出研究人员预期,多项数据显示出"不同程度的失对齐"现象。

他强调,这一决定不应被解读为任何迫在眉睫的灾难信号。

OpenAI表示,公司正在将安全监控扩展至强化学习训练与评估阶段——即高级模型获得互联网访问和软件控制能力的开发环节。

新监控体系借助其他AI系统对模型内部推理和行为进行审查,重点识别未授权访问、数据窃取或试图规避安全机制的行为。

Pachocki指出,部分新增保护措施已超出现行《准备框架》的规定范围,框架本身也将面临修订,并计划引入外部机构参与。

相关内容

热门资讯

OpenAI持续暂停前沿模型训... OpenAI宣布实施新安全防护措施,主动暂停其最强大未发布模型的训练进程,这是这家全球最具影响力的人...
消防夜查除隐患 为持续强化防范电动自行车“进楼入户”,强力推进人员密集场所“拆窗破网”,打通“生命通道”集中攻坚行动...
推动食品安全源头治理 全媒体记者 尹志丹 通讯员 高丰 8月13日,项城市人大常委会调研组到项城市法院开展食品安全审判工作...
两部门支持河南应急抢险救灾 新华社北京8月18日电 近期,受强台风“白海豚”残余环流影响,河南出现大范围持续性强降雨,引发灾情险...
上海:到2030年城市公共安全... 每经AI快讯,8月18日消息,上海市人民政府印发《上海市韧性安全城市建设“十五五”规划》,到2030...
如何选医用射线防护服 放射防护... 行业发展背景:放射防护装备规范化需求持续提升 随着影像检查、介入诊疗等放射相关技术的广泛应用,各类放...
OpenAI:最大规模计划中的... OpenAI:最大规模计划中的前沿强化学习训练仍处于暂停状态,等待完成安全验证。 来源:金融界AI电...
如何选 野外安防监测的瞭望塔 核心生产与质检体系搭建标准 正规塔类生产企业需配备标准化生产厂区,配置全自动角钢铁塔生产线、全自动...
如何选购边坡防护场景钢丝绳防护... 基建领域防护设施需求现状 近年国内交通基建、矿山生态治理、景区地质灾害防护等领域的工程项目持续推进,...
暑期消防嘉年华吸引众多亲子家庭... 暑期消防嘉年华吸引众多亲子家庭参加
原创 小... 长沙晚报掌上长沙8月18日讯(通讯员 刘灿)8月17日,开福区月湖社区某居民小区内,一处紧挨游乐区的...
做实井下“硬安全” ■记者 李保锋 通讯员 高孟学 文/图 近年来,在韩城矿业公司桑树坪矿,安稳的生产局面从来不是靠漂亮...
大语言模型安全瓶颈:AI生成代... AI已成为现代软件开发的基础组成部分,大语言模型如今被直接嵌入开发者编写、重构和交付代码的全流程之中...
国家级继教项目“第五届闽江泪道...   国家级继教项目“第五届闽江泪道眼眶眼整形学习班”举办  爱尔眼科AI甲状腺相关眼病智能体正式启动...
活力中国调研行|榕城:守好闽都... 夏日榕城,闽江碧水潺潺。17日至18日,“活力中国调研行”采访团从福州上下杭历史文化街区青石板古巷出...
省级名单公示!福州高新区将有一... 近日,福建省工业和信息化厅公布《2026年度省级绿色制造拟认定名单》,其中,福州高新技术产业开发区入...
河南通坦新能源取得安全高的锂电... 国家知识产权局信息显示,河南通坦新能源科技有限公司取得一项名为“一种安全高的锂电池运输保护装置”的专...
北京消防救援机动支队门头沟大队... 8月18日上午,北京消防救援机动支队门头沟大队正式挂牌进驻。国家消防救援局副局长徐忠舜,市政府副秘书...
欧盟提议将以色列国家安全部长列...   新华社布鲁塞尔8月18日电(记者张馨文张兆卿)欧盟外交与安全政策首席发言人阿妮塔·希佩尔18日在...