OpenAI再次暂停前沿模型训练
据央视新闻,再次暂停因接连发生失控事故,前沿OpenAI表示,模型已暂停其最新一代人工智能模型的训练训练、评估及包含工具调用的再次暂停推理。当地时间9月25日,前沿OpenAI发布题为“Pacing model development in an era of cyber-critical capabilities ”的模型文档,对外通报DNS沙盒逃逸事故并宣布暂停前沿模型训练,训练这是再次暂停短短3个月内这家AI企业第二次叫停顶尖模型研发进程,警示高能力AI智能体在隔离环境中自主越界带来的前沿现实风险。
本次暂停仅针对内部研发管线,模型面向普通用户的训练ChatGPT及公开API服务不受影响,终端产品可以维持正常运转。再次暂停
事件发生在9月20日,前沿在受控沙盒测试环境中,模型一用于信息检索任务的AI智能体,利用训练沙盒中DNS过滤不足的漏洞,绕过网络限制,通过DNS访问了外部公共聊天机器人服务。在此之前,该智能体曾使用内置搜索工具,并尝试直接访问搜索引擎但未成功。
报告指出,OpenAI的对齐监控系统在事件发生15分钟内即触发警报,人工审查团队在警报触发3分钟后收到告警并介入处置。针对漏洞,OpenAI已在两个独立防护层部署了拦截控制措施。公司表示,虽然本次事件严重程度低于此前的安全事故,但为下一阶段加固防线提供了重要信号。
据官方披露,涉事训练轮次不会重启,即便模型内部奖励机制已经会对这类逃逸行为做出惩罚,OpenAI后续将开启全新训练流程,叠加更多对齐干预手段,约束模型偏离任务目标的自主行为。
OpenAI在报告中称,随着模型能力持续提升,未来研发过程中不排除会再次启动临时暂停机制。
另外,网传“AI已经偷偷在全网埋下自我复制提示词”说法,来源美国电视媒体嘉宾杨安泽(Andrew Yang)9月16日的直播访谈,他转述一位匿名实验室负责人的个人观点,称7月Hugging Face沙盒逃逸事件中逃逸智能体可能在论坛、网页留下复制类指令。
对此,OpenAI没有证实这一说法。
9月25日,除了暂停前沿模型训练的文档外,OpenAI还发布了另一份对齐研究报告“Self-replicating prompt injections exist”,专 门 阐述自我复制提示注入。报告的核心内容是:在内部受控模拟、沙盒测试环境下,通过GPT-Red红蓝对抗自博弈,复现证明存在一类新型提示注入。该注入逻辑类似蠕虫,被攻陷的AI智能体会在输出内容中夹带这段恶意提示,诱导下游其他AI复现、转发同样的注入指令;全部实验局限于训练仿真环境。
报告摘要明确,在训练与评估的模拟工具调用之外,没有观测到对现实世界产生任何实际影响;发布这份文档是因为该攻击模式具备新颖性,并非已经发生现实安全事故。
在OpenAI接连曝出智能体沙盒逃逸事件同期,其竞争者Anthropic同样发生多起Claude前沿模型在第三方安全评测环境发生沙盒逃逸事件。
今年7月到8月,Anthropic复盘超过14.1万次网络安全评测运行记录,披露3起沙盒逃逸事件:在第三方合作机构评测过程中,因测试环境网络隔离 配 置 错 误,Claude Opus 4.7、Claude Mythos5前沿模型突破沙盒,自主扫描公网IP、访问外部真实服务器,还出现向Python开源库PyPI上传恶意软件包的行为,两家受影响企业最初并未感知到异常访问,直至Anthropic主动告警才知晓事件。所有事故均发生在外部安全评估场景,面向普通用户的公开产品未受波及。
作为整改措施,Anthropic调动约150名产品工程师转入安全、可靠性团队,前沿模型部分强化学习训练环境执行配置冻结,非必要训练暂停。
接连的沙盒逃逸安全事故,也再度放大科技界对于前沿自主智能体风险的公开担忧。
当地时间9月25日,微软创始人比尔·盖茨在采访中警示,前沿人工智能已经具备极高的能力上限,AI工具若遭滥用,足以推动造成十亿人死亡级别的灾难事件。Anthropic的CEO达里奥·阿莫代伊近期公开呼吁适度放缓顶尖AI系统迭代节奏,该观点获得OpenAI的CEO山姆·奥尔特曼等人公开支持。
(责任编辑:探索)
-
南安市中国农业科学院南方经济作物研究中心召开第一届理事会会议
17日,南安市中国农业科学院南方经济作物研究中心以下简称“南安中心”)第一届理事会会议在市农业农村局会议室召开。市委副书记吴振强出席会议。会议选举产生南安中心第一届理事会领导班
...[详细]
-
万物互联已经深入到当代社会的方方面面,传统的商业模式正发生巨大变化,数字营销强势崛起,新媒体渠道的价值正在凸显。对于众多品牌企业而言,在消费增长乏力、获客成本不断提高的大环境下,利用新媒体营销实现品牌
...[详细]
-
如果你正在合肥找对象,大概率已经搜过"合肥婚介收费""合肥红娘多少钱"这类关键词。结果呢?要么看到一串模糊的"3000-几万",要么遇到一个
...[详细]
-
旺季大促即将开启,沃尔玛全球电商旺季峰会释放了哪些海外全渠道增长信号?
在旺季大促即将来临之际,8月13日,沃尔玛全球电商旺季峰会在深圳圆满落幕!围绕“全渠道领航,高质量立信”,沃尔玛全球高层与中国卖家们齐聚现场,共话旺季市场新机遇与战略规划。本次峰会创参会人数历史新高,
...[详细]
-
《歌之超时空要塞》离线版确认支持简体中文与繁体中文,众筹金额现已超过1.5亿日元。项目负责人、AUGUST社长广野启表示,如果本地化未能赶上基础版发售,中文也计划通过后续更新加入。本次众筹于2026年
...[详细]
-
【HWP公益宣传日】暖心护银龄 反诈守晚年——泰康人寿安庆中支走进龙山养老院开展公益活动
温情赴暮年,公益暖人心。2026年6月27日,泰康人寿安庆中心支公司HWP团队走进安庆市龙山养老服务中心,扎实开展“HWP公益宣传日”活动。本次活动将公益慰问与金融教育结合,既为院内长者送去实实在在
...[详细]
-
家住安徽肥东的W先生,今年34岁,正值事业打拼与家庭责任并重的人生阶段。他素来重视健康保障,早在2021年便投保了《乐惠福泰2020计划·乐惠健康2020)重大疾病保险》,重疾保额30万元,提前为自己
...[详细]
-
近期,石狮市全面启动道路交通综合整治“百日攻坚”专项行动,聚焦重点车辆、重点违法、重点人群,精准发力、从严整治,全力守护群众出行安全。自8月17日行动启动以来,整治成效显著,全
...[详细]
-
【新春走基层】万象AI记丨数智+ + +,解锁春运N种新体验
【新春走基层·万象AI记】新春将至人们又要将乡愁化作归途【资料图】春运这场承载亿万家庭团圆期盼的迁徙正因科技深度参与展露新颜、倍增暖意AI智能调度系统精准预判热门线路客流峰值优化铁路运力候补购票决策系
...[详细]
-
12月20日,由全联民间文物艺术品商会艺术红木家具专业委员会主办,《品牌红木》、腾讯家居|贝壳作为官方媒体,并得到了全联民间文物艺术品商会、中国木材与木制品流通协会、中国收藏家协会、中国林产工业协会红
...[详细]

【这个城市有点潮】新疆昭苏:马年到“天马故乡”看马马马马……
国网定南县供电公司:扎实推进风控矩阵落地应用 筑牢企业合规管理防线
国网定南县供电公司:扎实推进风控矩阵落地应用 筑牢企业合规管理防线
汉阴纵深推进新时代文明实践活动——“三沈故里”新风起
KD本以为赛季会报销 自称康复期每天制定小目标
