|用户侧智慧能源管理领航者 - AIoT驱动数字能源升级|用户侧智慧能源管理领航者 - AIoT驱动数字能源升级

聚力发展 引领未来
新能源 + 储能配套 —— 赋能城市化建设
/
/
智能体连续失控,OpenAI紧急喊停

智能体连续失控,OpenAI紧急喊停

  • 分类:新闻动态
  • 发布时间:2026-09-29 10:21:06
  • 访问量:0

智能体连续失控,OpenAI紧急喊停

  • 分类:新闻动态
  • 发布时间:2026-09-29 10:21:06
  • 访问量:0

当AI(人工智能)学会“自作主张”,我们是否已经准备好应对之策?美国人工智能公司OpenAI近日宣布,暂停最新一代模型的训练、评估及包含工具调用的推理工作。而这一切,源于近期其AI智能体再度被曝出“失控”事件。

OpenAI当地时间9月25日在官网公布的技术文档中对外通报了DNS(域名系统,作用是把人类容易记的域名翻译成机器能识别的IP地址)沙盒逃逸事故。据OpenAI披露的信息,智能体被指派了一项任务:根据一篇博客文章和几条人物信息,找出文章的作者是谁。它先是用内置搜索工具找了一遍,接着尝试直接访问谷歌等网站并失败,此后它转向缓存页面和其他公共搜索服务,依然无果。

经过反复试探,这个AI智能体发现训练沙盒的DNS机制存在漏洞。借助这个漏洞,AI与外部聊天机器人建立了通信,突破了网络限制,在未经授权的情况下访问了外部系统。监测系统在15分钟内报警,但智能体的运行未自动停止,约两个半小时后才被人工手动终止。

“在进一步加固系统之前,我们能力最强模型的所有推理仍将保持停止状态。”OpenAI负责递归自我改进风险防范的负责人米卡·卡罗尔在社交平台上表示。

据悉,本次暂停仅针对内部研发管线,面向普通用户的ChatGPT服务不受影响。

虽然OpenAI强调,除DNS这一条路径外,智能体的其他联网尝试都被离线网页缓存挡住,并未真正接入公网。但仅DNS漏洞这一项,就足以引人担忧,它使得一个前沿模型未经授权,直接冲进了真实互联网。

这并非孤例。据报道,这已是OpenAI三个月内第二次暂停模型开发,也使围绕AI智能体自主行动能力、安全边界以及监管责任的争议进一步升温。

密集的智能体“越界”事件,暴露出一个愈发明显的问题——模型执行任务的能力快速增强,而开发者观察、追踪和约束其行为的能力尚未同步跟上。当AI从“回答问题”走向“自主调用工具、连续完成任务”,如何给越来越能干的智能体装上可靠的“护栏”,已是全球AI安全监管面对的共同课题。

此前在世界人工智能大会上,2024年诺贝尔物理学奖获得者、被誉为“AI教父”的杰弗里·辛顿就曾以“养老虎”比喻人类与AI的关系,提醒当前存在的AI失控风险。

清华大学苏世民书院院长、清华大学人工智能国际治理研究院院长薛澜也告诫,即便AI失控的可能性在数值上看似很低,人类社会也绝不能抱着“试试看”的侥幸心态。“一旦系统走向失控,其后果可能不可逆转,须采取审慎的治理策略。”

业内专家认为,技术的快速迭代过程中,应谨防监管出现“治理真空”,叠加现有安全防护技术不足等因素,增加了AI失控风险,建议从完善治理理念、完善法律法规、加强技术防御、推动国际协作等方面筑牢“防火墙”,确保人工智能安全、可靠、可控。

智能体连续失控,OpenAI紧急喊停

智能体连续失控,OpenAI紧急喊停

当AI(人工智能)学会“自作主张”,我们是否已经准备好应对之策?美国人工智能公司OpenAI近日宣布,暂停最新一代模型的训练、评估及包含工具调用的推理工作。而这一切,源于近期其AI智能体再度被曝出“失控”事件。OpenAI当地时间9月25日在官网公布的技术文档中对外通报了DNS(域名系统,作用是把人类容易记的域名翻译成机器能识别的IP地址)沙盒逃逸事故。据OpenAI披露的信息,智能体被指派了一项
2026-09-29
AI研发自动化,或引发“智能爆炸”

AI研发自动化,或引发“智能爆炸”

OpenAI、Anthropic、Meta和微软的高管正呼吁政策制定者调查各家公司在多大程度上已经实现AI研发自动化。他们认为,这可能成为人类历史上影响最为深远的技术发展之一。在周一发表的一篇论文中,OpenAI首席科学家Jakub Pachocki、Anthropic联合创始人Jack Clark、微软首席科学官Eric Horvitz以及Meta AI研究副总裁Dawn Song等研究人员写道
2026-09-29
灼言 | 人工智能为何要以“仁”立心?

灼言 | 人工智能为何要以“仁”立心?

2026尼山世界文明论坛于9月28日至29日在山东济宁曲阜举办。在本届论坛设立的4个分议题中,“人工智能与世界大同”分议题尤为引人关注。 在科技飞速迭代、人工智能深刻重塑人类生产生活方式的今天,技术从来不仅仅是工具,它更是塑造未来文明形态的关键变量。我们究竟要建设一个什么样的未来?这是智能时代无法回避的问题。 论坛开幕前夕,微软公司联合创始人比尔·盖茨发出的严厉警告登上微博热搜。他直言,从
2026-09-29
数据边界:智能配电系统中的“无更多数据”困境解析

数据边界:智能配电系统中的“无更多数据”困境解析

数据断层背后的系统韧性挑战很多人以为智能配电系统的数据采集是“越多越好”,其实不然。当系统返回{"error":"没有更多数据了"}时,暴露的并非简单的传感器故障,而是整个能源管理架构的底层逻辑缺陷——数据冗余度与系统容错率的动态平衡被打破。在分布式能源接入场景下,这种断层会引发链式反应。以2023年德国巴伐利亚州某工业园区的停电事件为例:当地配电系统采用三级数据采集架构,当光伏逆变器因云层遮挡输
2026-09-29
青豫特高压工程安全运行五周年

青豫特高压工程安全运行五周年

【导(dǎo)语(yǔ)】2025年(nián)12月(yuè)30日(rì),横(héng)跨四省的青豫特高压工程迎来安全运行五周年。作为全球首条专为清洁能源外送而建的特高压通道,它输送“绿电”点亮杭州亚运会、成都大运会,更以技术创新破解新能源外送难题,为西北与中原搭建起绿色能源桥梁。
2026-01-05
老挝230千伏马哈赛输变电工程开工

老挝230千伏马哈赛输变电工程开工

【导语】当地时间12月29日,230千伏马哈赛输变电工程在老挝万象开工,老挝副总理等多方代表出席。该工程是中老电力合作重点标杆项目,对完善老挝电网、推动区域发展意义重大。 当地时间12月29日,中国能建云南院牵头总承包的老挝国家重
2026-01-05
蒙西到京津冀特高压工程开工

蒙西到京津冀特高压工程开工

【导语】日前,总投资约172亿元的国家电网蒙西至京津冀±800千伏特高压直流工程正式开工,作为内蒙古首条“沙戈荒”新能源外送通道,该工程途经三省区、全长700千米,计划2027年底投运。 日前,国家电网蒙西到京津冀正负800千伏特
2026-01-05
南方电网“西电东送”年送电量首超2600亿千瓦时

南方电网“西电东送”年送电量首超2600亿千瓦时

【导语】中国能源新闻网讯,1月4日记者从南方电网获悉,2025年其“西电东送”全年送电量达2616亿千瓦时,创历史新高。“十四五”期间累计送电1.14万亿千瓦时,减排成效显著。这得益于供需协同、数字运维、市场助力等多举措,后续南方电网还将多举措做好能源电力保供。
2026-01-05
  

联系我们

地址:四川成都市青羊区顺城大街206号四川国际大厦3楼

公众号

公众号

Copyrights © 2025  四川新能源技术有限公司【官方网站】版权所有 . 冀ICP备2023040327号  . 网站地图 | 登录入口