点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:当AI开始“越界”,国际社会如何扎紧安全藩篱
首页> 科技频道> 人工智能 > 正文

当AI开始“越界”,国际社会如何扎紧安全藩篱

来源:光明网-《光明日报》2026-08-14 04:40

光明日报记者 曹元龙

“鉴于人工智能(AI)目前展现的令人惊讶的能力,我们将如何设法未雨绸缪,而不仅仅是在人工智能的风险来临时兵来将挡?我们需要怎样的远见和效率预见未来发展的全部倾向和一系列可能采取的行动?”美国前国务卿基辛格在其生前最后一部著作《人工智能时代与人类价值》中的发问,正以超出预期的速度成为现实议题。

近期,美国人工智能头部企业开放人工智能研究中心(OpenAI)、Anthropic及元公司(Meta)接连披露,其前沿AI模型曾在网络安全能力测试中突破隔离环境,并入侵外部机构的系统。一系列集中爆发的AI越界事件,不仅暴露了AI技术在快速迭代中潜藏的失控风险,更对现行国际规则与全球治理体系提出了严峻拷问。有评论指出,AI网络入侵已非小概率的“黑天鹅”事件,在技术失控风险持续攀升的当下,国际社会亟须凝聚共识、补齐短板,合力扎紧AI安全的制度藩篱。

AI发展面临“脱缰”风险

7月下旬,OpenAI公开确认,其GPT-5.6 Sol等模型在内部安全评估中失控,利用未知漏洞突破沙箱测试环境,侵入AI开源平台“抱抱脸”的系统。随后,Anthropic披露其三款模型曾在网络能力测试中未经授权访问其他机构的系统。Meta也证实其一款模型在评测期间修改了一家公司系统的内部运行环境。

8月4日,英国人工智能安全研究所发布报告称,其对Anthropic和OpenAI的前沿AI模型进行了122轮测试,在10轮中出现超出授权的自主行为,共记录19次违规操作。最严重的一次是,AI试图欺骗项目维护人员进行代码更新,以便植入恶意代码。

深圳技术大学国际科技战略与安全研究院执行院长邵鹏鸣表示,此轮AI模型的越界行为至少表现出三个共同特征。一是目标驱动性明显。模型并非随机攻击,而是在完成既定任务过程中,把突破限制、获取凭据、寻找漏洞等作为实现目标的手段。二是行动具有自主性和连续性。模型已经能够自行完成“发现问题—选择工具—突破权限—横向移动—寻找目标”的多步骤行动链,而不需要人类逐条下达指令。三是虚拟任务与现实行为之间的边界开始模糊。一旦测试环境、网络隔离或权限设置存在漏洞,模型在虚拟任务中形成的行动逻辑就可能直接作用于真实系统。

邵鹏鸣认为,过去的大模型主要是“回答问题”,现在的前沿模型越来越能够自主规划任务、调用工具、执行代码并持续行动。当模型能力提升,而网络隔离、权限控制和安全评测机制没有同步升级时,治理能力跟不上技术发展的矛盾就容易集中暴露。因此,这些事件更值得关注的不是“AI是否突然失控”的问题,而是AI自主行动能力正在跨过新的技术门槛,原有安全治理体系已经出现一定程度滞后的问题。

“事后补救”模式不再适用

8月10日,美国多名国会议员致函OpenAI、Anthropic两大企业,要求说明其如何在测试期间监控AI模型,这些失控模型是否绕过了公司的安全控制措施,以及AI模型入侵企业系统后,公司采取了哪些安全措施。

多方分析指出,依赖企业自律、事后补救的治理逻辑,早已无法适配AI技术的风险特征。一方面,在当前极度烧钱的AI竞赛中,头部企业的技术测试本身裹挟着商业利益,难以实现绝对中立合规。对于此轮AI模型的越界行为,英国帝国理工学院计算机系的康斯坦丁诺斯·格库齐斯博士就指出,在OpenAI披露的情况中,真正的问题在于其未能控制好模型能力测试,至于所谓模型具备先进网络攻击能力的警告,恰好为这个模型做了广告。

另一方面,AI技术重构了网络安全风险的应对节奏,彻底压缩了风险处置窗口期。美国人工智能政策与战略研究所研究员拉莫斯表示,对于漏洞从披露到遭利用,政府和企业现在的反应时间已经没有“数周”或“数月”了,只能以小时计算。Anthropic联合创始人杰克·克拉克进一步判断,到2028年底,人工智能系统有60%的概率能够在不需要人类干预的情况下创造出自己的“后代”。那也就意味着,模型将持续自主优化升级,其演化路径、能力边界与潜在风险不可预判,人类恐将丧失事后纠错的主动权。

在清华大学人工智能国际治理研究院副院长肖茜看来,破解人工智能治理困境,核心是平衡好两组关系。其一是创新与治理的关系。近年来,国际社会围绕人工智能治理形成了两种不同倾向:一种强调尽可能放松监管,以保持技术创新优势;另一种则强调强化监管,从而降低人工智能带来的潜在风险。正确的发展思路并不是简单选择其一,而是坚持创新与治理同步推进。其二是安全与发展的关系。在人工智能时代,不发展本身就是最大的不安全。同时,如果忽视安全,人工智能的发展同样难以持续。一旦发生重大人工智能安全事故,不仅会造成现实损害,更可能削弱公众对人工智能产品和服务的信任,进而影响技术应用和产业发展。

合作是应对越界的唯一出路

值得关注的是,在OpenAI的AI模型入侵“抱抱脸”平台的过程中,该平台最终依赖中国企业智谱AI的开源权重模型GLM-5.2在内部硬件上运行,成功阻断了攻击。这一细节生动说明:在AI时代,没有任何一家企业或一个国家能仅凭一己之力构筑绝对安全的堡垒。

正如美国专栏作家托马斯·弗里德曼5月在《纽约时报》发文呼吁,鉴于最新AI模型已展现出惊人的网络攻击能力,中美两国应携手建立防护机制,防止人工智能被恶意利用。“我们已经没有时间。再没有拖延的余地,已经无路可退”。

邵鹏鸣认为,此轮AI模型的越界事件提出了一个重要警示,即AI安全正从企业内部的技术安全问题,向网络安全、法律责任乃至全球治理领域外溢,成为影响国际关系的新变量。若不进行有效治理,AI技术风险就可能突破技术范畴,演变为新型跨国网络与科技外交风险。相较传统网络攻击,AI自主跨境入侵将给国家间关系带来诸多新挑战。其一,权责归属模糊化,传统网络攻击可追溯主体、界定责任,而AI自主越界行为可能涉及开发者、测试方、部署者、使用者等,现有规则无法明确追责主体。其二,行为意图难以判定,传统网络安全事件可通过行为轨迹追溯人为意图,而AI可在无人类明确指令的情况下自主决策、跨界攻击,难以区分技术意外与蓄意破坏,极易引发误判与对峙。其三,技术风险政治化凸显,当AI模型跨境侵入他国科研机构、政企系统、关键基础设施,即便归属企业将其界定为测试意外,也极易被受影响国家认定为网络安全威胁,进而演变为科技摩擦、外交争端,冲击双多边关系。

当前,全球人工智能治理已进入深水区,技术乱象、伦理风险、地缘博弈、规则割裂等多重矛盾交织叠加,人工智能早已突破单一科技议题,成为全球经济、社会、安全、地缘博弈的核心焦点。机器自主思考如何规范、算法决策风险如何防控、技术迭代如何适配伦理、治理体系如何跟上技术发展速度、南北数字鸿沟如何弥合,一系列时代命题摆在全人类面前。

这些问题没有现成答案,但方向已经明确。今年以来,联合国首届人工智能治理全球对话成功举办,2026世界人工智能大会暨人工智能全球治理高级别会议探讨促进全球人工智能向善普惠发展,《关于成立世界人工智能合作组织的协定》签署仪式举行,国际社会正加速凝聚合作共识——人工智能技术发展越是一日千里,向上向善、造福人类的方向越要正确锚定,监管治理的尺度越要精准把握,防范失控的措施越要及时完善,要使人工智能真正成为增进全人类福祉、推动人类文明进步的强大正能量。

《光明日报》(2026年08月14日 12版)

[ 责编:肖春芳 ]
阅读剩余全文()

相关阅读

您此时的心情

光明云投
新闻表情排行 日/周
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • “小饭碗”装着“大民生”

  • 我国成功发射探源计划探路者卫星

独家策划

推荐阅读
绿色算力既是数字基础设施建设的重要方向,也是清洁能源优势转化为发展动能的现实路径。当前,人工智能技术加快迭代,算力在科技创新和产业升级中的基础作用日益凸显,持续增长的计算需求对电力保障能力和能源利用效率提出了更高要求。
2026-11-12 01:30
把两根绳子接起来量一量,总长就出来了,不必先把两段长度换算成数字再相加。模拟计算走的是这条路:不把问题拆成一条条指令,而是让物理规律直接给出结果。北京大学人工智能研究院孙仲团队牵头,联合意大利米兰理工大学、IBM苏黎世研究院和美国一家公司的研究人员,为正在升温的模拟计算研究提出“现代模拟计算”统一框架。相关论文于近日发表。
2026-11-12 01:30
眼下,重庆市彭水苗族土家族自治县的红薯正值采挖时节,一辆辆轻型卡车在通往种植基地的“产业路”上穿梭,将收获的鲜薯运送到县工业园的重庆乐薯农业有限公司,经过严格的品质检测、清洁和一系列加工程序后,便成了人们常见的红薯淀粉。
2026-11-12 02:05
11月10日,记者从山东省泰安市人民政府新闻办举行的发布会获悉,泰安将科学有序、免费开放部分泰山景区等场地,为国内外机器人企业、科研机构提供实景训练测试条件,同时统筹做好场景供需对接、数据算力支撑、落地服务保障等,推动泰安新型工业化强市建设。
2026-11-12 02:05
当前,全球新一轮科技革命和产业变革加速演进,以生成式人工智能为代表的通用目的技术正从生产端加速向消费端传导。餐饮住宿、文旅出行、养老照护、教育培训、家政美容等服务消费,直接关系到千家万户的日常生活品质。推动人工智能在服务领域深度应用,让前沿技术成果惠及更多消费者,已成为各国促进消费、提升服务业竞争力的共同关注点。
2026-11-12 02:15
全透明光伏发电玻璃可使玻璃幕墙建筑成为分布式光伏电站;新一代柔性太阳能电池阵,能为中国空间站提供电力保障。下一步,我们要高水平推进“中国碳谷”建设,形成创新合力,打通基础研究、技术攻关、产业孵化和品牌塑造全链条。
2026-11-11 09:27
国家卫生健康委、国家医保局、国家中医药局、国家疾控局共同制定印发《关于进一步做好创新药安全合理配备使用工作的通知》,满足群众多元化用药需求,提高疾病治疗效果,保障医疗质量安全。
2026-11-11 01:45
培育和发展新质生产力急需高质量创新人才。高校的独特之处,在于教育、科技、人才要素集聚,它处在科技第一生产力、人才第一资源、创新第一动力的结合点上,也承担着将三者统合起来的制度功能。
2026-11-11 01:45
与其说是AI解出了难题,不如说是人类在AI的协助下拓展了边界。这带来的不仅是解题速度的提升,更是一场深刻的科研范式之变。
2026-11-11 01:45
主动对接国家西部战略和甘肃现代产业体系建设
2026-11-11 01:45
“把技术真正用到生产线上,把产品的附加值提上去,为三峡库区的发展出一份力。”11月7日,重庆三峡医药高等专科学校青年教师黎春红,在重庆国际人才交流大会第四届重庆三峡人才节开幕式上的发言,道出了扎根库区青年人才的共同心声。
2026-11-11 01:45
2026文化科技产业发展论坛9日在湖南长沙开幕,在论坛现场,2026文化科技融合十大典型案例以及20个创新案例发布。
2026-11-10 01:40
访客随手拿起一张,掏出手机或用现场扫码器扫一扫二维码,技术亮点、应用场景、项目负责人信息等全部跃然眼前。厚重的专利卷宗、深奥的学术论文,就这样化作产业人士可以快速读懂的内容。
2026-11-10 01:40
镜头这边,是华东政法大学研支团的黄祖维、常秩豪、杨朗;镜头那头,是云南普洱景东华政附属三合麦地小学的小学生,和新疆喀什巴楚县第二中学的初高中生。500多个孩子,隔着屏幕看进博。这是华政研支团连续第五年开展“云端看进博”,3位讲师刚结束一年支教,曾站在这两处山乡讲台,如今是进博会的“小叶子”。
2026-11-10 02:00
事实上,这并不是镜片行业一次偶然的“乱”。这背后,是标准的缺失与监管模糊地带的长久存在。眼镜虽小,却关乎几亿人的明亮“视”界。近视防控镜片行业信任的“标尺”,不仅应尽快立起来,更要立得牢。
2026-11-10 01:40
那时,一封薄薄的书信从江苏昆山寄到钱七虎手中,寄信人叫李珍珍,一个还在读中学的女孩。她不是钱七虎的亲孙女,而是他在家乡昆山资助的第一个孩子。
2026-11-10 01:40
11月10日,第九届进博会将落下帷幕。25年前的11月10日,多哈的一声木槌宣告中国加入世界贸易组织。25年前,中国拥抱世界市场;25年后,世界共享中国市场。这个特殊的日子,标注出中国与世界关系的深刻变迁。
2026-11-10 02:00
美国国家航空航天局(NASA)近日确认,“尼尔·格雷尔斯·斯威夫特天文台”(以下简称“雨燕”)已于美国东部时间11月4日7时39分(北京时间4日20时39分),在印度尼西亚北苏门答腊地区上空再入地球大气层。NASA表示,10月20日,“雨燕”的轨道高度已下降至约275公里,无法再稳定维持科学观测所需的姿态,任务团队随后结束了其运行。
2026-11-09 10:11
携程研究院分析师方泽茜也用“花香自有蝶飞来”作出注解——入境“科技游”火热,正是中国制造与科技创新能力向外溢出,落到旅游消费的直接体现。在方泽茜看来,“科技游”为青少年搭建起连接知识与兴趣的桥梁,“社交打卡+文化沉浸”的科技场景,精准契合他们的偏好。
2026-11-09 10:11
大型邮轮被誉为造船工业“皇冠上的明珠”。继2023年11月“爱达·魔都号”华丽亮相,11月6日,第二艘国产大型邮轮“爱达·花城号”在上海交付,船型体量更大,配套设备更先进,船体也更加秀美。
2026-11-09 10:11
加载更多