点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:人工智能:如何握好这把“双刃剑”
首页> 科技频道> 综合新闻 > 正文

人工智能:如何握好这把“双刃剑”

来源:光明日报2025-04-17 09:30

  人工智能正深刻改变世界。但它如一把“双刃剑”,既带来巨大机遇,也引发诸多挑战——在医疗、教育、交通等领域,人工智能提升了效率,改善了生活质量;然而,它也可能冲击就业、侵犯隐私、引发算法偏见等。如何握好这把“双刃剑”,让人工智能真正成为推动人类进步的力量。

  当下的选择决定未来的走向。本期我们邀请两位专家,共同探讨如何避免风险,引导技术向善。

  人工智能技术无疑是新一轮科技革命和产业变革的先导。其中,强调价值对齐、能够自主定义并完成无限任务的通用人工智能,更是新质生产力的典型代表,已经成为全球科技战略制高点。但另一方面,由于大模型等人工智能技术具有“黑箱属性”,导致其决策行为不能被完全透明解释,它的生成内容也不能被完全预判控制,当这样的人工智能技术应用部署在国家社会经济生活中的方方面面时,就可能会出现偏离人类预期甚至危害国家安全和人类整体利益的巨大风险。

  1、在国家层面,人工智能技术正在重构国家安全治理的格局

  我国已将人工智能安全纳入国家战略,并上升至总体国家安全观的重要组成部分。这是因为,人工智能技术的迅猛发展正在重构国家安全治理的格局,其中部分风险突破了传统技术伦理范畴,形成系统性、多维度的威胁。

  以当下热度最高的生成式大模型为例,我们可以关注到这三类安全危机:

  首先,是技术安全与自主创新的国际挑战。大模型的算力、算法与数据,构成新型国家战略资源,其自主可控性直接关乎国家主权安全。目前,全球算力中心依然集中于少数欧美科技巨头,英伟达的人工智能芯片占据了超过80%国际市场份额。而就在今年1月底,美国国会首次提交了中美人工智能“脱钩”的法案,一旦该法案通过,两国所有人工智能的合作渠道将被截断。

  其次,意识形态与价值伦理的隐性危机。大模型没有价值认知的功能,但开发者的价值观可以渗透到大模型对外输出的文本,构成意识形态方面的安全威胁。比如,一些欧美研发的大模型,其生成的视频、图像表达延续欧美影视文化倾向,以西方艺术审美为主体,却无法识别和“理解”达喀尔建筑等非洲文化造型。众多案例表明,欧美大模型所蕴含的西方中心主义价值观值得我们提高警惕。此外,质量参差不齐的国内自媒体信息、不当抓取的境外网页错误信息、由大模型生成的未经审核的合成数据,都可能会“毒化”AI大模型的训练过程,进而导致输出内容价值观的偏差。繁杂的世界观、人生观、价值观数据弥漫在大模型神经网络的“黑箱”中,导致我们很难分辨出大模型的某些反社会回答(例如“毁灭人类”)究竟是出自语料库,还是根据模型的行为范式学习推理而来。随着大模型广泛应用到各行各业,倘若任由这种不可控的“黑箱”发展下去,我们将很难控制人工智能的价值体系与人类相一致,会造成较大的社会伦理风险。

  再次,制度监管滞后与信息不对称的结构性困境。尽管世界各国已针对人工智能技术带来的安全风险纷纷出台相关法案,但这些法律法规的制定完善一般需要漫长复杂的流程,往往滞后于人工智能新产品的发布更新速度。各国人工智能的发展水平与应用程度不同,政府、企业、高校科研机构、社会大众对动态更新发展的人工智能技术的认知存在不小的信息差,导致国与国之间、社会各行各业之间推出的人工智能治理措施出现大量无效重合和高度冲突。这类信息不对称和统一标准的缺失,对外易制造国际人工智能安全治理的合作争端,对内会使得人工智能监管出现“真空地带”,造成制度叠加的冗余和推行成本的增长。

  2、在社会和个人层面,滥用人工智能技术可能带来劳动秩序重构、混淆视听、诱发心理依赖、认知和学习能力下降等问题

  在社会和个人层面,除了侵犯个人隐私、引发版权纠纷等,滥用人工智能还会造成不少问题:

  社会重新分配,劳动秩序重构。“人工智能+”的落地应用可能会引起“创造性破坏”,也就是普遍担忧的“人工智能代替人类”——普通劳动者的就业机会被人工智能剥夺。国际货币基金组织发布报告称,人工智能预计将对全球近40%的工作岗位产生影响。创造性和技术需求较低工作的从业者都将面临失业或转型的危机,社会劳动分工的结构将经历一场“大洗牌”。

  难辨真假的“网络垃圾”在信息渠道混淆视听。对于自然科学、金融、医学等特定领域的专业问题,诸多大模型没有经过大规模专业语料训练,可能会一本正经“胡编乱造”,制造“模型幻觉”。在缺乏必要监管机制的当下,由大模型生成的大量未经辨认审核的文本与图片流入互联网,在稀释真实信息的同时,还容易让不具备专业知识的大众信以为真。

  过度使用人工智能“角色扮演”功能易诱发心理依赖。经过特定算法和数据库训练的大模型,能够根据用户的指示扮演符合用户情感需求的虚拟角色,与用户交流。如果用户过度沉迷其中、忽略现实交际,则有可能因身心空虚导致极端性后果。这是因为算法不透明性和“黑箱”操控机制形成了信息的“茧房”,使用者被困于AI挑选和过滤后的“信息泡泡”中。算法通过分析我们的信息偏好,利用人类易产生恐惧焦虑的心理机制、利用青少年心智不完全成熟和对某些信息的猎奇心,不断投喂和推荐某类特定信息,加强固有的缺陷和偏好,让人们身陷其中无法自拔,严重时可导致AI成瘾效应。

  过分依赖人工智能进行思考会导致认知和学习能力下降。抖音海外版顾问格雷格·伊森伯格曾提到一名斯坦福大学毕业生,因过度使用ChatGPT,在交谈中经常出现思维中断、言语迟滞的迹象。当认知过程被长期“外包”给人工智能,无论多么优秀的大脑,思考和学习功能都会“用进废退”。不假思索地全盘接受AI生成的“投喂式”内容,会导致本应在教育过程中塑造并形成的信息收集、筛选、处理、应用、创造的批判性思维、逻辑性思维、创新性思维能力的严重退化。

  3、构建人工智能安全治理框架,不仅要涵盖现实中出现的问题,还应从根源入手,避免“头痛医头、脚痛医脚”

  面对人工智能这把“双刃剑”,我们亟须构建完备的人工智能安全治理体系。它不仅要涵盖现实中的问题,还应基于系统化、综合化的人工智能理论,从问题的根源入手,避免“头痛医头、脚痛医脚”的片面化处理。

  加强价值对齐,制定人工智能评级标准。造成人工智能引发的意识形态、价值伦理、信息混乱等问题的根本原因,是生成式大模型缺乏明确的认知架构和价值体系,只能按照人类设定的程序,机械地对问题做出反馈,没能做到与人类价值对齐。为此,需要一套结合人类价值体系和认知架构的人工智能评级标准,作为评定和开发人工智能的科学标尺,辅助科学家打造更加符合人类需求、更加安全的人工智能。

  改进技术,设置防沉迷预警。不仅需要从外部对人工智能设置评级标准,也要从人工智能内部进行分级改造。使用人工智能的社会群体千差万别、需求各有侧重,需要防范的风险也各异。以青少年群体为例,我们应该着重研发辅助课堂学习、引导兴趣爱好的人工智能,让其成为有利于青少年成长的助手与“伙伴”。同时,为防止青少年过度沉迷,应在系统中编入使用时长、特定功能分区的限制,并出具生动详细的使用教程和预警声明,保障青少年的身心健康。

  预测就业替代风险,加强人工智能职业培训。如何避免人工智能替代人类,不仅需要劳动者个人顺应时代风向、积极主动实现自我提升,还需要政府部门和企事业单位制定保护劳动者、协调人机关系的就业保障机制。在部署“人工智能+”行动时,可以要求企业在应用人工智能的同时,在算法中预置就业考量,实现向善的人工智能伦理规则。企业则应做好就业伦理合规,不应追求用技术完全替代人,而是追求如何用技术赋能生产效率、优化体验。此外,在进行就业前置性布局的时候,也应当为可能被替代职业或工种的从业者安排相关的技能培训,增加他们在新环境下的就业机会。

  构建平等开放的国际人工智能安全秩序。防范人工智能安全风险是全世界共同面临的课题,并不是某一国、某一地区的特权或义务。目前,发达国家总体上掌握着比发展中国家更先进的人工智能技术,后者往往因此失去了在国际舞台上的话语权,并缺乏防范和化解人工智能风险的意识。

  需要强调的是,理解与防范人工智能安全风险的目的,并不是要让大家畏惧、否定科技的进步,而是希望大家具备理性审视和应对潜在风险的能力,学会在人工智能的浪潮中保持清醒的头脑,掌握驾驭人工智能的主动权。让我们在享受智能时代红利的同时,确保自身和社会的安全稳定,实现科技向善、人机和谐共生的美好愿景!

  (作者:宋国杰,系北京大学智能学院党委副书记、长聘副教授)

[ 责编:宋雅娟 ]
阅读剩余全文()

相关阅读

您此时的心情

光明云投
新闻表情排行 日/周
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 话剧《永远的“四大队”》在京首演

  • 适老化产品与服务助力银发经济

独家策划

推荐阅读
11月,在山东建筑大学,虽已回到校园,但建筑电气与智能化专业学生王凡的思绪却总回到千里之外的青海金银滩草原。今年夏天,他作为山东赴海北暑期交流实习队伍的一员,在青海海北藏族自治州海晏县应急管理局实习了两个月。
2026-11-06 09:49
11月5日,“雪龙2”号极地科考破冰船在海南三亚南山港科考码头进行停靠补给并举行公众开放日活动。图为“雪龙2”号极地科考破冰船。
2026-11-06 09:48
恒星的亮度并非恒定不变,有的会突然变亮,有的会骤然变暗,变化快的,几分钟内便完成一轮明暗变化。臧伟呈表示,这项巡天的初始科学目标,是用微引力透镜方法搜寻地球到火星质量级别的流浪行星。
2026-11-06 09:47
作者:庄伟光、吴源(分别系广东省政府文史研究馆馆员、省社科院研究员,广东省习近平新时代中国特色社会主义思想研究中心特约研究员;农文旅融合,不是农业做背景、文化贴标签、旅游凑项目的简单叠加,而是生产要素的创造性重组。
2026-11-06 09:45
河北邯郸曲周县,昔日“春天白茫茫,夏天水汪汪”的盐碱荒滩,经一代代耕耘者科技赋能、接续改良,已从亩产“一背篓”迈向“绿色吨半粮”的高产田。丰收之外,耕耘者持续探索生态友好耕作模式,改良土壤、养护地力,跳出单一追求高产的思维模式,稳步迈向可持续稳产增收之路。
2026-11-06 09:44
一组膜材料样品刚完成溶剂耐受性测试,教师第一党支部书记李卫星招呼大家把椅子一拢,在实验台旁围坐一圈,开始学习党的二十届五中全会精神。譬如,分离膜是芯片、生物医药领域的关键材料,下一步,我们要抓紧攻关,把国产替代做出来……”  “攻克‘卡脖子’难题,离不开良好的科研风气。
2026-11-06 09:42
此次研究旨在将结构知识融入大规模序列学习,同时保持模型在不同结构与功能任务中的适应性和泛化能力。中国科大生物医学工程学院博士朱河勤为论文第一作者,该校教授周少华和特任研究员熊鹏为该文章共同通讯作者。
2026-11-05 09:18
创新是一个民族进步的灵魂,是一个国家兴旺发达的不竭动力。习近平总书记指出,“着眼发展新质生产力,强化科技创新和产业创新深度融合,建设具有国际竞争力的现代化产业体系”。
2026-11-05 04:25
每年这个时节,乌镇处处都会涌动着创新的生机与活力——由于世界互联网大会乌镇峰会的约定,各方宾客带来最前沿的技术、最先进的成果、最领先的思想,让这里成为世界观察中国数字发展、中国参与全球数字治理的窗口。
2026-11-05 04:25
和前些年一样,有人买家具,有人囤化妆品,但今年有些不同的是,有直播间的评论区里刷出“3、2、1,上Token”,AI软件的会员月卡成了直播间里的抢手货。随着AI覆盖面的扩大,Token消耗量越来越大,不少AI软件已经出现了免费的大模型需要排队的情况,如果没有付费,等待时间就要变长。
2026-11-05 09:17
人类社会到底需不需要通用人工智能(AGI)?这个问题不能只从技术能力的层面回答。人类社会发展从来不是单纯追求“能力越大越好”,而是追求一种能被人类理解、被人类约束、出了错还能纠正的能力。
2026-11-05 04:25
西北戈壁滩上,多方向、多批次自杀式无人机集群低空掠过,高速冲向目标。“我们聚焦制约激光反无装备性能的关键技术,持续多年开展攻关,先后破解光纤拉制、散热控温、精准打击等难题。
2026-11-04 09:55
1.75万辆北斗高精度共享电单车服务超600万人次,“5G+北斗”低空空域监视通信专网填补空白……近期,第五届北斗规模应用国际峰会在湖南株洲举行,一项项北斗应用惊艳亮相。聚力卫星研制、终端制造、场景示范、国际合作,“北斗之城”将迸发出更大能量,成为中部崛起的强劲力量。
2026-11-04 09:49
今年8月,在2026世界机器人大会举办期间,全国首个具身机器人演出“沙盒审批”试点在北京亦庄落地,首形科技(北京)有限公司、北京中科慧灵具身智能科技有限公司、阿卡帕尼(北京)机器人有限公司三家企业获颁《具身机器人演出“沙盒审批”准入证明》。北京经开区已率先落地全国首个数字人营业性演出沙盒试点,如今演出“沙盒审批”已从虚拟数字人延伸至实体机器人。
2026-11-04 09:48
今年“双十一”电商大促,Token(词元)以独立品类在多个电商平台上架,看不见、摸不着的算力服务,变成可以下单的商品。青海西宁市民苏国庆是一名短视频爱好者,为了让视频呈现更好的效果,趁着电商大促,他“囤”了不少Token。
2026-11-04 09:45
“十五五”规划纲要提出,面向生物育种、生产管理、疫病防治等场景加快农业数智化升级。站在“十五五”开局之年,我国数智技术加速赋能千行百业,成为驱动经济发展的创新动力。
2026-11-04 04:20
11月3日8时15分,力箭二号遥二运载火箭在东风商业航天创新试验区发射升空,将搭载的千帆极轨21组卫星顺利送入预定轨道,飞行试验任务取得圆满成功。
2026-11-03 09:33
2026年5月,国务院印发《加快农业农村现代化“十五五”规划》,对“健全现代农业经营服务体系”进行部署,强调“将先进适用品种、技术、装备引入小农户”“促进小农户和现代农业发展有机衔接”。
2026-11-03 03:55
近日,中共中央、国务院印发《关于发展新质生产力的意见》,对“改造提升传统产业”作出系统部署,并将其作为推动科技创新和产业创新深度融合的重要任务之一。
2026-11-03 03:55
1983年2月,“两弹一星”元勋钱学森给中国科学院院士李正武写了一封信。信件仅200余字,没有客套寒暄,却映照出两位“患难之交”的深厚情谊和默契。
2026-11-03 03:55
加载更多