点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:人工智能:如何握好这把“双刃剑”
首页> 科技频道> 综合新闻 > 正文

人工智能:如何握好这把“双刃剑”

来源:光明日报2025-04-17 09:30

  人工智能正深刻改变世界。但它如一把“双刃剑”,既带来巨大机遇,也引发诸多挑战——在医疗、教育、交通等领域,人工智能提升了效率,改善了生活质量;然而,它也可能冲击就业、侵犯隐私、引发算法偏见等。如何握好这把“双刃剑”,让人工智能真正成为推动人类进步的力量。

  当下的选择决定未来的走向。本期我们邀请两位专家,共同探讨如何避免风险,引导技术向善。

  人工智能技术无疑是新一轮科技革命和产业变革的先导。其中,强调价值对齐、能够自主定义并完成无限任务的通用人工智能,更是新质生产力的典型代表,已经成为全球科技战略制高点。但另一方面,由于大模型等人工智能技术具有“黑箱属性”,导致其决策行为不能被完全透明解释,它的生成内容也不能被完全预判控制,当这样的人工智能技术应用部署在国家社会经济生活中的方方面面时,就可能会出现偏离人类预期甚至危害国家安全和人类整体利益的巨大风险。

  1、在国家层面,人工智能技术正在重构国家安全治理的格局

  我国已将人工智能安全纳入国家战略,并上升至总体国家安全观的重要组成部分。这是因为,人工智能技术的迅猛发展正在重构国家安全治理的格局,其中部分风险突破了传统技术伦理范畴,形成系统性、多维度的威胁。

  以当下热度最高的生成式大模型为例,我们可以关注到这三类安全危机:

  首先,是技术安全与自主创新的国际挑战。大模型的算力、算法与数据,构成新型国家战略资源,其自主可控性直接关乎国家主权安全。目前,全球算力中心依然集中于少数欧美科技巨头,英伟达的人工智能芯片占据了超过80%国际市场份额。而就在今年1月底,美国国会首次提交了中美人工智能“脱钩”的法案,一旦该法案通过,两国所有人工智能的合作渠道将被截断。

  其次,意识形态与价值伦理的隐性危机。大模型没有价值认知的功能,但开发者的价值观可以渗透到大模型对外输出的文本,构成意识形态方面的安全威胁。比如,一些欧美研发的大模型,其生成的视频、图像表达延续欧美影视文化倾向,以西方艺术审美为主体,却无法识别和“理解”达喀尔建筑等非洲文化造型。众多案例表明,欧美大模型所蕴含的西方中心主义价值观值得我们提高警惕。此外,质量参差不齐的国内自媒体信息、不当抓取的境外网页错误信息、由大模型生成的未经审核的合成数据,都可能会“毒化”AI大模型的训练过程,进而导致输出内容价值观的偏差。繁杂的世界观、人生观、价值观数据弥漫在大模型神经网络的“黑箱”中,导致我们很难分辨出大模型的某些反社会回答(例如“毁灭人类”)究竟是出自语料库,还是根据模型的行为范式学习推理而来。随着大模型广泛应用到各行各业,倘若任由这种不可控的“黑箱”发展下去,我们将很难控制人工智能的价值体系与人类相一致,会造成较大的社会伦理风险。

  再次,制度监管滞后与信息不对称的结构性困境。尽管世界各国已针对人工智能技术带来的安全风险纷纷出台相关法案,但这些法律法规的制定完善一般需要漫长复杂的流程,往往滞后于人工智能新产品的发布更新速度。各国人工智能的发展水平与应用程度不同,政府、企业、高校科研机构、社会大众对动态更新发展的人工智能技术的认知存在不小的信息差,导致国与国之间、社会各行各业之间推出的人工智能治理措施出现大量无效重合和高度冲突。这类信息不对称和统一标准的缺失,对外易制造国际人工智能安全治理的合作争端,对内会使得人工智能监管出现“真空地带”,造成制度叠加的冗余和推行成本的增长。

  2、在社会和个人层面,滥用人工智能技术可能带来劳动秩序重构、混淆视听、诱发心理依赖、认知和学习能力下降等问题

  在社会和个人层面,除了侵犯个人隐私、引发版权纠纷等,滥用人工智能还会造成不少问题:

  社会重新分配,劳动秩序重构。“人工智能+”的落地应用可能会引起“创造性破坏”,也就是普遍担忧的“人工智能代替人类”——普通劳动者的就业机会被人工智能剥夺。国际货币基金组织发布报告称,人工智能预计将对全球近40%的工作岗位产生影响。创造性和技术需求较低工作的从业者都将面临失业或转型的危机,社会劳动分工的结构将经历一场“大洗牌”。

  难辨真假的“网络垃圾”在信息渠道混淆视听。对于自然科学、金融、医学等特定领域的专业问题,诸多大模型没有经过大规模专业语料训练,可能会一本正经“胡编乱造”,制造“模型幻觉”。在缺乏必要监管机制的当下,由大模型生成的大量未经辨认审核的文本与图片流入互联网,在稀释真实信息的同时,还容易让不具备专业知识的大众信以为真。

  过度使用人工智能“角色扮演”功能易诱发心理依赖。经过特定算法和数据库训练的大模型,能够根据用户的指示扮演符合用户情感需求的虚拟角色,与用户交流。如果用户过度沉迷其中、忽略现实交际,则有可能因身心空虚导致极端性后果。这是因为算法不透明性和“黑箱”操控机制形成了信息的“茧房”,使用者被困于AI挑选和过滤后的“信息泡泡”中。算法通过分析我们的信息偏好,利用人类易产生恐惧焦虑的心理机制、利用青少年心智不完全成熟和对某些信息的猎奇心,不断投喂和推荐某类特定信息,加强固有的缺陷和偏好,让人们身陷其中无法自拔,严重时可导致AI成瘾效应。

  过分依赖人工智能进行思考会导致认知和学习能力下降。抖音海外版顾问格雷格·伊森伯格曾提到一名斯坦福大学毕业生,因过度使用ChatGPT,在交谈中经常出现思维中断、言语迟滞的迹象。当认知过程被长期“外包”给人工智能,无论多么优秀的大脑,思考和学习功能都会“用进废退”。不假思索地全盘接受AI生成的“投喂式”内容,会导致本应在教育过程中塑造并形成的信息收集、筛选、处理、应用、创造的批判性思维、逻辑性思维、创新性思维能力的严重退化。

  3、构建人工智能安全治理框架,不仅要涵盖现实中出现的问题,还应从根源入手,避免“头痛医头、脚痛医脚”

  面对人工智能这把“双刃剑”,我们亟须构建完备的人工智能安全治理体系。它不仅要涵盖现实中的问题,还应基于系统化、综合化的人工智能理论,从问题的根源入手,避免“头痛医头、脚痛医脚”的片面化处理。

  加强价值对齐,制定人工智能评级标准。造成人工智能引发的意识形态、价值伦理、信息混乱等问题的根本原因,是生成式大模型缺乏明确的认知架构和价值体系,只能按照人类设定的程序,机械地对问题做出反馈,没能做到与人类价值对齐。为此,需要一套结合人类价值体系和认知架构的人工智能评级标准,作为评定和开发人工智能的科学标尺,辅助科学家打造更加符合人类需求、更加安全的人工智能。

  改进技术,设置防沉迷预警。不仅需要从外部对人工智能设置评级标准,也要从人工智能内部进行分级改造。使用人工智能的社会群体千差万别、需求各有侧重,需要防范的风险也各异。以青少年群体为例,我们应该着重研发辅助课堂学习、引导兴趣爱好的人工智能,让其成为有利于青少年成长的助手与“伙伴”。同时,为防止青少年过度沉迷,应在系统中编入使用时长、特定功能分区的限制,并出具生动详细的使用教程和预警声明,保障青少年的身心健康。

  预测就业替代风险,加强人工智能职业培训。如何避免人工智能替代人类,不仅需要劳动者个人顺应时代风向、积极主动实现自我提升,还需要政府部门和企事业单位制定保护劳动者、协调人机关系的就业保障机制。在部署“人工智能+”行动时,可以要求企业在应用人工智能的同时,在算法中预置就业考量,实现向善的人工智能伦理规则。企业则应做好就业伦理合规,不应追求用技术完全替代人,而是追求如何用技术赋能生产效率、优化体验。此外,在进行就业前置性布局的时候,也应当为可能被替代职业或工种的从业者安排相关的技能培训,增加他们在新环境下的就业机会。

  构建平等开放的国际人工智能安全秩序。防范人工智能安全风险是全世界共同面临的课题,并不是某一国、某一地区的特权或义务。目前,发达国家总体上掌握着比发展中国家更先进的人工智能技术,后者往往因此失去了在国际舞台上的话语权,并缺乏防范和化解人工智能风险的意识。

  需要强调的是,理解与防范人工智能安全风险的目的,并不是要让大家畏惧、否定科技的进步,而是希望大家具备理性审视和应对潜在风险的能力,学会在人工智能的浪潮中保持清醒的头脑,掌握驾驭人工智能的主动权。让我们在享受智能时代红利的同时,确保自身和社会的安全稳定,实现科技向善、人机和谐共生的美好愿景!

  (作者:宋国杰,系北京大学智能学院党委副书记、长聘副教授)

[ 责编:宋雅娟 ]
阅读剩余全文()

相关阅读

您此时的心情

光明云投
新闻表情排行 日/周
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 河北抚宁:燕山脚下苹果香

  • 四川广元:唐家河秋日彩林正当时

独家策划

推荐阅读
记者詹媛29日从中国汽车工程学会了解到,该学会日前发布了《2027年度中国汽车十大技术趋势》。这份凝聚共识的行业“风向标”提示,明年,汽车的电池会更强、芯片更自主、“硬科技”使用更多,且能减少堵车。
2026-10-30 09:51
如果说户外运动项目是产业发展的根系,选对项目之后还要让它根往深里扎,让项目发展的更有质量。户外运动产业的高质量发展,体现于一个个鲜活的户外运动项目及项目产业的健康成长,根深方能叶茂,户外运动产业才能行稳致远。
2026-10-30 09:49
生态环境部29日公布的全国地表水环境质量状况显示,今年1月至9月,全国地表水Ⅰ至Ⅲ类水质比例为86.1%,同比上升1.7个百分点;劣Ⅴ类水质比例为0.8%,同比下降0.4个百分点。
2026-10-30 09:50
脑膜边界的免疫细胞还会“监控”蛋白清除过程,并促成免疫耐受反应,避免免疫系统误伤大脑自身组织。在正常生理状态下,这一多通路清除系统与蛋白生成之间保持动态平衡。在此背景下,恢复或增强脑内蛋白清除通路的功能成为值得关注的方向。
2026-10-30 09:59
深秋的陕北,天高云淡。记者走进陕西省榆林市佳县方塌镇圪崂湾村现代农业示范园,联排的大棚在黄土高原的沟峁间依次排开。棚内葡萄藤上挂满沉甸甸的果实,工人们正忙着采摘、分选、打包。
2026-10-30 09:56
北京大学地球与空间科学学院教授江大勇领衔的三叠纪国际合作研究团队与贵州省地质博物馆合作,在贵州关岭三叠纪晚期地层中发现两栖类新物种海异螈。
2026-10-30 09:50
“数字乡村是乡村振兴的战略方向,是建设网络强国、农业强国的重要内容。”中国工程院院士、国家农业信息化工程技术研究中心主任赵春江表示。“十五五”时期数字乡村怎么建?记者就此采访了相关专家,梳理数字乡村建设的发力方向。
2026-10-29 09:56
突然口角歪斜、一侧肢体无力、说话含混,或眩晕、行走不稳、视物异常,都可能是脑卒中的信号。赵文博提醒,等待症状自行缓解、未拨打120而自行送医、仅凭血压高低判断是否发生卒中,以及忽视不典型症状,都是脑卒中急救的常见误区。
2026-10-29 09:58
在创新决策方面,应发挥企业洞悉市场需求、产业需求的优势,研判未来产业走势,强化关键问题凝练,让企业当好“出题者”。构建以科技领军企业为牵引、大中小企业融通共生的创新生态,打造高水平产业集群,是驱动引领未来产业高质量发展的基石。
2026-10-29 09:52
一边是批量产出的“成果”,一边是说“不”的数学界。这场“冲突”让人不得不追问:数学真正在意的究竟是答案还是过程?一份通过了验证却无人能道出所以然的证明,算不算数学的收获?AI闯入数学,二者之间是取代、叠加,还是互相成全?
2026-10-29 09:51
近年来,不少资源型地区加快转型步伐,因地制宜探索利用型修复新模式,对资源开发中形成的退化土地、废弃矿坑、污染水体展开系统治理。
2026-10-29 09:44
10月26日,国家药监局批准全球首个活化凝血因子XI(FXI)抑制剂阿舒克森片(商品名:舒华博)上市,用于降低缺血性卒中或高风险短暂性脑缺血发作(TIA,又称“小中风”)成人患者的卒中风险,不包括心源性栓塞型卒中患者。
2026-10-28 10:18
超市里的肉,颜色看着挺好,但它真的新鲜吗?答案远非肉眼能及。
2026-10-28 10:05
算法依赖云端数据,也把隐私风险从个人终端延伸到平台和云端,成为无法回避的公共议题。分层定价应遵循公开、可解释的商业逻辑;算法越了解消费者,平台越应以此维护公平、保护隐私。
2026-10-28 09:42
近年来,河北省唐山市丰南区将发展特色农业作为富民兴农重要抓手,大力发展麻山药、白萝卜等特色农作物种植,并推行标准化管理,促进农业增效、农民增收,助力乡村振兴。图为10月26日,唐山市丰南区小集镇的农民在田间收获麻山药。
2026-10-28 09:44
生态文明建设是关系中华民族永续发展的根本大计。我国高度重视生态环境犯罪的立法和司法,使包括环境污染、生态破坏、资源滥用在内的生态环境犯罪罪刑规范不断完善。
2026-10-28 09:43
联合国教科文组织打造技能供给的普惠发展底座,世界技能组织则以世赛为全球性平台,逐级检验多层次培养方式的效度。可以说,世赛既是推动技能普惠发展、标准互认对齐的过程,更是提升技能人才培养质量的有力抓手。
2026-10-27 09:43
在极端天气阻断鸟类天然觅食通道之时,由专业机构实施救助性补饲,是必要的保护措施。从管理实践看,人工投喂行为需要科学评估、分类施策,而我国的制度供给正不断完善。
2026-10-27 09:46
江苏苏州深耕健康城市建设,将健康医疗服务能力水平列入全市高质量发展综合考核,把体教融合、体卫融合、食品安全保障等内容增至健康中国行动重点任务中;新华社发  “北京密云区联合北大第一医院设立了全科医师综合能力培养项目,我是第二批培训学员。
2026-10-27 09:44
10月23日,国家统计局社科文司《中国创新指数研究》课题组发布的2025年中国创新指数测算结果显示:2025年中国创新指数达到185.5(以2015年为100),比2024年增长6.4%,增幅较上年提高1.1个百分点。
2026-10-27 09:53
加载更多