点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:人工智能:如何握好这把“双刃剑”
首页> 科技频道> 综合新闻 > 正文

人工智能:如何握好这把“双刃剑”

来源:光明日报2025-04-17 09:30

  人工智能正深刻改变世界。但它如一把“双刃剑”,既带来巨大机遇,也引发诸多挑战——在医疗、教育、交通等领域,人工智能提升了效率,改善了生活质量;然而,它也可能冲击就业、侵犯隐私、引发算法偏见等。如何握好这把“双刃剑”,让人工智能真正成为推动人类进步的力量。

  当下的选择决定未来的走向。本期我们邀请两位专家,共同探讨如何避免风险,引导技术向善。

  人工智能技术无疑是新一轮科技革命和产业变革的先导。其中,强调价值对齐、能够自主定义并完成无限任务的通用人工智能,更是新质生产力的典型代表,已经成为全球科技战略制高点。但另一方面,由于大模型等人工智能技术具有“黑箱属性”,导致其决策行为不能被完全透明解释,它的生成内容也不能被完全预判控制,当这样的人工智能技术应用部署在国家社会经济生活中的方方面面时,就可能会出现偏离人类预期甚至危害国家安全和人类整体利益的巨大风险。

  1、在国家层面,人工智能技术正在重构国家安全治理的格局

  我国已将人工智能安全纳入国家战略,并上升至总体国家安全观的重要组成部分。这是因为,人工智能技术的迅猛发展正在重构国家安全治理的格局,其中部分风险突破了传统技术伦理范畴,形成系统性、多维度的威胁。

  以当下热度最高的生成式大模型为例,我们可以关注到这三类安全危机:

  首先,是技术安全与自主创新的国际挑战。大模型的算力、算法与数据,构成新型国家战略资源,其自主可控性直接关乎国家主权安全。目前,全球算力中心依然集中于少数欧美科技巨头,英伟达的人工智能芯片占据了超过80%国际市场份额。而就在今年1月底,美国国会首次提交了中美人工智能“脱钩”的法案,一旦该法案通过,两国所有人工智能的合作渠道将被截断。

  其次,意识形态与价值伦理的隐性危机。大模型没有价值认知的功能,但开发者的价值观可以渗透到大模型对外输出的文本,构成意识形态方面的安全威胁。比如,一些欧美研发的大模型,其生成的视频、图像表达延续欧美影视文化倾向,以西方艺术审美为主体,却无法识别和“理解”达喀尔建筑等非洲文化造型。众多案例表明,欧美大模型所蕴含的西方中心主义价值观值得我们提高警惕。此外,质量参差不齐的国内自媒体信息、不当抓取的境外网页错误信息、由大模型生成的未经审核的合成数据,都可能会“毒化”AI大模型的训练过程,进而导致输出内容价值观的偏差。繁杂的世界观、人生观、价值观数据弥漫在大模型神经网络的“黑箱”中,导致我们很难分辨出大模型的某些反社会回答(例如“毁灭人类”)究竟是出自语料库,还是根据模型的行为范式学习推理而来。随着大模型广泛应用到各行各业,倘若任由这种不可控的“黑箱”发展下去,我们将很难控制人工智能的价值体系与人类相一致,会造成较大的社会伦理风险。

  再次,制度监管滞后与信息不对称的结构性困境。尽管世界各国已针对人工智能技术带来的安全风险纷纷出台相关法案,但这些法律法规的制定完善一般需要漫长复杂的流程,往往滞后于人工智能新产品的发布更新速度。各国人工智能的发展水平与应用程度不同,政府、企业、高校科研机构、社会大众对动态更新发展的人工智能技术的认知存在不小的信息差,导致国与国之间、社会各行各业之间推出的人工智能治理措施出现大量无效重合和高度冲突。这类信息不对称和统一标准的缺失,对外易制造国际人工智能安全治理的合作争端,对内会使得人工智能监管出现“真空地带”,造成制度叠加的冗余和推行成本的增长。

  2、在社会和个人层面,滥用人工智能技术可能带来劳动秩序重构、混淆视听、诱发心理依赖、认知和学习能力下降等问题

  在社会和个人层面,除了侵犯个人隐私、引发版权纠纷等,滥用人工智能还会造成不少问题:

  社会重新分配,劳动秩序重构。“人工智能+”的落地应用可能会引起“创造性破坏”,也就是普遍担忧的“人工智能代替人类”——普通劳动者的就业机会被人工智能剥夺。国际货币基金组织发布报告称,人工智能预计将对全球近40%的工作岗位产生影响。创造性和技术需求较低工作的从业者都将面临失业或转型的危机,社会劳动分工的结构将经历一场“大洗牌”。

  难辨真假的“网络垃圾”在信息渠道混淆视听。对于自然科学、金融、医学等特定领域的专业问题,诸多大模型没有经过大规模专业语料训练,可能会一本正经“胡编乱造”,制造“模型幻觉”。在缺乏必要监管机制的当下,由大模型生成的大量未经辨认审核的文本与图片流入互联网,在稀释真实信息的同时,还容易让不具备专业知识的大众信以为真。

  过度使用人工智能“角色扮演”功能易诱发心理依赖。经过特定算法和数据库训练的大模型,能够根据用户的指示扮演符合用户情感需求的虚拟角色,与用户交流。如果用户过度沉迷其中、忽略现实交际,则有可能因身心空虚导致极端性后果。这是因为算法不透明性和“黑箱”操控机制形成了信息的“茧房”,使用者被困于AI挑选和过滤后的“信息泡泡”中。算法通过分析我们的信息偏好,利用人类易产生恐惧焦虑的心理机制、利用青少年心智不完全成熟和对某些信息的猎奇心,不断投喂和推荐某类特定信息,加强固有的缺陷和偏好,让人们身陷其中无法自拔,严重时可导致AI成瘾效应。

  过分依赖人工智能进行思考会导致认知和学习能力下降。抖音海外版顾问格雷格·伊森伯格曾提到一名斯坦福大学毕业生,因过度使用ChatGPT,在交谈中经常出现思维中断、言语迟滞的迹象。当认知过程被长期“外包”给人工智能,无论多么优秀的大脑,思考和学习功能都会“用进废退”。不假思索地全盘接受AI生成的“投喂式”内容,会导致本应在教育过程中塑造并形成的信息收集、筛选、处理、应用、创造的批判性思维、逻辑性思维、创新性思维能力的严重退化。

  3、构建人工智能安全治理框架,不仅要涵盖现实中出现的问题,还应从根源入手,避免“头痛医头、脚痛医脚”

  面对人工智能这把“双刃剑”,我们亟须构建完备的人工智能安全治理体系。它不仅要涵盖现实中的问题,还应基于系统化、综合化的人工智能理论,从问题的根源入手,避免“头痛医头、脚痛医脚”的片面化处理。

  加强价值对齐,制定人工智能评级标准。造成人工智能引发的意识形态、价值伦理、信息混乱等问题的根本原因,是生成式大模型缺乏明确的认知架构和价值体系,只能按照人类设定的程序,机械地对问题做出反馈,没能做到与人类价值对齐。为此,需要一套结合人类价值体系和认知架构的人工智能评级标准,作为评定和开发人工智能的科学标尺,辅助科学家打造更加符合人类需求、更加安全的人工智能。

  改进技术,设置防沉迷预警。不仅需要从外部对人工智能设置评级标准,也要从人工智能内部进行分级改造。使用人工智能的社会群体千差万别、需求各有侧重,需要防范的风险也各异。以青少年群体为例,我们应该着重研发辅助课堂学习、引导兴趣爱好的人工智能,让其成为有利于青少年成长的助手与“伙伴”。同时,为防止青少年过度沉迷,应在系统中编入使用时长、特定功能分区的限制,并出具生动详细的使用教程和预警声明,保障青少年的身心健康。

  预测就业替代风险,加强人工智能职业培训。如何避免人工智能替代人类,不仅需要劳动者个人顺应时代风向、积极主动实现自我提升,还需要政府部门和企事业单位制定保护劳动者、协调人机关系的就业保障机制。在部署“人工智能+”行动时,可以要求企业在应用人工智能的同时,在算法中预置就业考量,实现向善的人工智能伦理规则。企业则应做好就业伦理合规,不应追求用技术完全替代人,而是追求如何用技术赋能生产效率、优化体验。此外,在进行就业前置性布局的时候,也应当为可能被替代职业或工种的从业者安排相关的技能培训,增加他们在新环境下的就业机会。

  构建平等开放的国际人工智能安全秩序。防范人工智能安全风险是全世界共同面临的课题,并不是某一国、某一地区的特权或义务。目前,发达国家总体上掌握着比发展中国家更先进的人工智能技术,后者往往因此失去了在国际舞台上的话语权,并缺乏防范和化解人工智能风险的意识。

  需要强调的是,理解与防范人工智能安全风险的目的,并不是要让大家畏惧、否定科技的进步,而是希望大家具备理性审视和应对潜在风险的能力,学会在人工智能的浪潮中保持清醒的头脑,掌握驾驭人工智能的主动权。让我们在享受智能时代红利的同时,确保自身和社会的安全稳定,实现科技向善、人机和谐共生的美好愿景!

  (作者:宋国杰,系北京大学智能学院党委副书记、长聘副教授)

[ 责编:宋雅娟 ]
阅读剩余全文()

相关阅读

您此时的心情

光明云投
新闻表情排行 日/周
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 三峡枢纽新通道首条500千伏线路迁改施工进入冲刺阶段

  • 中外专家学者在美共话斯诺精神遗产

独家策划

推荐阅读
今年“双11”,不少人的订单里多了一种看不见、摸不着的新东西:Token。81岁的图灵奖得主马丁·赫尔曼打了个有趣的比方:人类就像一个刚拿到驾照的人,不知怎么弄到了一辆500匹马力跑车。
2026-11-16 09:29
初冬时节,位于黄河岸边的河南开封前方园艺公司菊花销售依然火热,员工们忙着将一盆盆娇艳的观赏菊装上货车、送往开封市区各景点,将一包包新鲜的食用菊发往全国各地。
2026-11-16 04:50
14日,以“智能经济赋能·绿色引领未来——‘十五五’长江经济带高质量发展的新方位与新征程”为主题的第十一届长江经济带发展论坛在江苏南通举行。会上,南通大学江苏长江经济带研究院最新研究成果发布。
2026-11-16 04:50
11月18日至19日,亚太经合组织(APEC)第三十三次领导人非正式会议将在深圳举行。围绕“建设亚太共同体,促进共同繁荣”主题,聚焦“开放、创新、合作”三大优先领域,中国全年举办300多场APEC活动。
2026-11-16 04:50
14日,我国自主研制的10吨级电动商用飞机CE-25A在山东滨州完成首次有人驾驶智能飞行。飞机搭载2名飞行员、1名试飞工程师,飞行试验57分46秒,其中空中飞行16分38秒、60.4公里,飞机状态正常,各项指标符合预期。
2026-11-16 04:50
技能是劳动者的重要生产禀赋,是其嵌入生产过程、与生产工具协同的关键点。机械化、电气化和自动化催生了产业革命,建立起机器大生产与标准化流水线。在此情境下,对标准化设备的熟练操作成为劳动者的核心技能,“动手能力”成为技能人才的鲜明标签。
2026-11-13 09:55
由自然资源部、国家发展改革委联合印发的《关于“人工智能+自然资源”的实施意见》日前对外发布。《意见》旨在推动人工智能在自然资源领域规模化、产业化创新应用,服务国土空间规划“一张图”智能化升级。
2026-11-13 01:50
天津农业合成生物与生物智造科创园占地41.4亩,布局创新创业、中试、检验检测等七大功能板块,承担的是“从1到10”的成果转化职能。用谯仕彦自己的话说:“实验室实现‘从0到1’,工厂完成规模化制造,二者中间横亘着中试熟化、工程放大、市场验证等重重关口。这座科创园,就是一座跨越转化难关的桥梁。”
2026-11-13 01:50
知识的创新、传播与应用彼此关联,却承担不同的认知任务。把已有道理向更多人讲清楚,可以扩大知识的社会影响;提出此前尚未形成的科学解释,则可能改变人们对世界的认识。评判人工智能在知识生产中的作用,应区分知识传递的效率与知识创新的增量,并考察其在不同知识活动中承担的任务。
2026-11-13 02:20
该井位于渤海中部海域,紧邻渤海最大的富烃凹陷—渤中凹陷,在火山岩地层中累计钻遇超120米天然气层,完钻井深5770米。经测试,该井日产天然气约80万立方米(约2800万立方英尺),展现了海上超深层火山岩领域广阔的勘探前景,有力推动了渤中凹陷天然气勘探进程。
2026-11-13 02:20
绿色算力既是数字基础设施建设的重要方向,也是清洁能源优势转化为发展动能的现实路径。当前,人工智能技术加快迭代,算力在科技创新和产业升级中的基础作用日益凸显,持续增长的计算需求对电力保障能力和能源利用效率提出了更高要求。
2026-11-12 01:30
把两根绳子接起来量一量,总长就出来了,不必先把两段长度换算成数字再相加。模拟计算走的是这条路:不把问题拆成一条条指令,而是让物理规律直接给出结果。北京大学人工智能研究院孙仲团队牵头,联合意大利米兰理工大学、IBM苏黎世研究院和美国一家公司的研究人员,为正在升温的模拟计算研究提出“现代模拟计算”统一框架。相关论文于近日发表。
2026-11-12 01:30
眼下,重庆市彭水苗族土家族自治县的红薯正值采挖时节,一辆辆轻型卡车在通往种植基地的“产业路”上穿梭,将收获的鲜薯运送到县工业园的重庆乐薯农业有限公司,经过严格的品质检测、清洁和一系列加工程序后,便成了人们常见的红薯淀粉。
2026-11-12 02:05
11月10日,记者从山东省泰安市人民政府新闻办举行的发布会获悉,泰安将科学有序、免费开放部分泰山景区等场地,为国内外机器人企业、科研机构提供实景训练测试条件,同时统筹做好场景供需对接、数据算力支撑、落地服务保障等,推动泰安新型工业化强市建设。
2026-11-12 02:05
当前,全球新一轮科技革命和产业变革加速演进,以生成式人工智能为代表的通用目的技术正从生产端加速向消费端传导。餐饮住宿、文旅出行、养老照护、教育培训、家政美容等服务消费,直接关系到千家万户的日常生活品质。推动人工智能在服务领域深度应用,让前沿技术成果惠及更多消费者,已成为各国促进消费、提升服务业竞争力的共同关注点。
2026-11-12 02:15
全透明光伏发电玻璃可使玻璃幕墙建筑成为分布式光伏电站;新一代柔性太阳能电池阵,能为中国空间站提供电力保障。下一步,我们要高水平推进“中国碳谷”建设,形成创新合力,打通基础研究、技术攻关、产业孵化和品牌塑造全链条。
2026-11-11 09:27
国家卫生健康委、国家医保局、国家中医药局、国家疾控局共同制定印发《关于进一步做好创新药安全合理配备使用工作的通知》,满足群众多元化用药需求,提高疾病治疗效果,保障医疗质量安全。
2026-11-11 01:45
培育和发展新质生产力急需高质量创新人才。高校的独特之处,在于教育、科技、人才要素集聚,它处在科技第一生产力、人才第一资源、创新第一动力的结合点上,也承担着将三者统合起来的制度功能。
2026-11-11 01:45
与其说是AI解出了难题,不如说是人类在AI的协助下拓展了边界。这带来的不仅是解题速度的提升,更是一场深刻的科研范式之变。
2026-11-11 01:45
主动对接国家西部战略和甘肃现代产业体系建设
2026-11-11 01:45
加载更多