点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:AI心,海底针,怎么破?
首页> 科技频道> 综合新闻 > 正文

AI心,海底针,怎么破?

来源:《中国科学报》2021-10-14 13:55

调查问题加载中,请稍候。
若长时间无响应,请刷新本页面

  图片来源:unsplash

    “当下机器学习的主流呈现出‘黑箱’的特点,普通用户很难观察到数据训练的中间过程,这样的特征导致人工智能(AI)对我们而言处在不可知的状态。”在未来论坛日前发起的AI伦理与治理系列论坛上,清华大学人工智能国际治理研究院副院长梁正说。

    这个“黑箱”的存在,让AI的“心”如海底针般难以捉摸,不仅给人与机器的交流带来了很大困难,也给AI的广泛应用埋下了隐患。

    人与AI缺乏共同语言

    “人与人之间要想协同,就得有共同语言,人和机器也是同理。”清华大学计算机系长聘副教授崔鹏说,“如果机器的输出人不懂,人的输出机器不懂,导致的结果就是人和机只能取其一,要么就全信机器,要么就全不信。”

    这种“1+1=1”的局面非常尴尬。因为在很多风险敏感型的领域,如医疗、军事、金融、工业等,人不可能完全信赖一个机器的决策。这样AI走向各行各业的步伐就会受到严重阻碍。

    “AI的‘黑箱’问题,不可避免会带来难以控制、歧视偏见和安全风险,甚至会打击我们对算法本身的信任。”梁正说,“因此,算法的可解释性对AI的应用至关重要。”

    当用户遇到AI时,一定期待它是可靠的:不会出错,没有风险,不会损害自己的利益或安全。而这种信任,只能来自于对AI算法内在机理的理解和认同。

    因此,“能解释的AI才是可信任的AI”。梁正如是说。

    出错了,却不知道为什么

    放眼国内外,AI在应用中闹过不少笑话。

    在美国司法系统中,对犯人进行减刑或释放的重要参考指标之一,就是预测此人释放以后的二次犯罪率。在AI系统里,在各方面相差不大的两个犯罪嫌疑人,只因肤色不同,最后的判定是黑皮肤犯罪嫌疑人的二次犯罪率比白皮肤的高10倍以上。

    为什么会出现这种情况呢?有专家认为,在一些国家,肤色跟收入水平表现出强关联,而低收入则会导致高犯罪率。这些因素导致AI基于历史数据进行预测时,会得出“歧视”的结果。

    在这个案例中,人们出于常识,还有可能分析出问题的根源所在。但更多时候,AI出错的原因很难追溯。

    “现在的AI系统,因为其本质上是‘黑箱模式’,即使知道最后输出的结果是错的,却没有办法回溯究竟是哪个环节出了问题。”崔鹏说,“由于这种‘不可回溯性’,导致了即使模型出错,也不知道板子要打到谁身上。”

    如何看懂黑箱里的机器心

    难以解释,不可回溯——面对AI发展过程中的这些局限性,究竟该从何处入手破局呢?

    据梁正介绍,目前世界各国在算法治理方面有着不同的探索,也有一定的共性和经验。欧盟的算法治理是自上而下的,强调“透明性”和“问责性”。也就是说,一方面确保决策结果可以被人类(包括监管部门、社会公众)理解、追踪;另一方面建立问责机制、审计机制以及风险损失的补救措施。美国则采用了另一条路径,采取自下而上的分散化、市场化的治理路径。

    梁正指出,当前我国对算法治理路径的探索已经初具体系。未来算法治理有比较明确的两大方向:第一是可问责性,第二就是可解释性。

    崔鹏则提出,科学家应当致力于通过把“因果”引入机器学习,推动AI治理实现从“知其然”到“知其所以然”的跨越。

    “‘然’就是数据里的关联,‘所以然’是数据里的因果。”他说,“因果启发的机器学习可能成为新一代AI的突破口。”

    在技术层面之外,清华大学社会科学学院教授李正风则分析了AI可靠性和可解释性背后的社会土壤。

    他指出,AI的算法设计受到设计者自身伦理修养、社会责任意识等方面的影响。因此,可理解、可信赖的AI,有赖于设计者自身的信念和操守:增进人类福祉、尊重生命权利、保护个人隐私及其他权利等。与此同时,还需要建立数字时代、人工智能时代的社会信任机制,通过社会理性或集体理性来促进AI技术健康发展。

    “算法的‘黑箱’特征和复杂性不能成为逃避治理的借口。”梁正说。看懂黑箱里的机器心——人类正在为之奋斗。

    记者 李晨阳

[ 责编:涂子怡 ]
阅读剩余全文()

相关阅读

您此时的心情

光明云投
新闻表情排行 日/周
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 中朝举行志愿军烈士陵园修缮工程竣工仪式

  • “一带一路”绿色创新大会2026在港开幕 共商全球南方绿色转型

独家策划

推荐阅读
联合国教科文组织打造技能供给的普惠发展底座,世界技能组织则以世赛为全球性平台,逐级检验多层次培养方式的效度。可以说,世赛既是推动技能普惠发展、标准互认对齐的过程,更是提升技能人才培养质量的有力抓手。
2026-10-27 09:43
在极端天气阻断鸟类天然觅食通道之时,由专业机构实施救助性补饲,是必要的保护措施。从管理实践看,人工投喂行为需要科学评估、分类施策,而我国的制度供给正不断完善。
2026-10-27 09:46
江苏苏州深耕健康城市建设,将健康医疗服务能力水平列入全市高质量发展综合考核,把体教融合、体卫融合、食品安全保障等内容增至健康中国行动重点任务中;新华社发  “北京密云区联合北大第一医院设立了全科医师综合能力培养项目,我是第二批培训学员。
2026-10-27 09:44
10月23日,国家统计局社科文司《中国创新指数研究》课题组发布的2025年中国创新指数测算结果显示:2025年中国创新指数达到185.5(以2015年为100),比2024年增长6.4%,增幅较上年提高1.1个百分点。
2026-10-27 09:53
今年3月,7岁的俊俊在华中科技大学同济医学院附属协和医院成功植入我国自主研发,全球最轻、最小的儿童磁悬浮“人工心脏”。2021年,协和医院心脏大血管外科团队与深圳核心医疗科技股份有限公司携手,启动针对低龄、低体重患儿的磁悬浮心室辅助装置研发项目。
2026-10-27 09:51
在“云端”架起“飞虹”、让天堑变为通途,近年来不断刷新的桥梁纪录,成为新时代我国工程科技突破的生动缩影。目前,我国高层次科技人才数量居全球前列,人才红利特别是“工程师红利”不断强化,为“超级工程”积蓄了绵绵不绝的人才力量。
2026-10-27 09:49
医药领域知识产权投资,关键不是“买专利”,而是投资一条从科研发现走向临床和市场的完整链条,打通从基础研究到产业落地的转化堵点。知识产权投资应更注重投早、投小、投长期、投硬科技,同时引入科研、临床、产业、法律和金融等多方专业力量。
2026-10-26 10:21
记者13日从民政部获悉,为发展壮大康复辅助器具产业,实现产业体系整体跃升,增进民生福祉,民政部等14部门日前联合印发《康复辅助器具产业扩能提质三年行动方案(2026—2028年)》。
2026-10-26 10:21
随着京津冀协同发展走向深入,唐山凭借不断升级的全域养老服务网络,渐渐成为京津老人跨城养老的热门目的地。如今,唐山正把“老有所养、老有所乐”的民生承诺,一步步变成老人触手可及的幸福日常。
2026-10-26 10:20
在南京,数据标注企业提供“燃料”、大模型企业主攻算法、政府持续推动场景开放,一体化产业生态逐步成型。会上,江苏发布“物理AI与世界模型高质量数据集建设行动计划”,展示一批“物理AI与世界模型”典型成果与典型场景,为全国行业发展提供实践参考。
2026-10-26 10:20
供需适配不能局限于满足企业眼前的用工需求,还应兼顾产业升级方向、人才培养周期和学生发展需要。建设技能型高校“国家队”,不仅要办好一批头部学校,更要探索其他学校可借鉴、可复制的改革发展路径。
2026-10-26 10:20
抵抗宏观物理破坏的“划不坏”能力,正是低功耗量子器件最重要的特质之一。
2026-10-23 04:20
2025年我国海洋生产总值突破11万亿元,占国内生产总值比重为7.9%。
2026-10-23 04:20
海洋能规模化利用迈出坚实步伐、取得积极成效。
2026-10-23 04:20
应急监测队不惧艰险、不计得失,以监测为刃、以坚守为盾。
2026-10-23 04:40
10月22日,工业和信息化部、国家发展改革委等八部门发布《产业基础能力提升“十五五”规划》。
2026-10-23 04:40
职工基本医疗保险(含生育保险)统筹基金收入14473.64亿元,城乡居民基本医疗保险统筹基金收入8554.69亿元。
2026-10-22 09:57
明确了如何衡量河湖复苏标准,如何确定河湖复苏目标,如何制定河湖复苏措施等技术要求,为指导母亲河复苏行动提供技术依据。
2026-10-22 09:48
聚焦医学人才培养的思想碰撞,正是学校探索育人新模式的一个缩影。
2026-10-22 09:47
形成覆盖重点领域、辐射全国的专精特新赋能网络,推动中小企业专精特新发展质量明显提升、专精特新“小巨人”企业持续涌现。
2026-10-22 09:46
加载更多