点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:如何看待AI“一本正经地胡说八道”
首页> 科技频道> 综合新闻 > 正文

如何看待AI“一本正经地胡说八道”

来源:人民日报2025-07-02 10:05

  【现象】使用人工智能大模型时,不少人或许都遇到过类似问题:它们有时会捏造细节,甚至“一本正经地胡说八道”。比如,让它推荐书,给出的却是一堆压根不存在的书名;人物身份张冠李戴,还能给出一些并不准确的链接……这些现象都可以归为AI幻觉。

  【点评】

  所谓AI幻觉,可以通俗地理解为AI也会像人产生心理幻觉一样,遇到不熟悉或超出“知识储备”的问题时,编造一些并不存在的细节,生成与事实相悖的答案。一项调研显示,对于“公众认为使用AI应用过程中有哪些突出问题”,反馈最多的是“内容不准确,或含虚假信息”,占比高达42.2%。

  AI幻觉从何而来?可能得从源头寻找答案。

  大模型的工作原理,是基于概率生成内容。给它上半句,它就根据自己“学”过的海量知识,“算出”下半句该说什么。比如,当用户输入“今天天气非常”,它大概率会接“不错”“热”“潮湿”等答案,而不会出现“甜”。同时,大模型又不是简单地储存所有事实,而会像人脑记东西那样,进行大量压缩和泛化——也就是“抓概要、找规律”。因此,当“喂给”大模型的训练数据包含虚假信息时,它就会产生“幻觉”、给出错误答案。

  有报告显示,我国生成式人工智能产品用户规模达2.49亿人。用户规模快速增长,AI幻觉潜藏的风险也随之增加。比如,如果一些看似合理却与现实相去甚远的内容被AI反复学习,会形成“数据污染—算法吸收—再污染”的恶性循环。有效防范由此带来的虚假信息泛滥,已成为不容回避的课题。

  不过也有观点认为,AI幻觉可被视作一种“发散思维”和“想象力”。理论上,如果把训练一个大模型看作信息“压缩”的过程,那么大模型经过推理、输出答案就是一个信息“解压”的过程。这种处理信息的方式,可能会出现谬误,也可能触发新的创造。对发展尚未定型的新事物,要保持开放心态,辩证看待其利与弊,在有效防范弊端的同时,给予足够空间使之朝好的方向成长。

  短时间内,AI幻觉问题难以被解决。各方都在努力降低其负面影响,相关部门也加大了对违规AI产品的处置力度,推动生成合成内容标识加速落地。一些大模型厂商在积极行动,比如文心大模型利用检索到的信息来指导文本或答案的生成,提高了内容的质量和准确性;通义大模型加强训练语料管理,通过“红蓝对抗”机制提升对虚假信息的识别能力。对广大用户而言,则要加快提升AI素养,学会“智慧”地运用“智慧工具”,既借助大模型破除思维定式、启发创新思路,又提高自身有效获取、理解、评估和使用信息的能力。

  人类塑造工具,工具也影响人类生活。应对AI幻觉等问题挑战的过程,既促使人们思考改进工作方法,也为AI不断进化提供了源动力。激发新技术的正向价值,让AI更好融入生产生活、赋能千行百业,我们迈向智慧时代之路才能走得更加稳当、更加顺畅。(谷业凯)

[ 责编:焦子原 ]
阅读剩余全文(

相关阅读

您此时的心情

光明云投
新闻表情排行 /
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 海南:伏季休渔结束 渔船避风暂缓出海

  • 绿意奔涌大运河

独家策划

推荐阅读
脂肪肝、血压偏高、空腹血糖异常……一些以往更多与中老年相关的健康问题,正悄然在不少年轻人身上显现。在糖尿病视网膜病变筛查方面,我们开发了DeepDR系统,利用人工智能助力基层医生解读眼底片子。
2025-08-15 09:54
现有的抗病毒药物只对特定病毒有效,因此,拥有一种作用广泛的治疗方法将极具价值。对于耐药性问题,Bogunovic认为,只要这种抗病毒药物包含一系列针对病毒不同生命周期的干扰素触发蛋白,病毒就不太可能对其产生耐药性。
2025-08-15 09:53
经过多年持续攻坚,数字领域突破了一批关键核心技术。据测算,2024年,上市数据企业平均研发投入较“十三五”末增长79%,产业链创新活力持续增强。
2025-08-15 09:45
我国又一个超千亿立方米的大型深层整装页岩气田诞生。
2025-08-15 09:42
随着电动交通、低空经济、消费电子、人形机器人等新兴领域迅速发展,人们对高能量、长续航可充放电池的需求日益迫切。
2025-08-15 09:40
截至目前,我国累计批准发布国家标准物质19007项,其中1—7月新批准发布国家标准物质549项,同比增长56%。
2025-08-14 10:29
一项发表于《自然-神经科学》的研究,首次成功建立了线粒体功能障碍与神经退行性疾病的因果关系。
2025-08-14 10:28
中国的黄牛育种终于有了自主、低成本的检测芯片!”
2025-08-14 10:27
提到全球变暖,人们往往首先想到二氧化碳、甲烷乃至氟利昂等能够加剧大气温室效应的温室气体。很多人不知道,大气中还存在一类可以抑制气候变暖的物质。而人类扩张农田等行为,可能在客观上导致大气中“降温物质”减少,进而加剧全球气候变暖。
2025-08-14 10:24
党的二十届三中全会明确提出,建立人工智能安全监管制度,完善生成式人工智能发展和管理机制。这就要求我们坚持统筹高质量发展和高水平安全,把创新作为第一动力、把安全作为底线要求、把普惠作为价值追求,积极融入“人工智能+”行动,鼓励和促进人工智能气象应用服务创新发展,前瞻应对人工智能技术应用带来的风险挑战。
2025-08-14 03:50
广东珠海以南海域,一座银灰色的三角形装置随波起伏。这里是我国自主研发的全球首台兆瓦级漂浮式波浪能发电装置“南鲲号”,日均发电量可达1万千瓦时,能满足约1500户家庭一天的用电需求。
2025-08-13 10:02
研究发现,在1950年至2020年间,极端高温的加剧导致热带地区陆栖鸟类的丰度下降了25%至38%。研究人员以地球生命力数据库中的全球陆栖鸟类种群数据作为研究起点,未包括水鸟和海鸟。
2025-08-13 10:01
中性原子体系因优异的扩展性、高保真度量子门、高并行性和任意的连接性,成为极具潜力的量子计算和量子模拟平台。审稿人高度评价这项研究工作,认为这一工作是原子相关量子物理领域在计算效率和实验可行性方面的一次重大飞跃。
2025-08-13 10:01
“植物如何整合复杂环境信号是深入理解植物生存智慧的关键,也是创制兼具养分高效利用与逆境抗性的未来作物新品种的理论基础。储成才团队相信,随着研究的深入,未来会有更多基于植物“生存智慧”的作物新品种出现,让农业更高效、更环保。
2025-08-13 10:01
8月12日是世界大象日。记者从国家林业和草原局亚洲象研究中心了解到,从最新一线监测数据看,我国野生亚洲象象群交流频繁、种群结构稳定、生育率稳步提升、
2025-08-13 03:45
团队需要从头开始,设计一款“更适合日本”的机器人:体形小巧,穿行灵活,语音系统换成日语,屏幕上的动画表情还能变换。擎朗智能目前在日本已经设立200多个技术支持点,确保常规故障能在2小时内响应,24小时内修复。
2025-08-12 10:06
夏季天气炎热,很多人喜欢去游泳馆游泳。“游泳可以提高心肺耐力和身体柔韧性,改善体脂率,因此受到越来越多人的喜爱。”潘力军说,游泳如果不注意卫生,可能感染红眼病、中耳炎和胃肠道疾病,建议做好如下防护措施:  游泳前,注意自身的健康状况。
2025-08-12 10:03
近日,随着最后一笔数据在青藏高原上录入系统,三江源国家公园正式完成自然资源确权登记。2019年,《关于统筹推进自然资源资产产权制度改革的指导意见》与《关于建立以国家公园为主体的自然保护地体系的指导意见》相继出台,“依法确权”成为基石。
2025-08-12 10:02
一般认为,宇宙中的每个星系中心都有一个超大质量黑洞,而更大的星系则拥有更大的黑洞,即超巨型黑洞。Collett表示,恒星运动学被视为黑洞质量测量的“金标准”,引力透镜效应则可以帮助团队“探测到更遥远的宇宙”。
2025-08-12 10:01
中国科学院大连化学物理研究所研究员杨维慎、彭媛团队开发了一种便捷的触发式界面反应策略,实现了二维金属-有机框架膜(MOF膜)的快速制备及高效气体分离。该研究为面向应用的MOF纳米片和超薄二维MOF膜的定制化制备提供了新思路,可满足不同应用场景下的高性能分离需求。
2025-08-12 10:00
加载更多