点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:中国信通院牵头,首个智算运维智能体评测基准落地
首页> 科技频道> 人工智能 > 正文

中国信通院牵头,首个智算运维智能体评测基准落地

来源:光明网2026-06-30 18:08

  6月29日,2026“众智”大模型开放智算生态协同高级别研讨会上,中国信息通信研究院正式发布AISHPerf人工智能软硬件基准体系3.0版本,包含AISHPerf-智算运维智能体评测基准与AISHPerf-算子生成智能体评测基准两项AI Infra领域核心标准。其中,AISHPerf智算运维智能体评测基准是我国首个面向AI基础设施的运维智能体权威评测基准。

中国信通院牵头,首个智算运维智能体评测基准落地

  本次研讨会由中国信通院人工智能软硬件协同创新与适配验证中心、中国人工智能产业发展联盟、工信部人工智能标准化技术委员会联合主办,两大评测基准由国内AI原生基础设施服务商无问芯穹及清华大学团队提供重点技术支持,从底层算力优化到上层集群运维,共同为智算产业的标准化升级与高质量发展提供了统一的能力参照框架

  AISHPerf是中国信通院联合人工智能大模型及软硬件评测工业和信息化部重点实验室,依托国家信创园人工智能软硬件协同创新与适配验证中心打造的人工智能软硬件基准体系。该体系通过多维度指标设计,考察端到端方案对模型与应用场景的真实承载能力,系统评估软硬件协同优化水平、兼容适配能力与整体交付效能。

  当前,AI产业已从“堆算力、拼规模”的规模扩张阶段,迈入以“Token效能”为核心的效率提升阶段。算力与电力投入逐步成为基础设施的“基础常量”,而运维能力直接决定算力利用效率与Token产出水平,成为影响产业投产效益的“核心变量”。但行业内对运维智能体的评估长期停留在语言问答、知识复述的“笔试型”层面,缺乏真实生产场景的实操考核,无法反映智能体实际解决问题的能力,难以支撑运维智能化的规模化落地。

  针对这一行业痛点,AISHPerf-智算运维智能体评测基准锚定真实生产场景构建实操化评测体系。该基准以无问芯穹沉淀的近百亿条真实运维数据为底座,经资深运维专家脱敏、标注与筛选,提炼形成103条高保真典型评测用例,覆盖5大技术栈、44种问题现象、22个细分故障领域,设置易、中、难3种难度层级,纳入6种国内外芯片(含5款国产芯片),打通了从底层硬件到用户侧软件的全链路故障问题场景。

中国信通院牵头,首个智算运维智能体评测基准落地

  评测采用实景化闭环设计:全程不预设故障根因,仅向智能体提供真实集群环境与有限的现象描述,要求智能体自主完成环境探索、根因定位、故障修复的完整流程。最终从故障解决率、处理时延、Token消耗、工具调用效率等维度输出量化结果,客观评估运维智能体在真实生产环境中的端到端问题解决能力。

  作为基准的核心亮点,该体系在国内同类评测中率先实现对国产芯片运维场景的深度覆盖。近年来国产AI加速卡产业快速发展,据IDC统计,2025年中国市场AI加速卡国产化率已突破四成,国产GPU集群规模进入快速扩容期。但相较于成熟的通用GPU生态,国产芯片在硬件架构、驱动体系、通信协议、框架适配等方面存在显著技术差异,运维复杂度更高,直接制约国产算力的效能释放。

  为此,评测基准专项纳入天数、壁仞、沐曦、摩尔线程、昇腾5种国产芯片的集群运维场景与典型问题测例,覆盖硬件故障、驱动适配、框架兼容、通信协议等国产算力运维核心痛点,首次建立起统一、可量化的国产智算运维智能体评估标尺,为国产算力从“规模落地”向“效能释放”进阶提供标准支撑。

  业内人士表示,运维智能体的深度应用正在推动AI基础设施向自主自治形态升级。未来的AI基础设施将具备自我感知、自我修复、自我迭代能力,内置运维智能体将实现资源自动调度与系统自动优化,推动算法与基础设施深度协同。

  据了解,无问芯穹已在实际训练与推理业务中部署运维智能体,实现工单平均处理时间缩短50%,关键故障处理效率提升约6倍,综合运维成本下降约30%,验证了智能运维对Token产能的提升价值。

  目前,AISHPerf开放评测工作区已在Gitee平台开源,同步开放故障模拟器、运维数据集与评测框架源码,面向全行业共享共建。(记者 战钊)

[ 责编:张佳兴 ]
阅读剩余全文(

相关阅读

您此时的心情

光明云投
新闻表情排行 /
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 今天,他们获颁国家最高科学技术奖

  • 沿着埃德加·斯诺的足迹看当代中国

独家策划

推荐阅读
水的氢键强度及动力学过程全量子效应研究:在一滴水中探寻物理之美 在王恩哥看来,物理学研究有一个很大的特点,就是它能把复杂的事情简单化,并且抓住其中最本质的问题——这就是物理学的魅力所在。
2026-07-09 09:51
而这一切的起点,要回到半个世纪前——在中国科学院物理研究所那间废弃的鸡舍里,陈立泉铺开了这张后来冠绝全球的“电动”蓝图。自1981年起,在中国科学院的持续支持下,实验室瞄准真正实用的锂电池,牵头组织并承担了一系列国家重大项目。
2026-07-09 09:51
谈及荣获国家最高科学技术奖,贲德谦虚地说:“这不是我个人的奖,而是所有‘雷达人’的荣誉。从原理探索到技术攻关再到雷达建造,10余载春秋,为了研制代号“7010”的远程相控阵雷达,贲德与团队闯过了一个又一个难关。
2026-07-09 09:50
发展数智经济,通过促进科技创新和产业创新深度融合培育新质生产力。为此,笔者建议,应从要素供给、产业融合、创新转化和制度保障四个方面发力,把数智经济的技术势能转化为新质生产力的发展动能。
2026-07-09 09:50
耄耋之年,她坐着轮椅来到采访室,一身深蓝素装,神情温和。她,就是“七一勋章”获得者、中国工程院院士、中南大学教授钟掘。1960年,钟掘毕业后来到岳麓山下的中南矿冶学院,一头扎进被人称作“傻大黑粗”的冶金机械行业。
2026-07-09 09:49
中国科协第十一次全国代表大会是在“十五五”开局之年召开的一次重要会议,是科协系统和广大科技工作者的一次盛会。实践充分证明,我国科技工作者始终胸怀祖国、服务人民、勇攀高峰、敢为人先,不愧为党和国家充分信赖的优秀队伍和建设科技强国的中坚力量。
2026-07-09 09:49
从安装智能芯片的比赛用球,到协助裁判的视频技术,再到支持百万球迷转运的中国列车……这支“中国队”被美国消费者新闻与商业频道誉为世界杯供应链“不可或缺的一环”。
2026-07-08 10:08
7月7日是小暑节气,恰逢年度“最小太阳”现身天宇。当日凌晨2时左右,地球过远日点,这是一年中地球距离太阳最远的位置,这天观测到的太阳视直径为全年最小。
2026-07-08 10:06
近日,西南石油大学新能源与材料学院光伏材料与技术科研团队传出好消息:其研发的小尺寸超高效叠层太阳能电池光电转换效率接近35%,大幅超越常规太阳能电池的光电转换效率。
2026-07-08 10:04
目前,大连海事大学已与72家行业单位建立联合培养,共建162个专业实践基地、4个工程技术中心,聘任600余名企业导师,真正实现“工程出题、校企共答、产业阅卷”。
2026-07-08 09:52
一生钢铁报国,一生慷慨无私。崔崑院士走了,但他留下的,是钢的筋骨,是火的温度,是一颗永远滚烫的赤子之心。
2026-07-08 09:45
在河北雄安人工智能产业园的一楼展厅里,一台工业机器人正利落地演示货物搬运,机械臂精准而有力;楼上,键盘敲击声此起彼伏,研发人员专注地写着代码。产业园一年前才“开业”,如今已成为人工智能公司发展的产业高地。这里诞生的国内首个处理结构化数据的通用大模型,适用于多个工业场景;这里诞生了便携式颅脑出血检测分析仪,让医学检查更加快捷便利……
2026-07-07 09:44
从“争第一”的局部超越,到“创唯一”的向上突围,再到“守专一”的产业韧性,这三重创新路径相互交织,共同勾勒出中国从“世界工厂”迈向“创新引擎”的壮阔图景
2026-07-07 09:42
近日,在内蒙古阿拉善盟额济纳旗东风镇古日乃嘎查的航天育种试验基地内,曾搭载实践十九号卫星的荒漠肉苁蓉“太空种子”,在地面选育试验中取得关键进展——首批试验植株成功开花。
2026-07-07 09:40
高校专业目录的更新,绝非简单的名称变动,而是立足国家需要、顺应产业发展、面向科技前沿之举。新农科教育已不再是单纯的“种地养猪”,而是要有系统思维和交叉学科背景,特别是打破农学、工学、理学等传统学科壁垒。
2026-07-07 09:39
夏日时节,我们有时会看到湖泊或水库的水面被一层厚厚的绿色“油漆”覆盖,水体浑浊还伴有一股怪味。“这种差异解释了为什么蓝藻水华会出现种群层面的快速崩溃,‘死亡信号’一旦扩散,就会迅速引发整片区域的蓝藻种群崩溃,也解释了为什么蓝藻水华会‘突然消失’。
2026-07-07 09:36
天问二号探测器历经约400天、行程约10亿千米的“追星”之旅,于近日与小行星2016HO3成功交会,到达距离小行星20千米处,开始科学探测。
2026-07-06 10:03
发射节奏加快、组网进程提速……近段时间以来,商业航天领域捷报频传,产业发展动能持续增强。
2026-07-06 09:54
航运活跃,满载着中国经济的蓬勃生机,也给水上交通安全带来更大挑战。今年以来,我国海事部门接连推出新举措,通航管理越来越精细高效。
2026-07-06 09:53
6月25日,科技部党组书记、部长阴和俊作了“建设科技强国支撑高质量发展”专题报告,现以问答形式摘要刊发。
2026-07-06 09:50
加载更多