点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:真实测评第二弹!DeepSeek-R1 API版性能测评
首页> 科技频道> 综合新闻 > 正文

真实测评第二弹!DeepSeek-R1 API版性能测评

来源:光明网2025-03-05 10:08

  在上期《DeepSeek-R1服务性能评测网页版》分析中,各平台在用户体验与功能表现方面存在一定差异。本轮评测则采用中国软件评测中心人工智能部自研大模型服务性能工具,选取六家主流平台的API版本,通过多时段多轮次测试开展系统性评估。

  评测采用标准化代码题作为测试用例,在多个典型时段进行重复性验证,采用核心性能指标、综合稳定性指标两大评估体系:

  1.核心性能指标:涵盖首Token延迟时间、推理过程耗时、回复响应时间、总处理时长等基础指标,以及基于时间计算的推理速度(tokens/sec)、回复速度(tokens/sec)和平均总速度(tokens/sec)等衍生指标;

  2.综合稳定性指标:通过上述核心性能指标以及总体标准差和极差两项统计量,系统评估各平台在不同时段的性能波动情况。

  一、核心性能指标分析

  (一)首Token延迟时间

  为分析各平台响应速度,我们采取多时段抽样评测方法,测试各平台首Token延迟时间(从触发请求指令起至模型产生首个有效Token的时间间隔),本次测试结果显示大部分平台表现出良好的稳定性,首Token延迟时间均稳定在2秒以内,用户体验未出现显著延迟感知。其中,硅基流动平台在14:00时段出现明显波动,波动频次较多,首Token延迟时间达到异常峰值,形成与其他平台的显著差异。

真实测评第二弹!DeepSeek-R1 API版性能测评

  表1:首Token延迟时间(单位:秒)

  (二)推理过程耗时和全流程总处理时长

  鉴于DeepSeek-R1平台深度推理的技术特性,为分析各平台在时间表现上差异性,本次评测对其推理过程耗时和全流程总处理时长分别进行了单独测量。百度智能云、火山引擎、腾讯云、讯飞开放平台等在时间表现上差异较小。硅基流动平台在推理时间和总处理时间耗时均较高,与其他平台存在一定差距;阿里云百炼平台则呈现出明显的时段性波动特征,上午时段各项耗时指标均稳定在基准值范围内,但下午时段整体耗时出现一定幅度的波动。

真实测评第二弹!DeepSeek-R1 API版性能测评

  图1:推理与全流程总处理时间(单位:秒)

  (三)推理速度

  分析大模型对输入内容进行理解、分析、推理等核心处理环节效率,通过推理速度[ 单位时间内处理的Token量来量化模型处理复杂任务的计算效率]反映其底层架构的优化程度和并行计算能力。在用户体验层面,较快的推理速度能够缩短复杂问题的响应时间,提升交互过程中模型的“即时智能感”,从而增强用户对系统专业性的认知。从评测数据来看,火山引擎平台在该项指标上表现出显著优势,其推理速度均值达到29tokens/s。相较之下,讯飞开放平台的推理速度均值为1.2tokens/s,与领先平台存在一定性能差距。

真实测评第二弹!DeepSeek-R1 API版性能测评

  图2:推理速度(单位:token/s)

  (四)回复速度

  采用回复速度[ 从接收输入到输出完整回复的时间效率。]衡量模型响应用户请求效率,通过单位时间内生成的Token量来量化交互流畅度。火山引擎平台在该项指标上领先于其他平台,其回复速度均值达到32tokens/s,交互感受自然流畅。在稳定性方面,硅基流动平台的回复速度数据呈现明显波动特征,与其他平台相比存在较大离散度。

真实测评第二弹!DeepSeek-R1 API版性能测评

  图3:回复速度(单位:token/s)

  (五)总平均速度

  采用总平均速度衡量各平台平均反应速度,火山引擎反应速度最快,百度智能云、阿里云、腾讯云等平均速度差距较小,表现较好,讯飞可能限于算力问题,总平均速度表现较差。

真实测评第二弹!DeepSeek-R1 API版性能测评

  图4:总平均速度(单位:token/s)

  二、综合稳定性指标

  在综合评估环节,采用熵权法[ 根据各指标数值变化对整体的影响,计算指标的熵值,进而确定权重。]进行指标权重分配,通过计算各指标数据的离散程度确定客观权重,权重分配见表2。

真实测评第二弹!DeepSeek-R1 API版性能测评

  表2:各参数熵权法权重分配

  权重分配后的性能综合评估(见图5)及各指标均值统计(见表3):火山引擎平台在核心性能维度保持行业领先水平,其综合表现呈现全面均衡特征,在深度推理时间与总处理时长两项关键指标上,优势显著,均值水平优于其他平台。硅基流动平台在多时段测试中表现出较高的离散程度,其性能指标波动幅度在稳定性评估中处于相对高位。

真实测评第二弹!DeepSeek-R1 API版性能测评

  图5:各平台API性能图

真实测评第二弹!DeepSeek-R1 API版性能测评

  表3:各指标平均数据图

  三、多平台API大模型评测结果分析

  综合来看,火山引擎平台凭借在深度推理效率与系统稳定性方面的显著优势,成为本次评测中综合性能最均衡的选择,该平台在权重分配中获得最高综合得分(99.52),在首Token延迟时间、推理过程耗时等基础指标,以及推理速度等衍生指标上,均展现出卓越的表现,其深度推理耗时均值位于行业平均水平的前列,展现出底层架构的高效优化能力。百度智能云(73.21)、腾讯云(72.73)、讯飞开放平台(66.27)等平台在一般性的内容创作、知识问答等场景中,能够较好地满足需求,表现出了稳定的性能。硅基流动可能存在限于用户量大算力不足情况,稳定性欠佳,容易出现响应延迟以及结果波动的情况。

  本次测评为企业及开发者应用提供客观参考,分析平台性能优势,帮助用户根据实际需求选择最适配的平台,增强行业竞争力与用户体验,进一步助力技术和行业应用落地。(中国软件评测中心)

[ 责编:战钊 ]
阅读剩余全文(

相关阅读

您此时的心情

光明云投
新闻表情排行 /
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 2026年巴塞尔艺术展香港展会启幕

  • 江西上饶:防火宣传进景区

独家策划

推荐阅读
全国科学技术名词审定委员会25日发布《关于发布试用人工智能领域名词token中文名“词元”的公告》,决定在综合考量社会各界意见建议的基础上,优先推荐“词元”作为人工智能领域名词token的中文名,并面向全社会发布试用。
2026-03-26 09:23
木卫二是一颗冰封的木星卫星,也是太阳系内最有希望孕育地外生命的地方。“欧罗巴快船”团队认为,他们将发现适宜生命生存的海洋,但除非探测器真正抵达、展开探测,没有人能给出确切的答案。
2026-03-26 09:24
作者:陆俊杰(南通大学副校长,江苏省习近平新时代中国特色社会主义思想研究中心特约研究员)  在促进创新链产业链资金链人才链深度融合、推动科技成果高效转化应用上探索新途径,是“十五五”时期江苏经济社会发展的重要目标任务。深耕“双高协同”不仅是破解科研创新与产业需求脱节的关键举措,更是落实创新驱动发展战略的重要布局。
2026-03-26 09:24
记者从中国发明协会获悉:在瑞士日内瓦举行的第五十一届日内瓦国际发明展上,中国代表团共获得90项金奖、95项银奖和52项铜奖。
2026-03-26 09:30
工业和信息化部25日公布,今年前2个月,我国通信业运行平稳,电信业务总量保持增长,5G、千兆光网、物联网等网络基础设施建设有序推进。截至2月末,5G基站总数达490.9万个,比上年末净增7万个,占移动基站总数的38%。
2026-03-26 09:24
3月25日,国家自然科学基金委员会在2026中关村论坛年会开幕式上发布2025年度“中国科学十大进展”,10项重大基础研究突破入选。界面调控新方法创制面向空天应用的高性能柔性叠层太阳能电池示意图 国家自然科学基金委员会供图 
2026-03-26 09:22
3月25日,以“创新与发展”为永久主题,由科技部、国家发展改革委、工业和信息化部、国务院国资委、中国科学院、中国工程院、中国科协和北京市政府共同主办的2026中关村论坛年会在北京拉开帷幕。
2026-03-26 09:21
记者24日从农业农村部获悉,农业农村部近日印发通知,督促指导各地依法严厉打击坑农害农、危害粮食安全和农产品质量安全违法行为,守护群众“舌尖上的安全”,持续夯实国家粮食安全根基。
2026-03-25 10:22
氢能兼具能源、资源、储能介质三重属性,氢能产业科技含量高、低碳属性强、发展空间大。通知提出到2030年,通过应用规模扩大,推动氢能应用技术、工艺、装备创新突破,实现燃料电池、电解槽、储运装置和材料等迭代升级,推动氢能成为新的经济增长点,支撑实现经济社会发展全面绿色转型。
2026-03-25 10:21
林间密密麻麻的印痕,正是东北虎豹国家公园生态环境越来越好的体现。在科技守护与不懈坚守下,东北虎豹国家公园的生态成果愈发显著:东北虎和东北豹的数量由公园试点初的27只和42只,增长至当前的70只和80只左右。
2026-03-25 10:11
国家卫生健康委和中国气象局24日联合发布首期全国花粉浓度预报服务提示,为公众提供精准防护指引。目前正值春季,以木本植物花粉传播为主,建议过敏人群及时关注本地花粉浓度和种类变化,必要时明确过敏原,提前做好防护和出行安排。
2026-03-25 10:04
自然资源部日前发布四川省冕宁县牦牛坪矿区稀土矿资源储量核实勘查项目成果,矿区新增稀土资源量966.6万吨。据悉,牦牛坪矿区稀土矿资源储量核实勘查项目还新增伴生萤石资源量2713.5万吨、伴生重晶石资源量3722.8万吨,均达到超大型规模,具有重大战略意义。
2026-03-25 10:00
记者了解到,自20世纪60年代推广杂交玉米种以来,我国玉米的单产提高了约2.7倍,其中51%的增益都来自优良杂交种的选育与应用。进一步研究发现,在现代杂交育种过程中,玉米的基因有害变异被不断清除或互补,并且,杂交种中有害等位基因被抑制表达的比例与其产量和育成年代同步增长。
2026-03-24 09:29
2023年,国务院部署开展专利转化运用专项行动(以下简称“专项行动”)。教育部科学技术与信息化司司长周大旺表示,教育部着力畅通科技成果转化的链条,加速把高校丰富的专利转变为产业发展的红利。
2026-03-24 09:28
走进内蒙古博物院的有机质文物修复室,时间似乎放慢了脚步,空气中透着静谧,只有工具偶尔轻碰的细微声响。”  无机质文物修复室里,文物修复师季园园展示了另一种“手术”场景。
2026-03-24 09:28
柳申滨最初以针刺治疗皮肤炎症及穴位敏化机制为切入点,试图探寻针刺调控皮肤靶器官的效应规律。”  通过和临床医生交流,柳申滨了解到,在压力、焦虑等心理应激状态下,特应性皮炎患者的皮肤炎症会显著加重。
2026-03-24 09:28
全球最大人工智能(AI)模型API聚合平台OpenRouter最新数据显示,3月16日至3月22日,全球AI大模型总调用量为20.4万亿Token,环比增长20.7%。”
2026-03-24 09:28
杂交稻的大面积推广显著提升了水稻产量,但其生产长期依赖程序复杂、成本高昂且需年年重复的杂交制种过程。
2026-03-23 09:40
近日,澳大利亚一位机器学习领域科技企业家,通过人工智能大模型自行设计肿瘤疫苗,救治自家患癌宠物犬的故事广受关注。
2026-03-23 09:39
记者从中国石化获悉,我国首套全链条国产化溶液法聚烯烃弹性体工业化装置在天津进入试运行,相关生产技术取得原创性突破,将有效缓解我国光伏等战略性新兴产业对该材料的进口依赖。
2026-03-23 09:33
加载更多