点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:趋境科技发布ATaaS:打造高效能AI Token生产服务平台
首页> 科技频道> 人工智能 > 正文

趋境科技发布ATaaS:打造高效能AI Token生产服务平台

来源:光明网2026-03-27 18:09

  当前,人工智能产业正从模型能力竞争逐步转向规模化应用竞争,应用形态也从单一问答扩展到多智能体协作、长链路推理和复合任务执行,这使得Token需求快速增长。与此同时,算力采购、部署和运行过程中的设备和能源成本持续攀升,导致算力投入与实际Token产出之间的不匹配问题日益突出,围绕Token推理效率开展系统优化,已成为推动产业持续发展的关键环节。

  近日,全球领先的高效能AI Token生产服务商趋境科技,正式发布全新一代AI推理平台——趋境ATaaS高效能AI Token生产服务平台(Approaching.AI Token as a Service),旨在破解大额硬件投入难以转化为优质Token产能、资源浪费与成本空耗突出的行业困境。

  针对当前行业核心难题,趋境ATaaS平台依托四大自研核心技术模块,构建起覆盖异构整合、智能调度、弹性扩容的全链路能力,将算力与能源封装为分层、面向具体应用场景定制的高效能Token服务,为国产算力提质增效、破解异构算力孤岛、实现规模化降本增效,提供了标杆级中国方案。

趋境科技发布ATaaS:打造高效能AI Token生产服务平台

  四大产业痛点凸显 硬件高投入难换高效Token产出

  当前AI产业发展中,Token生产领域面临四大突出困境,导致硬件高投入无法转化为高效Token产出,制约产业规模化发展:

  一是硬件负载分化,过度依赖GPU导致资源闲置空耗。传统Token生成链路重度依赖GPU,而CPU、大容量内存、集群SSD及IB高速互联等昂贵资源长期利用率不足10%,全系统硬件资源利用率不足20%,造成智算集群规模化刚性成本巨额空耗。

  二是软硬件迭代失衡,软件适配滞后拖累算力发挥。硬件标称算力虽持续提升,但软件层在通信、访存和算子融合等方面优化不足,PD/PP/CP/DP等分布式并行策略在复杂组合下稳定性有限,最终导致超80%理论算力难以充分利用。

  三是算力配置失准,粗放盲配引发资源冗余损耗。当前集群算力配置难以依据不同推理业务在时延、吞吐和稳定性上的差异化要求,精准匹配CPU、GPU、内存等异构资源,统一部署和粗放配额仍较常见,导致超过50%的算力资源被隐形浪费。

  四是架构演进失衡,拼接式集成难以支撑规模化生产。开源生态为大模型推理提供了丰富模块,但在大规模集群场景下,单靠组件拼接难以解决系统级协同问题,原生架构对KV Cache、序列长度等模型态关键参数感知不足,易引发负载失衡,叠加通信阻塞和服务波动等因素,系统扩展后常面临性能下降与运维复杂度上升,无法支持大规模高效能Token生产。

  四大核心技术破局 趋境ATaaS重构Token生产效能曲线

  趋境科技提供高效能Token的本质,是重构算力、电力与Token产量之间的效能曲线。ATaaS并非简单的资源供给平台,而是效能放大器——用软件撬动数倍于当前的Token产能,其四大自研核心技术精准破解行业痛点:

趋境科技发布ATaaS:打造高效能AI Token生产服务平台

  六合:异构推理2.0|全球首创大模型计算逻辑重构技术。深度融合CPU+GPU、国产与非国产算力异构PD分离等技术,重构模型计算逻辑,并基于算子与任务特征进行智能分流:CPU承载低计算密度任务,国产算力卡处理高密度Prefill,大显存显卡承载高访存Decode,可使万卡级智算集群整体运营成本压降20%以上。

  月饼:以存换算2.0|全球首创超体量KV Cache缓存技术。通过架构重构,将原本依赖昂贵显存承载的KV Cache存储空间扩展百倍至千倍,形成近乎无限的缓存池资源,缓存命中率最高可达90%,直接削减90% GPU算力开销。

  双仪:虚实同构|全球首创算子级SLO仿真。基于算子级精细仿真,推演大模型Token生成全链路的吞吐、时延与访存表现,实现算力资源的智能预规划与动态调优;围绕业务SLO分级需求,精准切分异构算力配额并隔离资源优先级,可将万卡级智算集群硬件综合资源利用率最高提升数倍。

  万象:极致弹性|打通规模化量产最后壁垒。依托系统化工程能力,实现万亿参数大模型7秒快速拉起与动态配置变更、数百节点超大规模EP弹性调度,以及智能容灾重构和负载均衡,形成平台原生支持万卡级高性能横向扩展的关键能力。在落地初期,便推动某在线公司的AI业务实现千卡集群吞吐翻倍提升。

  从“数据中心”到“Token工厂” 引领AI基础设施迭代升级

  趋境ATaaS高效能AI Token生产服务平台的发布,体现了AI基础设施发展重点的进一步演进。当前,行业关注的焦点正从单纯的算力规模竞争,转向对Token生产效率的综合衡量,其中包括Token响应延时(TTFT)、Token吞吐(TPS)以及资源利用效率等关键指标。

  这一理念与当前行业共识高度契合——当黄仁勋宣布NVIDIA的1万亿美元需求预测,当Token“供不应求”成为常态,算力基础设施正从“数据中心”演进为“Token工厂”。

  作为高效能AI Token生产服务商,趋境科技依托长期的团队积累和推理优化能力,推出趋境ATaaS平台的意义不仅在于拓展了推理基础设施的技术边界,更在于为AI基础设施的建设和运营提供了新的思路和行业标准:通过提升算力调度效率、优化推理过程、增强资源协同能力,使每单位算力和能耗投入都能够数倍转化为更稳定、更可衡量的Token价值产出,为AI产业规模化落地注入强劲动力。(战钊)

[ 责编:张佳兴 ]
阅读剩余全文(

相关阅读

您此时的心情

光明云投
新闻表情排行 /
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 天安门下半旗悼念朱镕基同志

  • 浙江诸暨:乡村传统建筑变身特色文化空间

独家策划

推荐阅读
5天赛程,51个项目,1301场比赛……日前,记者从北京市政府新闻办公室获悉,第二届世界人形机器人运动会将于8月22日在国家速滑馆“冰丝带”开幕。
2026-08-18 10:14
8月15日,承载着亿万公众对良好生态环境期盼的《中华人民共和国生态环境法典》开始施行,标志着我国生态环境保护迈入“法典化”时代。生态环境法典有哪些亮点和创新?如何做好法典的学习、宣传与实施工作?
2026-08-18 10:11
一系列政策“组合拳”为智能农机从研发到应用构筑了全链条支持体系,为现代农业注入强劲动力。
2026-08-18 10:10
今年上半年,我国新能源和可再生能源发展总体保持平稳态势,可再生能源发电装机达24.55亿千瓦,占全国电力总装机的60.7%,其中风电光伏发电装机(约19.5亿千瓦)占比接近一半,太阳能发电装机与燃煤发电装机基本持平。
2026-08-18 10:06
在国际标准组织量子技术联合技术委员会(IEC/ISO JTC3)第五次全体会议期间,我国牵头的多项量子技术国际标准提案取得积极进展。
2026-08-18 10:02
业界普遍认为,人形机器人将成为继计算机、智能手机、新能源汽车之后的下一代颠覆性产品。
2026-08-18 07:09
脑机接口、空中“飞的”、量子通信……今天的安徽,前沿科技早已褪去“高冷”,不断向下扎根,托起民生幸福。”  
2026-08-17 10:13
记者张胜日前从生态环境部获悉,当前我国已基本建成覆盖全面、要素齐全、布局合理的国家监测网络,共布设各类国控监测站点5.8万个,8颗生态环境卫星组网运行。这位负责人表示,面向“十五五”,生态环境部将聚力打造“全域感知、人机协同、自主可控、智能高效”的国家监测网络2.0版本,支撑美丽中国建设取得新的重大进展。
2026-08-17 10:12
理想的钙钛矿太阳能电池须至少满足两个要求——效率要高,还得用得久。“等离子体驱动的界面重构,突破了传统气相、液相、固相钝化方法在可控性、大面积均匀性上的限制,为未来高性能钙钛矿光伏组件产业化制备提供了重要技术参考。正因如此,科学家才将它定为未来光伏技术的重要候选活性层材料之一。
2026-08-17 10:12
记者从安徽农业大学获悉,8月16日,在广西南宁召开的第32届全国大豆科研生产研讨会上,该校王晓波教授代表研发团队发布了大豆领域垂直大模型“丰菽”2.0。
2026-08-17 10:11
2025年秋,南宁五象新区新兴科技园,一所由桂林电子科技大学牵头联合香港科技大学、香港科技大学(广州)等高校共建的“广西人工智能学院”正式开学。学院将充分利用广西面向东盟的独特区位优势,加快与更多东盟国家高校共建人工智能联合实验室,推动人工智能技术普惠发展,助力将中国-东盟国家人工智能应用合作中心建设成为双方人工智能合作的“第一站”。
2026-08-17 10:11
一台能扛17级超强台风的漂浮式风机,究竟是如何造出来的?关键零部件怎样实现全部国产化?记者日前走进位于浙江省温州市的金风科技温州深远海风电零碳总部基地总装车间,
2026-08-14 03:55
13日,我国首艘国产大型邮轮“爱达·魔都号”以深圳为母港正式首航。该轮全长323.6米,总吨位13.62万吨,停靠于深圳国际邮轮母港一号泊位。
2026-08-14 03:55
13日,国家石油天然气基础设施重点项目——连云港至仪征原油管道工程连云港至淮安段(以下简称“连仪管道连淮段”)投产一次成功。
2026-08-14 03:55
当前,新一轮科技革命和产业变革加速演进,全球科技竞争呈现体系化、全链条博弈特征,核心技术攻坚成为竞争焦点。近年来,我国科技创新投入持续增长、创新实力稳步提升。
2026-08-14 03:55
水深超过6000米的深渊是地球最深处最极端的环境,一度被视为“生命禁区”,但其中也有微生物“绿洲”。
2026-08-14 03:55
全球人工智能治理已进入深水区
2026-08-14 04:40
在技术层面,根据信号采集方式的不同,脑机接口可分为非植入式与植入式两大类。从科幻场景落地现实应用,脑机接口的研发初衷并非打造“超人”,而是帮助残障病患重建行动与交流能力。
2026-08-13 09:48
2025国际数字能源展上的深圳虚拟电厂管理中心展区。国家能源局公布的数据显示,截至2025年底,全国已建成470个虚拟电厂项目,实测最大调节能力1685万千瓦,形成全球规模领先的虚拟电厂集群。
2026-08-13 09:46
深远海风电开发,输电是关键一环。亚洲首个采用柔性直流输电技术送出的海上风电项目——三峡新能源江苏如东800兆瓦海上风电项目近日交出答卷:截至8月11日,累计发电量突破100亿千瓦时。
2026-08-13 09:44
加载更多