点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:开启AIGC新局面 浪潮信息让生成式AI智慧有数
首页> 科技频道> 创新创业 > 正文

开启AIGC新局面 浪潮信息让生成式AI智慧有数

来源:光明网2023-07-10 10:30

  当前,生成式AI(AIGC)已经成为AI产业化发展的主战场,随着大模型参数量和数据量的爆发式增长,多源异构数据的传、用、管、存,正在成为制约生成式AI落地的瓶颈之一。为了化解生成式AI的数据存储与管理瓶颈,浪潮信息在“数智未来”AIGC数据应用创新论坛上,正式发布面向生成式AI的存储解决方案,该方案以极致融合、极致性能、极致节能,和热温冷冰四级数据全生命周期管理,助力开启生成式AI新局面,创造智慧时代新机遇。

  生成式AI亟待突破多源异构和存储性能瓶颈

  生产式AI是人工智能从1.0时代进入2.0时代的重要标志,其具备强大的认知智能,在搜索引擎、艺术创作、影音游戏,以及金融、教育、医疗、工业等领域有着广阔的应用前景。Gartner预测,到2023年将有20%的内容被AIGC所创建;到2025年人工智能生成数据占比将达到10%。据分析师预测,到2032年,生成式人工智能市场规模将达到2,000亿美元,占据人工智能支出总额的约20%,显著高出当前的5%。换言之,未来十年市场规模可能每两年就会翻一番。

  生成式AI主要应用场景涵盖文本生成、语音生成、图片生成、视频生成、代码生成、虚拟人生成等,在每种应用的背后是基于行业上下游对数据进行采集、标注、训练、推理、归档,其特征是数据量大、多元数据类型复杂、服务协议多样、性能要求苛刻、要求服务持续在线。生成式AI对数据存储提出如下挑战:

  异构数据的融合:生成式AI训练模型的数据呈现来源多、格式多的多源异构现状,传统存储面向单一数据类型设计,需要以搬移数据的方式实现多协议访问,存储成为应用平台的关键瓶颈;

  持续的低延迟与高带宽:模型训练过程中,频繁地从数据集取Token,每个Token一般4字节,实时高并发小IO性能需要极低的延迟;存储模型Checkpoint时,为Checkpoint数据可快速写入,需要高带宽;

  EB级大容量存储需求:越多的数据投喂结果越精准的工作原理,决定了大模型训练存在深度学习网络层数多、连接多、参数和数据集种类复杂、数据量大的特征,随着模型参数和数据量的快速增长,对于存储的大容量和扩展需求也迫在眉睫。

  数据存储产业需要进行全方位的技术升级,通过在多源异构融合、数据高速传输、海量数据管理等方面持续创新,打造专业的生成式AI存储产品与解决方案。

  浪潮信息让生成式AI智慧有数

  浪潮信息是最早布局大模型的企业之一,打造了算力、算法、数据全栈的解决方案能力。在数据存储领域,浪潮信息准确识别行业痛点、积极布局,经过持续攻关,在融合存储架构、系统性能设计、数据全生命周期管理算法等方面不断突破,打造出生成式AI存储解决方案。

  浪潮信息生成式AI存储解决方案基于AS13000融合存储系统,可以支撑AIGC产业上中下游业务应用,并针对不同业务阶段的数据存储需求,提供热温冷冰四级存储,实现数据在各级存储间自动流转。用高性能节点形态来满足数据训练、数据推理两个阶段的高带宽、低延时、高并行读写性能存储需求,用大容量节点形态来满足数据采集、数据准备、数据归档三个阶段的海量多元数据存储需求,方案具备极致融合、极致性能、极致节能三大能力,以及热、温、冷、冰四级数据全生命周期存储管理能力,助力生成式AI突破海量数据存力瓶颈,加速释放数据的价值。

  目前,浪潮信息生成式AI存储解决方案已经在全球领先的中文语言大模型“源1.0”中成功落地,面对千亿级参数量和数据量带来的挑战,浪潮信息通过AS13000高吞吐并行存储系统实现了多存储协议互通、数据融合,利用全闪的极致性能,助力“源1.0”大模型实现了16天完成训练的超高效率。国内AI独角兽公司采用浪潮信息提供的并行文件存储,承载5000亿参数量的NLP语言类大模型的数据集Token和CheckPoint文件,轻松应对大/小文件的读写挑战,配置AS13000全闪存储集群,支持高性能RocE组网和GPU直通存储功能,带宽超过300GB、存储性能超过350万 IOPS,保证存储集群的高可用与敏捷扩容。

  面对生成式AI掀起的变革热潮,谁能掌握数字化变革的先机,谁就能把握未来AI革命的致胜关键,而数据底座将成为千行百业创新变革的重要基石。浪潮信息存储秉承“存储即平台”的产品理念,精耕数据存储产品与解决方案,携手合作伙伴,助力生成式AI在金融虚拟客服、图片编辑设计、智能驾驶、跨模态检索等场景的落地,激活数据要素新潜能,驾驭智慧化转型新趋势,在机遇与挑战并存的新格局下,为行业转型注入新价值、新动能。(柯岩)

[ 责编:战钊 ]
阅读剩余全文(

相关阅读

您此时的心情

光明云投
新闻表情排行 /
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 大阪世博会中国馆举行中国电影日活动

  • 赞比亚举行隆重活动纪念“非洲日”

独家策划

推荐阅读
据两位消息人士透露,英伟达还在为中国开发另一款采用Blackwell架构的芯片,最早可能于9月开始生产。
2025-05-26 12:51
研究人员成功诱导干细胞发育成充满液体的羊膜囊。这种模型囊体直径约2厘米,相当于一个4周胚胎周围羊膜囊的实际大小,可用于研究早期妊娠。
2025-05-26 09:21
你有过牙齿酸酸胀胀的体验吗?这会让我们真切地感受到牙齿有多敏感。其实,在咀嚼食物时,这种敏感性大有用处,它能提供关于温度、压力,还有疼痛方面的重要信息。
2025-05-26 09:18
最新一期《自然》杂志发表的论文报告发现一个原以为“不可能存在”的神秘结构。
2025-05-26 09:18
阿尼玛卿雪山保存着50余条冰川,年均径流量占黄河上游总流量35%,其变化对黄河流域水资源具有重要影响。
2025-05-26 09:16
如今,在各地田间地头,植保无人机凌空起舞、无人拖拉机破土前行、水肥一体精准施肥、北斗导航精准播种、智能机器人全天候巡检……科技感十足的农耕图景随处可见。
2025-05-26 09:15
可持续的减肥从不靠极端节食,而是科学的生活习惯。
2025-05-23 13:30
邓宏章对此形象地比喻:“传统LNP像‘硬闯城门’的士兵,难免伤及无辜;而TNP则是‘和平访问’的来客,以最小代价达成使命。”
2025-05-23 13:13
加强统筹协调,健全部际协同、央地协作、区域合作的工作机制,创新体制机制,加大政策支持,加强统计监测,深化开放合作,着力提升科技服务业发展环境。
2025-05-23 13:50
以“矢志创新发展,建设科技强国”为主题的第九个全国科技工作者日系列活动将于近期陆续开展。
2025-05-23 13:01
这一发现对恒星演化理论、致密星吸积物理和双星并合引力波源研究具有重要意义。
2025-05-23 08:01
若不采取紧急行动,到2030年,全球至少半数青少年(超10亿人)将生活在健康风险高发的“多重负担国家”,面临HIV感染、早孕、抑郁、营养不良等多重威胁。
2025-05-23 09:13
中国科学技术大学生命科学与医学部薛天、马玉乾团队与国内外科研机构合作,制备出高透明、高转化效率的上转换隐形眼镜,可实现人类近红外时空色彩图像视觉能力。相关研究成果5月22日在线发表在国际期刊《细胞》上。
2025-05-23 08:55
近年来,中国坚定走生态优先、绿色发展之路,着力完善生物多样性保护空间格局、强化生物多样性监督管理、织密生物多样性保护制度网,生物多样性保护水平稳步提升。
2025-05-23 08:53
这是进入空间站应用与发展阶段以来,航天员首次通过天和核心舱节点舱出舱,航天员出舱与货物出舱任务首次关联耦合实施。
2025-05-23 08:51
在5月30日第九个全国科技工作者日到来之际,中国科协22日举行新闻发布会介绍今年的全国科技工作者日系列活动:中国科协层面将举办1个主场活动,省级科协层面将推出2300余项特色活动,百余家全国学会将开展各类活动,50余个高校科协及企业科协等基层组织将开展200余项活动。
2025-05-23 09:04
5月22日,小米15周年战略新品发布会在北京召开,小米正式发布首款3nm旗舰处理器“玄戒O1”。
2025-05-22 21:54
联合国秘书长古特雷斯指出,生物多样性是生命网络的经纬,更是人类文明的基石,而今这张网络正被快速撕裂。联合国也呼吁各国迅速编制与KMGBF目标一致的国家生物多样性战略和行动计划,并纳入国家可持续发展战略中。
2025-05-22 09:44
自然界中,鱼类能在水流复杂多变的水下灵活游动、避开障碍,主要得益于身体两侧能感知水流变化的侧线系统。
2025-05-22 09:42
自然资源是人类生存发展的重要基础,人与自然和谐共生离不开对自然资源的高水平保护和高效率利用。保护和利用好自然资源的奋斗路上,有哪些难忘的故事?
2025-05-22 04:35
加载更多