点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:思想+技术沙龙:高效存储架构与服务器变革实践
首页> 科技频道> 互联网 > 正文

思想+技术沙龙:高效存储架构与服务器变革实践

来源:光明网2024-08-15 17:16

  近日,以“高效存储架构与服务器变革实践”为主题的思想+技术沙龙在北京举行,来自清华大学、快手、美团、金山、磐吉云数、浪潮信息等高校、知名企业、研究机构的产学研专家、互联网行业大咖再度聚首,基于服务器硬件和存储软件平台两个维度,探讨解决企业存储引擎关键痛点的硬件规划路径,从而找到适用于存储业务不同发展阶段,并匹配“安全”“性能”“降本”诉求的基础设施选型方向。

  浪潮信息互联网行业部产品总监王帅在《云存储驱动下的服务器创新实践》主题演讲中表示,过去10年间,高密存储机型规划主要围绕提升存储密度、降低存储功耗两个关键要素,将单盘容量和单机密度提升作为硬件规划的主要方向。从2020年开始,高密存储机型迭代速度放缓,单纯的容量或密度提升已不再是企业用户核心诉求,预计在未来3年,当前最具代表性的4U60盘高密存储服务器仍将是高密存储最主流的产品形态。而存储介质和网络带宽的持续优化将更加受到关注,同时考虑用户对业务高效匹配、成本极致优化、存储IO性能提升、集群稳定可靠、运维简便部署的五大基础诉求,浪潮信息未来也将持续为用户打造满足互联网行业业务需求的产品。

  清华大学副教授陆游游做了《SuperFS: 高速硬件时代的文件系统》主题演讲,分享了清华大学计算机系存储实验室围绕计算领域所做的新一代存储系统探索。他表示,随着超级计算步入千万核时代,存储成为影响计算性能发挥的重要瓶颈,存在存储架构繁冗、元数据管理低效、I/O干扰严重、软件开销大四个关键问题。清华大学通过打造SuperFS高性能文件系统,在数据部分通过数据直通等技术,用5台存储节点达到了179.6GB/s,带宽性能达到硬件理论性能的90%以上。在元数据部分,通过低开销索引等技术大幅度降低了软件依赖开销,元数据性能远超其他存储系统。

  某互联网公司大数据存储负责人贾宇晗在《高效分布式存储架构优化与基础设施选型实践》主题演讲中分享了内部搭建的云存储平台,借助超低延迟RDMA网络、用户态NVMe、SPDK全新存储架构,提供高性能、低成本、高可用、安全可靠的一体化存储方案,支持容器CSI、虚拟化、AI大模型、大数据存储,助力客户业务全面上云。 此外,通过资源整合、分布式缓存、数据治理优化存储架构,实现硬件成本、服务成本和业务成本的降低。同时,也指出了未来存储软件的发展趋势:一是从私有化部署转向云原生;二是由独立存储向统一存储发展,包括统一存储底座和接入层的统一;三是通过生命周期、数据血缘、数据分层、服务管控、行为审计等诸多产品形态的完善让管理者更了解服务和业务,让使用者更了解数据。

  随着AIGC驱动与数据中心级应用对存储IO性能要求的提升,全闪分布式存储与NVME存储介质迎来了高速增长。浪潮信息的《面向AIGC的分布式融合全闪存储》主题演讲中,分布式存储产品线总经理姜乐果指出:面向大模型训练需要有领先的算法和优质的算力,同时高质量的数据也是支撑大模型训练的关键要素之一。浪潮信息提供了基于AS13000G7的AIGC存储解决方案,更成熟、更简约、更高效,是助力大模型训练落地的坚实存储底座。目前已完成国内数十个大模型客户交付,数据处理时间节省30%,整体性能提升160%,运维效率提升50%。

  浪潮信息SSD产品线总经理王杰华分享了《浪潮信息企业级SSD技术发展与应用实践》,指出:存储整体呈现出高性能的技术要求,QLC NAND关键技术成熟,读性能接近TLC,延迟达到100μs,性价比优势凸显,伴随NAND成本的优化,未来有机会在读IO密集的场景实现对HDD的替换。此外,浪潮信息积极围绕应用感知开发定制化特性产品,已经完成ZNS的产品化和Multi-Stream的技术开发。在云存储场景,ZNS SSD表现出三倍于传统NVMe SSD的写入带宽性能;Multi-stream多流应用,在部分场景下收益达到37%-73%。

  除以上主题分享之外,OCP中国社区负责人、浪潮信息首席架构师叶毓睿主持并邀请了清华大学、磐吉云数、浪潮信息等多位嘉宾参与了以《生成式AI对存储系统的挑战与机遇》为主题的圆桌对话,讨论了大模型、AIGC与RAG应用等对存储系统的需求,以及技术和应用演进带给存储架构的冲击。

  数据是支撑计算的重要基石,是千亿级模型精度优化的保障。浪潮信息将继续携手互联网用户,发挥JDM优势,基于业务应用对存储底座的需求特点,从存储服务器硬件、存储软件和存储介质三个维度,持续打造高收益、高可用的软硬件产品。(科轩)

[ 责编:张佳兴 ]
阅读剩余全文(

相关阅读

您此时的心情

光明云投
新闻表情排行 /
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 合肥新桥国际机场改扩建

  • 看国球,度国庆

独家策划

推荐阅读
坚持因地制宜,理清思路、完善规划,做到宜农则农、宜林则林、宜牧则牧,把自身比较优势发挥好。
2024-09-30 10:00
作为信息通信业“风向标、晴雨表”,2024国际信息通信展日前在京落下帷幕。
2024-09-30 09:58
相信随着各项改革举措落细落实,全社会尊重和关爱妇女儿童的氛围将更加浓厚,广大妇女群体的获得感、幸福感、安全感也将不断提升。
2024-09-30 09:57
大规模设备更新关系各行各业和千家万户,既稳增长又促转型,既利企业又惠民生,具有全局性战略性意义。
2024-09-30 09:56
天峨龙滩特大桥主孔将世界混凝土拱桥跨径世界纪录一次性提高155米,比国外最大跨径混凝土拱桥大210米,建造风险大。
2024-09-30 09:55
除了在国家体育场鸟巢推出的《唐宫夜宴》,河南台的另一部大空间沉浸展《隐秘的秦陵》也在上海获得广泛关注。
2024-09-30 09:54
接下来,释放出的氢气可能与水中的二氧化碳结合形成甲烷(一种可以在火星黏土表面储存数十亿年的碳形态)。科学家提出,这些被封存的火星碳或许有一天能被回收并转化为推进剂,为火星与地球之间的未来任务提供动力。
2024-09-29 09:50
澳大利亚国立大学科学家的一项最新研究显示,地球外核存在一个与赤道平行的环状区域。液态外核内探索到的低速地震波暗示,这些轻化学元素浓度较高,可减缓地震波的速度。
2024-09-29 09:49
一个国际研究团队在理解宇宙的大尺度结构方面取得了重要进展,他们确定了被称为“引力盆地”的关键区域。这项研究加深了人们对于宇宙复杂引力动力学的理解,也让科学家更清楚地认识到塑造宇宙结构的力量。
2024-09-29 09:49
党的十八大以来,三次产业协同发展和优化升级态势更加明显,第一产业基础地位巩固夯实,第二产业加快转型升级,第三产业持续快速发展。党的十八大以来,我国把贫困人口全部脱贫作为全面建成小康社会的底线任务,汇聚全党全国全社会之力打响脱贫攻坚战。
2024-09-29 09:49
上海博物馆馆长褚晓波说,此次长江口二号古船试发掘区域位于古船南端。 国家文物局党组成员、副局长关强说,长江口二号古船考古工作站是目前我国最先进、体量最大的智能化考古专用工作站,填补了我国超大型水下文物实验室考古领域的空白。
2024-09-29 09:49
日常生活中,我们还能听到“晒太阳可以预防骨质疏松”“趴着午休会导致胃下垂”“孩子身材矮小可以打增高针”等等说法。
2024-09-27 09:20
记者在丹江口大坝现场看到,借助数字孪生技术,丹江口大坝已经建成全要素、全天候动态监控体系。据介绍,十四五以来,水利行业协作奋进,推进数字孪生水利建设取得明显进展。
2024-09-27 09:20
不到一年,杨绍辉就夺得省级职业技能大赛冠军,并被授予“山东省技术能手”称号。
2024-09-27 09:18
在算力的支持下,东数西算、东数西渲、东数西训、东数西存,应用场景更加多元,不少贵州本土企业也开始布局新的赛道。
2024-09-27 09:16
在阮祥燕的办公室里,有一张照片格外醒目——她身着蓝色手术服怀抱一名新生儿,对着镜头深情微笑。正是这名女婴的降生,让她有了“冻存婴儿之母”的称呼。
2024-09-27 09:12
我科学家团队利用化学重编程诱导多能干细胞(以下简称“CiPS细胞”)制备胰岛细胞治疗1型糖尿病。
2024-09-27 04:20
党的十八大以来,中国农业科学院基础研究重大成果不断涌现,创新水平整体跃升。数据显示,2023年我国农业科技进步贡献率达63.2%,技术进步成为推动农业现代化的重要引擎。
2024-09-26 10:23
科学的种子埋在当下,长在未来,在播种孕育的过程中,奔走在各地的科普大篷车、深入乡村基层的科普教育活动和服务平台,正不断赋予齐鲁大地科学的神奇与美好。
2024-09-26 10:17
SDG中心主任、中国科学院院士郭华东介绍,报告利用多源卫星遥感数据和人工智能算法对全球7个SDGs及中国227个可持续发展指标定量评估。
2024-09-26 10:16
加载更多