点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:思想+技术沙龙:高效存储架构与服务器变革实践
首页> 科技频道> 互联网 > 正文

思想+技术沙龙:高效存储架构与服务器变革实践

来源:光明网2024-08-15 17:16

  近日,以“高效存储架构与服务器变革实践”为主题的思想+技术沙龙在北京举行,来自清华大学、快手、美团、金山、磐吉云数、浪潮信息等高校、知名企业、研究机构的产学研专家、互联网行业大咖再度聚首,基于服务器硬件和存储软件平台两个维度,探讨解决企业存储引擎关键痛点的硬件规划路径,从而找到适用于存储业务不同发展阶段,并匹配“安全”“性能”“降本”诉求的基础设施选型方向。

  浪潮信息互联网行业部产品总监王帅在《云存储驱动下的服务器创新实践》主题演讲中表示,过去10年间,高密存储机型规划主要围绕提升存储密度、降低存储功耗两个关键要素,将单盘容量和单机密度提升作为硬件规划的主要方向。从2020年开始,高密存储机型迭代速度放缓,单纯的容量或密度提升已不再是企业用户核心诉求,预计在未来3年,当前最具代表性的4U60盘高密存储服务器仍将是高密存储最主流的产品形态。而存储介质和网络带宽的持续优化将更加受到关注,同时考虑用户对业务高效匹配、成本极致优化、存储IO性能提升、集群稳定可靠、运维简便部署的五大基础诉求,浪潮信息未来也将持续为用户打造满足互联网行业业务需求的产品。

  清华大学副教授陆游游做了《SuperFS: 高速硬件时代的文件系统》主题演讲,分享了清华大学计算机系存储实验室围绕计算领域所做的新一代存储系统探索。他表示,随着超级计算步入千万核时代,存储成为影响计算性能发挥的重要瓶颈,存在存储架构繁冗、元数据管理低效、I/O干扰严重、软件开销大四个关键问题。清华大学通过打造SuperFS高性能文件系统,在数据部分通过数据直通等技术,用5台存储节点达到了179.6GB/s,带宽性能达到硬件理论性能的90%以上。在元数据部分,通过低开销索引等技术大幅度降低了软件依赖开销,元数据性能远超其他存储系统。

  某互联网公司大数据存储负责人贾宇晗在《高效分布式存储架构优化与基础设施选型实践》主题演讲中分享了内部搭建的云存储平台,借助超低延迟RDMA网络、用户态NVMe、SPDK全新存储架构,提供高性能、低成本、高可用、安全可靠的一体化存储方案,支持容器CSI、虚拟化、AI大模型、大数据存储,助力客户业务全面上云。 此外,通过资源整合、分布式缓存、数据治理优化存储架构,实现硬件成本、服务成本和业务成本的降低。同时,也指出了未来存储软件的发展趋势:一是从私有化部署转向云原生;二是由独立存储向统一存储发展,包括统一存储底座和接入层的统一;三是通过生命周期、数据血缘、数据分层、服务管控、行为审计等诸多产品形态的完善让管理者更了解服务和业务,让使用者更了解数据。

  随着AIGC驱动与数据中心级应用对存储IO性能要求的提升,全闪分布式存储与NVME存储介质迎来了高速增长。浪潮信息的《面向AIGC的分布式融合全闪存储》主题演讲中,分布式存储产品线总经理姜乐果指出:面向大模型训练需要有领先的算法和优质的算力,同时高质量的数据也是支撑大模型训练的关键要素之一。浪潮信息提供了基于AS13000G7的AIGC存储解决方案,更成熟、更简约、更高效,是助力大模型训练落地的坚实存储底座。目前已完成国内数十个大模型客户交付,数据处理时间节省30%,整体性能提升160%,运维效率提升50%。

  浪潮信息SSD产品线总经理王杰华分享了《浪潮信息企业级SSD技术发展与应用实践》,指出:存储整体呈现出高性能的技术要求,QLC NAND关键技术成熟,读性能接近TLC,延迟达到100μs,性价比优势凸显,伴随NAND成本的优化,未来有机会在读IO密集的场景实现对HDD的替换。此外,浪潮信息积极围绕应用感知开发定制化特性产品,已经完成ZNS的产品化和Multi-Stream的技术开发。在云存储场景,ZNS SSD表现出三倍于传统NVMe SSD的写入带宽性能;Multi-stream多流应用,在部分场景下收益达到37%-73%。

  除以上主题分享之外,OCP中国社区负责人、浪潮信息首席架构师叶毓睿主持并邀请了清华大学、磐吉云数、浪潮信息等多位嘉宾参与了以《生成式AI对存储系统的挑战与机遇》为主题的圆桌对话,讨论了大模型、AIGC与RAG应用等对存储系统的需求,以及技术和应用演进带给存储架构的冲击。

  数据是支撑计算的重要基石,是千亿级模型精度优化的保障。浪潮信息将继续携手互联网用户,发挥JDM优势,基于业务应用对存储底座的需求特点,从存储服务器硬件、存储软件和存储介质三个维度,持续打造高收益、高可用的软硬件产品。(科轩)

[ 责编:张佳兴 ]
阅读剩余全文(

相关阅读

您此时的心情

光明云投
新闻表情排行 /
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 铁路迎来中秋小长假客流高峰

  • 青春版《牡丹亭》走进北京大学

独家策划

推荐阅读
在知识产权保护的基础上,发展中部地区地理标志特色产业,对于促进当地乡村全面振兴,赋能经济高质量发展,意义重大。
2024-09-14 09:43
据《全国科技小院发展报告(2024)》显示,自2009年第一个科技小院成立以来,科技小院数量快速增长、参与主体愈加丰富,目前全国已建成1800多个科技小院,157个研究生培养单位参与其中,参与专家达2700余名、入驻研究生1万余名。科技小院发展模式日益成熟,成为推动乡村全面振兴的重要组织力量。
2024-09-14 09:42
药品监管部门坚持以“四个最严”要求为根本遵循,着力统筹发展和安全,统筹效率和公平,统筹监管和服务,有效保障药品安全形势总体稳定,促进医药产业高质量发展。今年1至8月,国家药品抽检共计20696批次,合格率为99.43%。
2024-09-14 09:34
国内首台工业级盾构滚刀智能换刀机器人、全球首款人工智能骨科手术机器人、元宇宙数实融合应用……
2024-09-14 09:32
医生在浙江,患者在新疆。一场跨越近5000公里的5G超远程机器人肝脏肿瘤切除手术正在进行。只见医生在机器人手术操作台上,灵活地操控机械臂;手术室中,机械臂收到指令,精准地完成各项手术动作……目前,浙江各医院已完成50余例援疆5G超远程机器人手术。
2024-09-14 09:31
每一项重大科技应用取得突破前后,均有对其理论上的持续争论。著名小说《仿生人会梦见电子羊吗?》引发的人与仿生人之间界限的讨论虽产生于20世纪,但一直延续至今,其蕴含的法律问题是人工智能究竟是否具备法律人格。
2024-09-13 10:14
移动物联网是以移动通信技术和网络为载体,通过多网协同实现人、机、物泛在智联的新型信息基础设施。
2024-09-13 10:14
据了解,“晓医”依托讯飞星火医疗大模型,基于大量资深中医诊疗经验和专业知识图谱数据,构建了规模大、覆盖病种全的知识库,包括中医病症知识“400+”种、穴位知识“400+”种、常用中草药“300+”种、古代医案“6200+”份等。
2024-09-13 10:13
目前,北京市已成为国内集成电路产业聚集度最高、技术水平最先进的区域之一,拥有涵盖“设计、制造、封测、装备、零部件及材料”的完备产业链条,呈现出以设计和制造为引领、装备强势支撑、封测加速成长的态势,形成以集成电路双“1+1”工程等新代际重大项目为带动,北方华创等龙头企业为牵引的快速发展态势。
2024-09-13 10:12
这是该量子随机数发生器芯片继今年3月取得国家密码管理局商用密码中心检测报告后的又一重大进展,进一步加速国产量子安全产品的规模化应用落地。
2024-09-13 09:12
今年是美敦力全球创新75载及在华全面发展35周年的重要里程碑
2024-09-12 20:41
小浪底水利枢纽是黄河干流三门峡水利枢纽以下唯一能够取得较大库容的控制性工程。今年9月12日是小浪底水利枢纽主体工程开工30周年的日子。
2024-09-12 10:26
新中国成立75年,写下了农业发展巨变的伟大历史篇章。党中央强农惠农富农政策,让“中国人的饭碗牢牢端在自己手中”有了新底气,让农民世代居住的绿水青山变成“金山银山”有了新希望。
2024-09-12 10:24
记者调查发现,免密支付、先用后付、极速付款、小额自动扣费等网络支付设置,这些支付手段在为网购服务提供便利的同时,却让不少消费者头疼不已,甚至有时候一不小心误操作就掉进陷阱,“莫名其妙”就花了钱。
2024-09-12 10:23
9月12日是中国预防出生缺陷日,今年活动的主题是“预防出生缺陷,守护生命起点健康”。
2024-09-12 10:21
截至9月9日16时,海南省12345热线受理涉及台风“摩羯”的相关诉求60536件,办结45964件。
2024-09-12 10:15
10日,首批6辆身着轻薄碳纤维复合材料“外衣”的重载铁路货车缓缓驶出生产线,展现出轻量化智能化的“科技范”,标志着全球首批碳纤维复合材料轻量化重载铁路货车正式下线。
2024-09-11 04:25
近年来,随着深度神经网络技术特别是AI(人工智能)算法模型的出现,AI绘画加速发展。AI绘画是继CG绘画(计算机生成绘画,即在平面设计软件辅助下进行绘画)、DSE绘画(数字特效绘画,
2024-09-11 04:25
NGC 4278具有致密的对称射电喷流结构和相对较弱的射电辐射,但其甚高能伽马射线辐射效率却显著高于射电星系,与耀变体相当。
2024-09-11 09:57
记者10日从中国航天科技集团六院获悉,当天,该院165所铜川试验中心亚洲最大高空模拟试验台考台圆满成功。
2024-09-11 09:56
加载更多