点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:思想+技术沙龙:高效存储架构与服务器变革实践
首页> 科技频道> 互联网 > 正文

思想+技术沙龙:高效存储架构与服务器变革实践

来源:光明网2024-08-15 17:16

  近日,以“高效存储架构与服务器变革实践”为主题的思想+技术沙龙在北京举行,来自清华大学、快手、美团、金山、磐吉云数、浪潮信息等高校、知名企业、研究机构的产学研专家、互联网行业大咖再度聚首,基于服务器硬件和存储软件平台两个维度,探讨解决企业存储引擎关键痛点的硬件规划路径,从而找到适用于存储业务不同发展阶段,并匹配“安全”“性能”“降本”诉求的基础设施选型方向。

  浪潮信息互联网行业部产品总监王帅在《云存储驱动下的服务器创新实践》主题演讲中表示,过去10年间,高密存储机型规划主要围绕提升存储密度、降低存储功耗两个关键要素,将单盘容量和单机密度提升作为硬件规划的主要方向。从2020年开始,高密存储机型迭代速度放缓,单纯的容量或密度提升已不再是企业用户核心诉求,预计在未来3年,当前最具代表性的4U60盘高密存储服务器仍将是高密存储最主流的产品形态。而存储介质和网络带宽的持续优化将更加受到关注,同时考虑用户对业务高效匹配、成本极致优化、存储IO性能提升、集群稳定可靠、运维简便部署的五大基础诉求,浪潮信息未来也将持续为用户打造满足互联网行业业务需求的产品。

  清华大学副教授陆游游做了《SuperFS: 高速硬件时代的文件系统》主题演讲,分享了清华大学计算机系存储实验室围绕计算领域所做的新一代存储系统探索。他表示,随着超级计算步入千万核时代,存储成为影响计算性能发挥的重要瓶颈,存在存储架构繁冗、元数据管理低效、I/O干扰严重、软件开销大四个关键问题。清华大学通过打造SuperFS高性能文件系统,在数据部分通过数据直通等技术,用5台存储节点达到了179.6GB/s,带宽性能达到硬件理论性能的90%以上。在元数据部分,通过低开销索引等技术大幅度降低了软件依赖开销,元数据性能远超其他存储系统。

  某互联网公司大数据存储负责人贾宇晗在《高效分布式存储架构优化与基础设施选型实践》主题演讲中分享了内部搭建的云存储平台,借助超低延迟RDMA网络、用户态NVMe、SPDK全新存储架构,提供高性能、低成本、高可用、安全可靠的一体化存储方案,支持容器CSI、虚拟化、AI大模型、大数据存储,助力客户业务全面上云。 此外,通过资源整合、分布式缓存、数据治理优化存储架构,实现硬件成本、服务成本和业务成本的降低。同时,也指出了未来存储软件的发展趋势:一是从私有化部署转向云原生;二是由独立存储向统一存储发展,包括统一存储底座和接入层的统一;三是通过生命周期、数据血缘、数据分层、服务管控、行为审计等诸多产品形态的完善让管理者更了解服务和业务,让使用者更了解数据。

  随着AIGC驱动与数据中心级应用对存储IO性能要求的提升,全闪分布式存储与NVME存储介质迎来了高速增长。浪潮信息的《面向AIGC的分布式融合全闪存储》主题演讲中,分布式存储产品线总经理姜乐果指出:面向大模型训练需要有领先的算法和优质的算力,同时高质量的数据也是支撑大模型训练的关键要素之一。浪潮信息提供了基于AS13000G7的AIGC存储解决方案,更成熟、更简约、更高效,是助力大模型训练落地的坚实存储底座。目前已完成国内数十个大模型客户交付,数据处理时间节省30%,整体性能提升160%,运维效率提升50%。

  浪潮信息SSD产品线总经理王杰华分享了《浪潮信息企业级SSD技术发展与应用实践》,指出:存储整体呈现出高性能的技术要求,QLC NAND关键技术成熟,读性能接近TLC,延迟达到100μs,性价比优势凸显,伴随NAND成本的优化,未来有机会在读IO密集的场景实现对HDD的替换。此外,浪潮信息积极围绕应用感知开发定制化特性产品,已经完成ZNS的产品化和Multi-Stream的技术开发。在云存储场景,ZNS SSD表现出三倍于传统NVMe SSD的写入带宽性能;Multi-stream多流应用,在部分场景下收益达到37%-73%。

  除以上主题分享之外,OCP中国社区负责人、浪潮信息首席架构师叶毓睿主持并邀请了清华大学、磐吉云数、浪潮信息等多位嘉宾参与了以《生成式AI对存储系统的挑战与机遇》为主题的圆桌对话,讨论了大模型、AIGC与RAG应用等对存储系统的需求,以及技术和应用演进带给存储架构的冲击。

  数据是支撑计算的重要基石,是千亿级模型精度优化的保障。浪潮信息将继续携手互联网用户,发挥JDM优势,基于业务应用对存储底座的需求特点,从存储服务器硬件、存储软件和存储介质三个维度,持续打造高收益、高可用的软硬件产品。(科轩)

[ 责编:张佳兴 ]
阅读剩余全文(

相关阅读

您此时的心情

光明云投
新闻表情排行 /
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 倒计时2天!人工智能安全治理分论坛即将举行

独家策划

推荐阅读
走进展区,多款新潮文创让人爱不释手;戴上设备,苏轼笔下的诗词世界任人遨游;指尖轻点,三千年前的青铜器“触手可及”……一系列新产品、新服务、新场景在2025年中国国际服务贸易交易会文旅服务专题亮相,漫步其中,处处感受到科技与创意奔涌、文化和旅游融合的无限活力。
2025-09-15 09:54
在2025年中国国际服务贸易交易会上,一批品类丰富、兼具趣味与文化内涵的文创精品成为展会现场的“人气王”,引爆观展热潮。
2025-09-15 09:54
最大网络基础设施的建成有助于我国突破关键技术的“卡脖子”困境,形成自主可控的核心技术优势,建立起数字经济产业的第二创新生态。 (作者:戎 珂,系清华大学社会科学学院经济学研究所所长、长聘教授;田晓轩,系清华大学社会科学学院经济学研究所博士研究生)
2025-09-15 09:53
今年暑期,工厂游火爆出圈。参观名额秒空、门票收入可观、社交平台相关笔记有10多万条,工厂游俨然成了文旅界新宠。 工厂游等新型旅游业态,实现了工业与文旅的跨界融合,也为文旅经济的发展提供了新增长点。
2025-09-15 09:52
深夜,河南焦作多氟多新材料股份有限公司的实验室依旧灯火通明,总工程师闫春生还在带着团队忙碌。 2006年,多氟多打响了由传统氟化工向精细氟化工、新能源材料转型的战役,闫春生临危受命加入六氟磷酸锂研发团队。
2025-09-15 09:51
2025年中国国际服务贸易交易会9月10日至9月14日在北京举办,众多科技产品亮相展区,吸引观众驻足参观。2025年中国国际服务贸易交易会9月10日至9月14日在北京举办,众多科技产品亮相展区,吸引观众驻足参观。
2025-09-12 10:08
汽车排放被认为是气候变化的“元凶”之一,但学术界一直缺乏对城市道路碳排放进行精准刻画的工具。”借助全景AI模型,可实现二氧化碳排放源的精准提取,模型的平均精度超过93%、平均误差低于1.3ppm(ppm为百万分比浓度)。
2025-09-12 10:01
习近平总书记指出:“要把握人工智能发展趋势和规律,加紧制定完善相关法律法规、政策制度、应用规范、伦理准则,构建技术监测、风险预警、应急响应体系,确保人工智能安全、可靠、可控。人工智能系统的可靠性不能停留在统计意义上的“高概率正确”,而应追求在复杂、开放、动态环境下的“高置信可靠”。
2025-09-12 10:01
10日,2025世界顶尖科学家协会奖(以下简称“顶科协奖”)获奖者名单在上海公布。顶科协奖是2021年在上海发起创设、由红杉中国独家提供永久资金支持的面向全球科学家评选的科学大奖。
2025-09-12 09:59
全球规模最大恐龙蛋化石群——湖北十堰青龙山恐龙蛋化石群的埋藏时代,首次被科学家认定为距今约8600万年。专家考证,这是迄今全球分布最集中、规模最大、埋藏最好、原地出露最多、原址保存最好的恐龙蛋化石群。
2025-09-12 09:58
9月10日上午,在马来西亚吉隆坡召开的国际灌排委员会第七十六届国际执行理事会会议上,2025年(第十二批)世界灌溉工程遗产名录正式公布,我国申报的云南元阳哈尼梯田、江苏句容赤山湖灌溉工程、四川彭州湔江堰、北京门头沟永定河古渠灌溉工程全部成功入选。
2025-09-11 10:18
“十四五”以来,我们牢固树立和践行绿水青山就是金山银山的理念,全力当好自然资源“大管家”和美丽中国“守护者”,全面完成了“十四五”规划的目标任务,有效支撑了经济社会的高质量发展。
2025-09-11 09:57
未来,城市的画卷上,AI、物联网与大数据等现代科技将继续深化推广,但唯有始终以人的尺度丈量技术,以人文的关怀驾驭创新,方能使城市永葆文气的深度、人气的热度与烟火气的温度,让每座城市都在科技的守护中,找到生生不息的发展动能。
2025-09-11 09:52
北京大学的科研团队与合作者联合开发出一种全新的“高维超分辨成像”技术,成功实现了对活细胞内15种细胞器的同时成像与精准识别,为细胞生物学研究打开了一扇全新的大门。
2025-09-11 09:43
要为“年纪尚小”的新职业破解“成长的烦恼”,不仅要完善新职业的职业标准和评价规范,还要有能跟上步伐的教育培训和职业培训,为新职业从业者提供支持政策,提升社会保障水平,以更好的保障制度、更强的身份认同感、更完善的培养体系为新职业就业者提供更广阔、更精彩的发展舞台,让他们在与时代“同频共振”的岗位上实现人生价值,也为创新创造的活力涌动持续贡献力量。
2025-09-11 09:39
宋美珍是中国农科院西部农业研究中心的棉花研究专家。2012年起,她和团队将目光瞄准新疆的棉花种植,成为当地棉花研究的一支重要技术力量。
2025-09-10 10:09
“十四五”以来,我国制造业增加值每年均超过30万亿元,总体规模稳居全球制造业首位。这份沉甸甸的成绩单,印证着推动新型工业化取得的新进展新成效。
2025-09-10 09:47
9月9日,2025年中国国际服务贸易交易会开幕前夕,记者跟随首钢媒体探营团,走进北京首钢园,提前探访服贸会的精彩内容。
2025-09-10 09:40
9日10时,我国在文昌航天发射场使用长征七号改运载火箭,成功将遥感四十五号卫星发射升空,卫星顺利进入预定轨道,发射任务获得圆满成功。
2025-09-10 09:39
光明日报北京9月9日电 记者李春剑从市场监管总局了解到,自2021年全国机器人标委会成立以来,我国已发布机器人领域国家标准126项,另有41项正在研制。近日,世界机器人大会和世界人形机器人运动会火爆“出圈”,相关产业发展引起各方热议。
2025-09-10 09:36
加载更多