点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:思想+技术沙龙:高效存储架构与服务器变革实践
首页> 科技频道> 互联网 > 正文

思想+技术沙龙:高效存储架构与服务器变革实践

来源:光明网2024-08-15 17:16

  近日,以“高效存储架构与服务器变革实践”为主题的思想+技术沙龙在北京举行,来自清华大学、快手、美团、金山、磐吉云数、浪潮信息等高校、知名企业、研究机构的产学研专家、互联网行业大咖再度聚首,基于服务器硬件和存储软件平台两个维度,探讨解决企业存储引擎关键痛点的硬件规划路径,从而找到适用于存储业务不同发展阶段,并匹配“安全”“性能”“降本”诉求的基础设施选型方向。

  浪潮信息互联网行业部产品总监王帅在《云存储驱动下的服务器创新实践》主题演讲中表示,过去10年间,高密存储机型规划主要围绕提升存储密度、降低存储功耗两个关键要素,将单盘容量和单机密度提升作为硬件规划的主要方向。从2020年开始,高密存储机型迭代速度放缓,单纯的容量或密度提升已不再是企业用户核心诉求,预计在未来3年,当前最具代表性的4U60盘高密存储服务器仍将是高密存储最主流的产品形态。而存储介质和网络带宽的持续优化将更加受到关注,同时考虑用户对业务高效匹配、成本极致优化、存储IO性能提升、集群稳定可靠、运维简便部署的五大基础诉求,浪潮信息未来也将持续为用户打造满足互联网行业业务需求的产品。

  清华大学副教授陆游游做了《SuperFS: 高速硬件时代的文件系统》主题演讲,分享了清华大学计算机系存储实验室围绕计算领域所做的新一代存储系统探索。他表示,随着超级计算步入千万核时代,存储成为影响计算性能发挥的重要瓶颈,存在存储架构繁冗、元数据管理低效、I/O干扰严重、软件开销大四个关键问题。清华大学通过打造SuperFS高性能文件系统,在数据部分通过数据直通等技术,用5台存储节点达到了179.6GB/s,带宽性能达到硬件理论性能的90%以上。在元数据部分,通过低开销索引等技术大幅度降低了软件依赖开销,元数据性能远超其他存储系统。

  某互联网公司大数据存储负责人贾宇晗在《高效分布式存储架构优化与基础设施选型实践》主题演讲中分享了内部搭建的云存储平台,借助超低延迟RDMA网络、用户态NVMe、SPDK全新存储架构,提供高性能、低成本、高可用、安全可靠的一体化存储方案,支持容器CSI、虚拟化、AI大模型、大数据存储,助力客户业务全面上云。 此外,通过资源整合、分布式缓存、数据治理优化存储架构,实现硬件成本、服务成本和业务成本的降低。同时,也指出了未来存储软件的发展趋势:一是从私有化部署转向云原生;二是由独立存储向统一存储发展,包括统一存储底座和接入层的统一;三是通过生命周期、数据血缘、数据分层、服务管控、行为审计等诸多产品形态的完善让管理者更了解服务和业务,让使用者更了解数据。

  随着AIGC驱动与数据中心级应用对存储IO性能要求的提升,全闪分布式存储与NVME存储介质迎来了高速增长。浪潮信息的《面向AIGC的分布式融合全闪存储》主题演讲中,分布式存储产品线总经理姜乐果指出:面向大模型训练需要有领先的算法和优质的算力,同时高质量的数据也是支撑大模型训练的关键要素之一。浪潮信息提供了基于AS13000G7的AIGC存储解决方案,更成熟、更简约、更高效,是助力大模型训练落地的坚实存储底座。目前已完成国内数十个大模型客户交付,数据处理时间节省30%,整体性能提升160%,运维效率提升50%。

  浪潮信息SSD产品线总经理王杰华分享了《浪潮信息企业级SSD技术发展与应用实践》,指出:存储整体呈现出高性能的技术要求,QLC NAND关键技术成熟,读性能接近TLC,延迟达到100μs,性价比优势凸显,伴随NAND成本的优化,未来有机会在读IO密集的场景实现对HDD的替换。此外,浪潮信息积极围绕应用感知开发定制化特性产品,已经完成ZNS的产品化和Multi-Stream的技术开发。在云存储场景,ZNS SSD表现出三倍于传统NVMe SSD的写入带宽性能;Multi-stream多流应用,在部分场景下收益达到37%-73%。

  除以上主题分享之外,OCP中国社区负责人、浪潮信息首席架构师叶毓睿主持并邀请了清华大学、磐吉云数、浪潮信息等多位嘉宾参与了以《生成式AI对存储系统的挑战与机遇》为主题的圆桌对话,讨论了大模型、AIGC与RAG应用等对存储系统的需求,以及技术和应用演进带给存储架构的冲击。

  数据是支撑计算的重要基石,是千亿级模型精度优化的保障。浪潮信息将继续携手互联网用户,发挥JDM优势,基于业务应用对存储底座的需求特点,从存储服务器硬件、存储软件和存储介质三个维度,持续打造高收益、高可用的软硬件产品。(科轩)

[ 责编:张佳兴 ]
阅读剩余全文(

相关阅读

您此时的心情

光明云投
新闻表情排行 /
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 福州地铁4号线全线贯通

  • “修补巷”里便民生

独家策划

推荐阅读
加快培育壮大数据产业,以区域协同数智化发展带动数据产业集群、数字产业集群做大做强。以兼顾标准互认、质量保障和安全可信的制度体系,护航数据产品服务流通交易、变现增值。数字经济具有数据资源依赖度高、技术知识人才密集、高融合渗透性及行业覆盖面广等特点。
2025-12-11 10:16
光明日报西宁12月10日电 记者万玛加、王雯静日前从国网青海省电力公司获悉,青海电力交易中心与北京电力交易中心、吉林电力交易中心“三网”联动,共同达成跨省跨区中长期外送电力交易,交易电量自12月8日起执行至31日止,累计交易电量1876万千瓦时。
2025-12-11 10:15
2020年12月,科技部在苏州高新区等13家国家高新区启动首批试点,探索实施“创新积分制”,对企业创新能力进行量化评价,引导金融机构精准支持科技创新。联动实施“创新积分制”和科技创新专项担保计划,累计向21家银行推荐超过17万家科技型中小企业,签订贷款合同超2900亿元……
2025-12-11 10:15
2025年12月10日12时03分,中科宇航力箭一号遥十一运载火箭在东风商业航天创新试验区发射,将9颗卫星精准送入预定轨道,发射任务取得圆满成功。此次发射的卫星中,阿联酋813卫星是由上海微小卫星工程中心承研的高光谱地球观测卫星,搭载高光谱相机、全色相机及大气偏振校正仪等主载荷。
2025-12-11 10:05
12月9日,记者从中国科协获悉,中国科协生命科学学会联合体(以下简称“联合体”)发布了2025年度“中国生命科学十大进展”,6个知识创新类和4个技术创新类项目成果入选。
2025-12-11 10:02
“向精准要价值”,是一场从技术导向到需求导向的深刻转型。
2025-12-10 14:00
近十几年来,罗二仓团队聚焦采用环保工质,如氦气、氩气、氮气等绿色工质的热声斯特林技术,研发具有广阔应用前景的新一代热泵技术。
2025-12-10 09:39
中国科学院生物物理研究所徐涛院士课题组与纪伟研究员课题组研制出三维干涉定位显微镜(ROSE-3D),首次在单分子定位成像领域,实现了基于相机的纳米尺度三维各向同性分辨率。
2025-12-10 09:38
“细胞壁是质膜外具有一定硬度和弹性的细胞结构,广泛存在于植物、细菌和真菌中。随着研究逐渐深入,团队发现,在植物茎顶端干细胞区域,细胞壁的主要成分果胶呈现独特的“二元分布”模式。
2025-12-10 09:37
指令长张陆时隔两年半再度漫步太空,航天员武飞成为我国目前执行出舱任务最年轻的航天员。
2025-12-10 09:35
我国首个国家级陆相页岩油示范区——新疆吉木萨尔国家级陆相页岩油示范区9日完成年度170万吨原油生产任务,这一成果标志着国家级示范工程建设任务全面完成。
2025-12-10 09:34
一些不法商家钻监管漏洞,推出所谓“智驾神器”规避车辆安全监控,不仅严重威胁道路交通安全,更触碰了法律红线,扰乱了新能源汽车产业的健康发展秩序。
2025-12-09 10:11
一项新研究揭示了这些天体表面下可能发生的活动,为了解其多样地质特征的形成机制提供了线索。相关研究成果近日发表于《自然-天文学》。
2025-12-09 10:02
实验结果显示,将化合物注射给抑郁模型小鼠后,仅1小时便可观察到显著的抗抑郁效果,且无明显副作用。
2025-12-09 10:01
北京大学生命科学学院罗述金课题组与合作团队,通过古DNA研究发现,家猫直至唐代前后才通过丝绸之路商旅传入中国。
2025-12-09 09:58
7日,中国安全生产科学研究院与国家管网集团,在新疆哈密的国家管网集团管道断裂控制试验场,成功完成了我国首次全尺寸高压纯氢管道喷射火系列试验。
2025-12-09 09:57
基于这样的研究背景,柴秀娟团队近日研发出一种数字孪生驱动的智能温室采摘系统,能有效解决现代温室番茄生产密植环境下,机器人采摘效率低、易损伤植株的问题。团队成员郎一宁介绍:“首先,机器人搭载的滑轨式深度相机会沿温室逐行扫描,采集高精度的RGB-D数据。
2025-12-08 09:54
记者从国家数据局获悉,截至9月底,我国已建成高质量数据集总量超500PB(拍字节,计算机存储容量单位);7个数据标注基地引进和培育标注企业362家,标注从业人员达8.5万人,带动数据标注相关产值163亿元。
2025-12-08 09:53
“梦想”号大洋钻探船的母港在广州海洋地质调查局科考码头,出海执行作业任务时需要通过深中大桥。多年来,我们与150余家参研参建单位团结协作、集智创新,攻克了一个个技术难题,建成了这艘具有我国完全自主知识产权、全球领先的大洋钻探船。
2025-12-08 09:52
空中的昆虫堪称地球上最灵活的生物,能精准完成急转弯、急刹车和空中翻转。美国内华达大学里诺分校的航空航天工程师Hoang-Vu Phan指出,这款新设备标志着“微型机器人性能的巨大飞跃”。
2025-12-08 09:51
加载更多