2024-02-27
近日,国际数据公司(IDC)发布《中国软件定义存储(SDS)及超融合存储(HCI)系统市场季度跟踪报告,2023Q3》。报告显示,2023年第三季度,深信服EDS存储以7.7%的市占率位列中国文件存储市场第五。
市场认可的背后,是深信服EDS存储对技术创新的坚持、更是对卓越性能的极致追求。 随着AI训练、芯片等高精尖产业的快速发展,对存储系统的“综合性能”提出了更高的要求。在存储赛道上,作为支持混合IO负载、兼具大小文件能力的一款存储产品,深信服EDS存储凭借自研技术破解了“大容量、高性能、高性价比”的不可能之三角。 自研创新、技术突破 解决分布式存储“不可能之三角” 2023年,我们发布了EDS存储501高性能版本,通过自研技术的创新,帮助用户实现存储容量扩展、性能提升的兼得。 性能和容量线性同步扩展 一方面,结合分布式存储架构的天然优势,当用户需要更大的存储空间或者处理能力时,只需要添加更多的节点即可,无需改变已有的硬件或软件结构,也无须面临替换存储阵列硬件的昂贵投入。同时,我们设计的读写模式充分适应了SSD与HDD混合闪存介质的特性,以此充分激发硬件性能。 另一方面,基于多活的元数据能力、IO整合、数据缓存与协议增强等核心技术的突破,充分发挥各节点的性能优势,提升海量小文件和大文件高吞吐场景的性能。 深信服EDS存储性能和容量线性同步扩展 在元数据处理上,我们让元数据访问效率提升10倍以上,可缓存的元数据规模是Ceph系产品的7倍,在 AI 训练等场景下可以保持 90% 以上的元数据命中率。 通过小文件的聚合和动态IO整合,解决容量使用超过80%后导致的垃圾回收挤占而性能下降的问题。 对于延迟敏感型业务,采用自适应三级缓存技术,将数据时延降至us级。 在协议增强上,相比于标准文件共享协议,提升2-3倍,进一步降低协议对性能的额外开销,缩短时延和提升性能。 体验更好,成本更低 与此同时,我们找到了获得高性能和大容量的高性价比答案。 通过冷热数据自动分层,热数据存储在NVMe 或SATA固态盘构建的高性能层,冷数据存储在机械盘构建的大容量层,帮助用户节省存储的硬件成本。 基于深舟数据管理平台、EDS存储Data Explorer等软件,实现数据的高效压缩和管理,64GB内存可以承载亿级以上规模小文件的高速读写,帮助用户合理规划存储的投入成本。 通过实现高性能、大容量、高性价比的平衡,我们希望帮助用户获得性能和容量的真正“自由”。 用核心业务的高性能 铸就客户口碑的试金石 一款好的存储产品,不仅是实验室里的高性能,更是用户生产环境的实际需求的高性能。 2023年,我们走进高精尖场景,落到真实的业务场景,针对业务特征进行性能优化,为实际业务运行带去更好的体验。 在AI训练场景,3节点小规模存储集群支撑训练过程Checkpoints保存和恢复吞吐可达100GB/s,保障模型训练的连续性。 在PACS阅片场景,在业务高峰期阅片终端的图像加载速度可达到1000幅/s,数百位门诊、临床医生同时阅片、对存储系统产生高并发访问,阅片效率不受影响。 在测绘作业场景,小文件时延降低到us级,支撑200+台工作站并发建模不掉速,建模效率相比于传统NAS存储提升2倍。 在芯片设计场景,仅需3台通用X86设备,就可以承载超过2000核的算力负载,提供数十万的小文件OPS能力、大文件的读写性能达到6GB/s,EDA前端设计场景混闪能超过700路。 在视频制作场景,承载动画制作、渲染、后期特效/合成等全流程核心业务,5台EDS存储最大可提供超过7.5GB/s带宽,满足用户400多人团队的并行影音文件读取和同时编辑创作需求。