科技芯资讯是专业科技新媒体网站。网站著眼于新一代科技新闻的全面及时处理报导,让网民在外面第二时间交待全球新一代的科技资讯。内容涵括AI+、互联网、IT、创业投资、核定、区块链、智能硬件等领域

首页 >  网络动态 正文

6GB_s的性能体验!深信服EDS如何让HPDA应用又省又稳

juzi 1970-01-01 08:00:00 网络动态 0℃

在数字经济时代,数据已成为新的核心生产要素。特别是在航空宇宙、气象科学、AI驾驶以及生命科学等领域,数据呈指数性,以数据性为典型特征的高性能数据分析(HPDA)开始进行。我们相信分布式存储EDS不仅可以满足计算密集型应用的性能要求,还可以解决传统存储解决方案的可扩展性不足和成本高的问题。传统的存储阵列使用专用硬件,可扩展性差,硬件成本过高。在高性能计算场景中,传统的存储解决方案往往选择使用支持RDMA协议的IB网络来降低网络时延,而在HPDA等数据密集型场景中,单个存储集群节点的数量往往可以达到两个数量级以上。Infiniband交换机的成本相当于多个存储节点的硬件网络成本。

↑ HPDA应用的高性能计算要求给存储系统带来挑战EDS存储架构采用运行到完整和无锁编程模式,优化模块间的数据处理,实现系统中完整IO堆栈的零内存拷贝,从而大大提高整体性能。在重要IO路径上,EDS采用自主开发的存储通信模块,结合共享内存实现IO路径上的数据零复制,减少内存复制消耗,降低存储IO延迟。完全对称分布式架构是基于完全对称分布式架构的分布式存储EDS的信念,单个分布式存储集群可以横向扩展到数千个节点,单个系统容量可以扩展到EB级,实现系统性能和容量的线性增长。随着HPDA应用数据规模的增加,EDS数据每TB的平均存储成本将越来越低。

随着存储系统容量的增加和SDS系统性能的线性增长,每TB的数据存储成本逐渐支持RDMA RoCEv2协议,为了追求IO延迟和成本的平衡,分布式存储EDS创新地选择RDMA RoCEv2网络。采用RDMA协议对存储节点网络进行接入,实现低时延的高速网络传输,有效降低了存储系统的建设成本。平均存储IO时延方面,EDS存储架构采用run to complete和无锁编程模式,优化了各模块之间的数据处理,实现了系统中完整IO栈的内存零拷贝,大大提高了整体性能。^EDS键IO流程图3节点通用2U服务器可结合RDMA协议和NVME SSD介质,提供6GB/s+吞吐量,EDS可同时发挥NVME SSD的性能和RDMA技术的低延迟优势。借助三台aStor-EDS1250设备,每台服务器配备两个NVME SSD和通用硬盘,可提供超过6GB/s的性能体验。分布式存储EDS采用通用硬件来降低用户的存储投资成本,结合其出色的软件力量,刺激通用硬件的性能,提高HPDA应用的数据访问效率,为用户提供具有成本效益的存储解决方案,帮助行业稳步发展。

Tags: 成本 数据 性能 存储 分布