作家
登录

RDMA是数据中心存储结构的未来吗?

作者: 来源: 2017-11-10 11:18:40 阅读 我要评论

如今,HPE公司在其新的Store FabricM系列存储优化交换机中应用了Mellanox基于RDMA的以太网存储构造,为客户供给了用于光纤通道的存储治理对象。

Tech Neo技巧沙龙 | 11月25号,九州云/ZStack与您一路商量云时代收集界线治理实践


尽管下一代架构并不是在光纤通道的基本上成长起来的,但这并不料味着它正在消掉。Harris说,“我信赖光纤通道的鼎盛时代已经以前了。然则,至少在将来十年内,将有一个宏大年夜的安装基本将持续推动光纤通道市场成长。”

像闪存,NVMe,以及英特尔公司Optane如许的存储级内存正大年夜幅晋升存储容量,异常合适推动存储需求最大年夜化的工作负载,如容器,大年夜数据,机械进修,以及超融合基本举措措施,所有这些技巧与应用都应用文件和对象存储,而不是SAN的块存储。然则除了高速存储之外,这些工作负载还须要低延迟收集,线程不会壅塞的CPU,尤其是应用软件定义收集的超融合体系。

以太网是一个众所周知的协定,安装以太网的收集并没有光纤通道那样的复杂性和脆弱性,而在这种情况下,必须推敲到安装时曲折电缆的角度,以及限制电缆的长度,其收集传输速度不限于10Gb/s,还可以移动到25Gb/s,40Gb/s或100GB/s。

然则TCP(传誓┞菲握协定)有很多开销,这意味着CPU花费了大年夜量的时光来治理收集传输,用于写入密集型工作负载(如数据库),大年夜而降低了这些工作负载的┞符体机能。这就是RDMA(长途直接内存拜访)发挥重要感化的处所。

RDMA的直接连接可以削减对CPU的影响,并且像NVMe或SCM如许的快速存储可以使得收集延迟大年夜毫秒降低到微秒。

“在存储收集开端采取RDMA(特别是面向NVMe的架构,因为这似乎是将成为这个范畴的标准),是为了知足日益严格的大年夜数据分析存储机能的请求,特别是那些及时工作负载,更大年夜的数据库和更密集的工作负载整合。”IDC企业存储研究总监Eric Burgener说。

他弥补道,固然NVMe协定今朝还不成熟,然则他猜测述:“在将来三到四年内,外部存储平台将在协定栈NVMe偏向成长,阵列背板,控制器和构造。”

本年早些时刻,英特尔公司将RDMA技巧直策应用在至强办事器的主板上。DataON公司正在应用新型Lightning Trac System Windows Server2016超融合体系,这些体系包含Optane固态硬盘,用于快速缓存层的NVMe,以及SMB3RDMA构造。

同样在本年召开的Ignite大年夜会上,一家名为Chelsio的公司展示了运行速度为25Gbps应用RDMA网卡的SMB3的Windows Server 2016存储副本,而光纤环路跨越了50公里(不须要用于这种城域连接的扩大设备)。

在Windows10中甚至支撑RMDA。好莱坞后期制造公司应用NVMe将大年夜多半Mac工作站和六位数光纤通道SAN与Windows PC和Windows Server存储空间直接进行调换,以便他们可以应用RDMA快速拜访4K文件以进行视频编辑和VR的创建。

Storage Mojo公司的分析师Robin Harris表示,为了获得高效的存储体系,企业必须做出衡量。“采取光纤通道是有意义的,因为存储阵列异常昂贵,共享它们须要投资付出。

如今,企业可以拥有自力的PCIe卡,与大年夜多半存储阵列一样快,并供给了更大年夜的带宽,而其成本只有存储阵炼旧本的一小部分。是以,在这种情况下,人们存眷的重点已经大年夜若何共享昂贵的资本转移到若何共享便宜资本。

“鉴于成本在这种情况下的重要地位,经计揭捉?家偏向于采取成本最低的收集。以太网就是那个低成本的收集吗?是的。一旦这个协定和技巧广泛应用,我估计大年夜多半新建的存储收集将将基于以太网,RDMA是供给共享基于办事器存储的一种经济和低延迟解决筹划的关键身分。

Harris表示,HPE公司的交换机采取RDMA的事实证清楚明了该技巧的可行性。他说,“大年夜市场的角度来看,更大年夜的问题是其他厂商是否会效仿HPE公司的做法。”

Windows Server的首席项目经理Jeff  Woolsey比来在微软的Ignite技巧大年夜会上指出,“当你对体系进行大年夜量写操作时,超融合体系的机能将会降低。如不雅你有一个单一的节点正在进行70%的写入,并且必须尽可能快地复制到另一个节点,如不雅你没有采取RDMA,CPU必须介入履行操作,而在10Gb的以太网收集接口卡(NIC)上写入很轻易完全占用一两个CPU的资本。”

扩大光纤通道

Burgener对此表示认同:“以太网在存储范畴的应用显然正在鼓起,但根据我们对市场的收入猜测,2017年光纤通道市场范围更为明显(以太网为9.6亿美元,光纤通道为117亿美元)。NVMe可以经由过程光纤或以太网运行,我认为以太网将持续慢慢占据光纤市场的收入,然则我们的猜测2021年以太网和光纤通道的收入分别为9.8亿美元和115亿美元。

Burgener说,“企业数据中间往往更多地投资于光纤通道,并持续购买,如许他们就可以持续应用现有的光纤通道收集和治理特长。跟着以太网的成长,越来越多的企业开端应用这种办法。”

“很少有客户会大年夜以太网转向光纤通道,但人们会看到基于以太网的存储收集涌如今已经在光纤通道上投入大年夜量资金用于新项目或部分项目标企业中。

对于收集成本可能过高的小型体系来说(例如,对于分支机构中的节点或其他任何欲望用于边沿计算的数TB存储),Thunderbolt证实是RDMA的一个替代筹划。英特尔Thunderbolt 3 USB-C适配器现已经由过程Windows Server 2016认证,DataON公司推出双节点超融合存储体系,为用户供给40Gbps和200K IOPS,CPU占用率仅为20%,固然不如RDMA好,但比以太网进步更多的CPU效力,其10TB的存储成本只有9000美元。

【编辑推荐】


  推荐阅读

  Java混淆工具ProGuard之初体验

Tech Neo技巧沙龙 | 11月25号,九州云/ZStack与您一路商量云时代收集界线治理实践 本文应用的是 ProGuard 这一款 Java 代码混淆对象。1.混淆对象版本本文应用的是ProGuard这一款Java代码混>>>详细阅读


本文标题:RDMA是数据中心存储结构的未来吗?

地址:http://www.17bianji.com/lsqh/38715.html

关键词: 探索发现

乐购科技部分新闻及文章转载自互联网,供读者交流和学习,若有涉及作者版权等问题请及时与我们联系,以便更正、删除或按规定办理。感谢所有提供资讯的网站,欢迎各类媒体与乐购科技进行文章共享合作。

网友点评
自媒体专栏

评论

热度

精彩导读
栏目ID=71的表不存在(操作类型=0)