作家
登录

大数据存储的7个关键因素

作者: 来源: 2017-11-30 14:32:01 阅读 我要评论

人们一个常见的误会是,供给商供给的加密办法可以解决企业的合规性请求。其实无论是由存储厂商照样云办事供给商所供给的基于驱动器的加密都不实用于任何数据标准,如HIPAA,SOX或GDPR。企业作为数据所有者必须拥有密钥。荣幸的是,云端有加密支撑,但更好的选择是将其构建到办事器或虚拟机中的工作流中。

(5)SSD固态硬盘

SSD固态硬盘正在改变存储体系中的所针砭矩。作为处于DRAM和硬盘存储器之间的具有高速缓存的安闲量存储设备,SSD硬盘在随机IO中的存储机能进步了约1000倍,带宽大年夜10倍增长到100倍。对于大年夜量数据来说,这是异常重要的,特别是在应用Hadoop或GPU加快等并行处理时。

(4)数据隐私律例

容量为100TB的固态硬盘将会推出市场,并具有优良的机能,一些小型存储设备可以创造事业。范围最小的Ceph对象存储阵列为四个节点,即使应用标准的1U办事器格局,当前也可以容纳1.2PB的SSD硬盘容量。如许做成本昂扬,但在枷⒚机能时比较经济。一些供给商已经宣布了1UPB级设备的筹划,个中包含应用32个英特尔公司推出的Ruler硬盘,这是一款狭长的的SSD硬盘。

固态存储范畴获得快速成长,这也是企业不该该在短期内涵存储方面投入太多费用的原因。因为硬盘价格点和所有其他指标在将来两年内都邑产生变更。企业须要确保将来购买的任何设备和驱动器都合适集群,以便其他有效的设备不会被放弃。

集中的容量须要集中的收集带宽。第一步是将这些PB级存储设备与以太网上的NVMe结合起来,以100Gbps的速度运行,但行业厂商已经处于200Gbps安排的初期阶段。这是收集连接才能的一个重大年夜飞跃,但即使如斯,也不足以跟上大年夜范围并行设计的驱动器的成长办法。

(6)数据紧缩

如今,存储1PB数据的设备可以存储5PB数据,而这是使悠揭捉?缩软件的好处。固态硬盘支撑大年夜带宽,以至于应用个中的一些将紧缩数据写入设备是有意义的。不过,最好是在数据创建时进行紧缩。这削减了全部数据流量的收集流量,节俭了存储空间,并削减了传输时光。但源数据紧缩须要硬件支撑,而这些硬盘开端涌如今市场上。

"Rehydrating"(从新水化)数据是一个应用少量资本的简单过程,是以经由过程进步紧缩率来增长存储容量可以节俭成本。全闪存阵列平日包含紧缩,而这种技巧也作为用于家电的软件供给。

在评论辩论硬件之后,采取云存储供给商供给的办事可能是一个具有吸引力的选择。事实上,云办事供给商三大年夜巨擘亚马逊、谷歌和微软公司在实施新架构和软件编排方面都处于行业领先地位。云计算的应用很经济,并且可以随时须要的范围付出费用。云办事可以处理存储负载峰值,这在一些数据类中很常见,例如零售传感器数据。这削减或至少延迟了仓储设备的内捕钥跪。

然而,获得与内部运营相媲美的机能程度是一个挑衅。并不是具有雷同CPU和内存组合的实例都是雷同的。一个高度调优的内部集群可能会做得更好。

如今,存储技巧的成长并不会停止,人们将看到增值数据存储办事敏捷成长,如加密和紧缩、索引、标签办事以及其他功能。大年夜型云供给商(尤其是AWS)甚至将数据库构造(如Hadoop文件体系)构建到对象包中。这使他们可以或许安排类似希捷懈弛为设备的关键/数据存储驱动器等设备中,以加快构建特定的数据构造。

(7)选择云存储办事

【编辑推荐】

  1. 容器存储架构比较:Kubernetes、Docker和Mesos Compare
  2. 计算、存储技巧迎来巨变——您预备好了吗
  3. 混淆存储阵列是最好的存储
  4. 对用户来说最好的云存储是什么?
  5. 软件定义存储下的数捷报份保护筹划
【义务编辑:武晓燕 TEL:(010)68476606】

  推荐阅读

  THOMA BRAVO以16亿美元收购梭子鱼网络 收购金额为每股27.55美元

CTO练习营 | 12月3-5日,深圳,是时刻成为优良的技巧治理者了中国,北京-2017年11月30日 云融合的安然与数据保护解决筹划供给商梭子鱼收集于美国加州时光11月27日宣布:梭子鱼收集将由领先的私募股权投>>>详细阅读


本文标题:大数据存储的7个关键因素

地址:http://www.17bianji.com/lsqh/39331.html

关键词: 探索发现

乐购科技部分新闻及文章转载自互联网,供读者交流和学习,若有涉及作者版权等问题请及时与我们联系,以便更正、删除或按规定办理。感谢所有提供资讯的网站,欢迎各类媒体与乐购科技进行文章共享合作。

网友点评
自媒体专栏

评论

热度

精彩导读
栏目ID=71的表不存在(操作类型=0)