作家
登录

云存储技术:虚拟化、集群管理需实现

作者: 来源: 2018-01-03 09:10:04 阅读 我要评论

【限时免费】岁尾最强一次云计算大年夜会,看传统、社区、互联网企业若何碰撞?

云存储是在云计算概念上延长和成长出来的一个新概念,是指经由过程集群应用、网格技巧或分布式文件体系等功能,将收集中大年夜量各类不合类型的存储设备经由过程应用软件集合起来协同工作,合营对外供给数据存储和营业拜访功能的一个体系。当云计算体系运算和处理的核心是大年夜量数据的存储和治理时,云计算体系中就须要设备大年夜量的存储设备,那么云计算体系就改变成为一个云存储体系,所以云存储是一个以数据存储和治理为核心的云计算体系。

与云计算体系比拟,云存储可以认为是设备了安闲量存储空间的一个云计算体系。云存储体系具有如下特点:数据安然,超强的可扩大性,按照顾用收费,可跨不合应用,主动切换故障,易于治赖寥。云存储重要应用于备份、归档、分派和共享协作等四大年夜范畴。

云存储体系是一个多设备、多应用、多办事协同工作的集合体,它的实现要以多种技巧的成长为前提。根据云存储的特点及其应用范畴,重要的云存储技巧涉及到存储虚拟化,分布式文件体系,集群存储,存储集中治理,异质平台协同,主动分级存储等方面,当然还有反复数据删除、数据紧缩等技巧。

一、存储虚拟化

存储虚拟化是一种贯穿于全部IT情况、用于简化本来可能会相对复杂的底层基本架构的技巧。存储虚拟化的思惟是将资本的逻辑映像与物理存储分开,大年夜而为体系和治理员供给一幅简化、无缝的资本虚拟视图。

对于用户来说,虚拟化的存储资本就像是一个巨大年夜的“存储藏”,用户不会看到具体的磁盘、磁带,也不必关怀本身的数据经由哪一条路径通往哪一个具体的存储设备。

Hadoop分布式文件体系(HDFS)是一个设计为用在通俗硬件设毕喔赡分布式文件体系。它与现有的分布式文件体系有很多近似的处所,但又和这些文件体系有很明显的不合。HDFS是高容错的,设计为安排在便宜硬件上的。HDFS对应用法度榜样的数据供给高吞吐量,并且实用于那些大年夜数据集应用法度榜样。HDFS 开放了一些POSIX的必须接口,许可流式拜访文件体系的数据。

HDFS是主/大年夜构造的。一个集群有一个名字结点,也就是主控制办事器,负责治理文件体系的名字空间并调和客户对文件的拜访。还有一堆数据结点,一般一个物理结点上安排一个,负责它们地点的物理结点上的存储治理。HDFS开放文件体系的名字空间以便让用户数据存储在文件中。内部,一个文件被瓜分为一个或者多个数据块,这些数据块存储在一组数据结点中。名字结点履行文件体系的名字空间操作,比如打开、封闭、重定名文件或目次,还决定命据块大年夜数据结点的映射。数据结点负责供给客户的读写请求。数据结点还按照名字结点的指令履行数据块的创建、删除和复制工作。

三、集群存储

CDMI是云存储全新标准接口,由国际存储收集家当协会SNIA制订。对于云运算来说,CDMI供给了通用云运算治理基本架构,同时本来信息治理的 重点已逐渐大年夜存储治理转移环绕在数据治理上。 CDMI标准则可以协助用户将特别诠释数据(Metadata)标记在数据上,该诠释数据会告诉端点存储供给商,什么样的数据办事供给该数据(例如备份、 归档、加密等)。经由过程CDMI标准接口的履行,用户可在不合云端供给商间随便率性移动数据,不再须要忍耐不合接口中从新编码的苦楚。

集群存储是将多台存储设备中的存储空间聚合成一个可以或许给应用办事器供给同一拜访接口和治理界面的存储藏,应用可以经由过程该拜访接口透明地拜访和应用所有存储设毕喔赡磁盘,可以充分发挥存储设备的机能和磁盘应用率。数据将会按照必定的规矩大年夜多台存储设备上存储和攫取,以获得更高的并发拜访机能。

集群存储的优势重要表如今进步并行或分区I/O的┞符体机能,特别是工作流、读密集型以及大年夜型文件的拜访,经由过程采取更低成本的办事器来降低整体成本。集群存储有两种实现方法:一种是硬件基本架构加上软件;另一种是专用集群存储,是构建在NAS基本架构之上的,然则经由过程操作体系实现集群存储。

四、存储集中治理

云存储治理平台请求支撑跨数据中间的安排和治理,并支撑跨数据中间的用户拜访调剂、数据迁徙、数据异地存贮备份等功能。

支撑集中治理,云存储治理平台安排在云计算的中间计心境房,存储节点可以安排在各地的机房中,治理平台对各分点机房的存储设备可以同一治理调剂。

存储虚拟化(StorageVirtualization)最通俗的懂得就是对存储硬件资本进行抽象化表示。经由过程将一个(或多个)目标办事或功能与其它附加的功能集成,同一供给有效的周全功能办事。典范的虚拟化包含如下一些情况:樊篱体系的复杂性,增长或集成新的功能,仿真、整合或分化现有的办事功能等。虚拟化是感化在一个或者多个实体上的,而这些实体则是用来供给存储资本或办事的。

经由过程云存储治理平台,用户可以便利的懂得云存储体系的各个节点的办工作况,包含各节点的容量和机能(读IOPS、写IOPS、读流量、写流量)等信 息,让用户及时懂得域内资本信息,运行状况,大年夜而可以操控这些资本;同时及时懂得资本的异常,有须要时可以采取恰当的办法包管颇┞俘常运行。

五、异质平台协同

当前各类存储筹划与技巧十分复杂而多样,光大年夜一俭朴业内部可能同时存在各类不合类型存储装配的状况便知一二,更何况不合存储设备供货商间的存储情况一向存在兼容性问题,所以喊了多年的存储整合,仍然难以如企业需求所愿,这也是存储虚拟化与云存储推展上的最大年夜阻力。

固然存储云端在某方面很轻易跨入(例如在线存储与备份),但另一方面想要经由过程私有云存储来杀青周全性之存储整合,似乎不是那么轻易的工作。对此,想 要成功完成存储虚拟化目标必须改良企业既有IT存储情况,其改良重点不过共通分享的存储架构、亲和的应用情况、简洁单一的操作界面,以及效能稳重的存储方 案等。个中,不论是单一操作接口或同一标准的API,更是解决不合存储装配间协同问题的关键之一。


  推荐阅读

  前端不止:请告诉我,你要什么样的图标

【限时免费】岁尾最强一次云计算大年夜会,看传统、社区、互联网企业若何碰撞? 有一个英语成语叫做一画胜千言(A picture is worth a thousand words),不知道大年夜家有没有听过?它是指>>>详细阅读


本文标题:云存储技术:虚拟化、集群管理需实现

地址:http://www.17bianji.com/lsqh/40203.html

关键词: 探索发现

乐购科技部分新闻及文章转载自互联网,供读者交流和学习,若有涉及作者版权等问题请及时与我们联系,以便更正、删除或按规定办理。感谢所有提供资讯的网站,欢迎各类媒体与乐购科技进行文章共享合作。

网友点评
自媒体专栏

评论

热度

精彩导读
栏目ID=71的表不存在(操作类型=0)