作家
登录

关于云数据管理的复兴之路是怎样的?

作者: 来源: 2017-10-16 16:04:47 阅读 我要评论


【作者按】在比来前去荷兰的商务路程中,我开端沉思Baruch Spinoza(荷兰)的深远影响。Spinoza是技艺中兴时代的巨大年夜哲学家,与当时的同龄人不合,Spinoza强烈否决传统的神学不雅点。他的名言之一是:“不要对新思惟认为惊奇。因为众所周知,一件事不被很多人接结束不料味着它本身不是真的”。

他认为除了相对特定的情况,事闻绫腔有本质上的短长之分。这让我联想到纷纷的数据库,它们大年夜阴郁的“前云时代”演变而来,尽管当今市场上有各类各样的数据库,但每个数据库都有本身的用处。我们可以自由地大年夜多个数据库中选择,选择多方面的层,将庞然大年夜物分化为微办事,经由过程应用各类云数据治理对象和技巧在构建现代云应用法度榜样方面进行立异。

关于云数据治理的中兴之路是如何的?

云计算前世(BC)

我们若何对待数据库的汗青遗留问题:计算机信息处理的早期,借由SQL数据库的长处我们得以一统数据治理范畴。在那些落后的年代,如不雅数据增长到几GB,数据库就会被认为相当宏大年夜了。

然后到了中世纪时代,MySQL在1995年提出开源许可模式,并在数据治理范畴产生了第一个连锁反竽暌功。

跟着数据变得越来越大年夜,越来越多的应用法度榜样开端转向云计算,数据库技巧出现了一种新的动向,大年夜数据分析和云应用的普及使得数据治理范畴的发蒙活动也在大年夜力进军加快。与MySQL时代比拟,当前的情势——跟着云计算策略的初次出现——大年夜量数据对象和分布式数据治理的出现——实在让人感到像是一条中兴之旅。

云计算此生(CE)

技恋人员对于云应用法度榜样中应用了多个数据库认为舒适。跟着微办事和货柜化的应用,这一趋势也在加快。此外,大年夜多半云应用法度榜样商都意识到分别数据治理层的需求,这些层包含一个UI缓存层、CDN层、图形分析层、营业层、营业分析层、安然层、申报层、物联网设备层等众独裁,每个层都可以有本身的数据治理策略——只要数据被保护,经由过程等REST应用法度榜样界面来进行拜访。

在我们当今的云时代下,数据治理是一个数据库数据存储和堆叠的复杂收集。跟着MongoDB、HBase、Cassandra、CouchDB、DynamoDB等数据库的普及,谷歌、Facebook、亚马逊和其他公司已经将大年夜量的NoSQL数据库投入前哨应用。这是一个巨大年夜的挑衅,要把握每一个数据库,并弄清跋扈为什么应用它。畏敲?解潜层技巧并获得对应用哪个NoSQL数据库的广泛懂得,CAP定理是一个很简便的对象。

关于云数据治理的中兴之路是如何的?

CAP定理图

物联网数据库

现代云治理策略

沙龙晃荡 | 去哪儿、陌陌、ThoughtWorks在主动化运维中的实践!10.28不见不散!

在当今时代,数据治理须要被分化成很多不呵9依υ?度。在选择新兴闪烁的NoSQL数据库之前,我们应当谨慎地推敲应用已经证实的SQL数据库。在选择具体技巧之前,懂得数据治理的短期和经久贸易策略,衡量竞争优先事项是至关重要的。

每当我想要评估一个数据治理策略时,我都邑经由过程一份清单来赞助我做决定(如下):

  • 数据的安然性和合规性推敲是什么
  • 数据的短期和经久可扩大性是什么
  • 数据的类型和用处是什么
  • 模式更改的频率是若干
  • 数据检索的延迟原因是什么
  • 数据的速度是若干
  • 数据的多样性是什么
  • 数据可用性的请求是什么
  • 数据存储的搜刮需求是什么
  • 数据若何处理成信息和看法
  • 数据若何分析和申报
  • 数据存储在多用户情况中吗
  • 数据治理的最佳成本是什么
  • 数据治理的层级是什么
  • 数据治理的生命周期请求是什么(备份/恢复)

把数据库作为一项办事(DBaaS)

这是一个令人高兴的时代,一构成熟的DBaaS选项针对SQL和NoSQL数据库应运而生。例如,亚马逊极光供给MySQL和PostgreSQL数据库,Instaclustr则供给Cassandra数据库体系作为一项托管在AWS上的办事。

把分析作为一项办事(AaaS)

三大年夜云办事供给商都供给分析办事。云分析平台采取的最大年夜障碍是对数据安然的担心,AWS和Azure供给了一套稳健的数据分析办事,以减轻这种担心,Azure分析办事针对SQL,并供给强大年夜的可视化Power BI对象。

图数据库应用

图形数据库变革使解决筹划更快地大年夜图形匹配萌芽中受益,同时赞助加快基于收集安然、推荐引擎、IT操作、收集等方面的邻居关系的搜刮。例如,在客户的物联网收集平安产品中,我们应用Apache Spark和Cassandra DB作为分析层,基于MongoDB的收集安然编制,但产生的数据由Neo4j图数据库中组织起来,以便进一步分析收集安然的威逼。这是一个数据治理分级分别的绝好例子,在这种情况下,最佳数据库被用于解决收集平安产品里异常复杂的问题。

跟着物联网可行性应用法度榜样的出现,大年夜设备层收集和处理的大年夜量数据须要以一种专门的方法处理。我们已经成功地应用一个相对新兴、令人振奋的InfluxDB开放源码数据库来竽暌剐效处理时光序列数据。是以,恰当的应用法度榜样可以应用InfluxDB数据库和相接洽关系TICK客栈来进行数据治理:

关于云数据治理的中兴之路是如何的?


  推荐阅读

  VMware环境中根据虚拟机IP找寻所在ESXi主机

沙龙晃荡 | 去哪儿、陌陌、ThoughtWorks在主动化运维中的实践!10.28不见不散!在VMware vSphere虚拟情况中我们有时须要找寻某IP地点的虚拟机及ESXi宿主机。若VMware虚拟机安装了VMware tools, 则可以>>>详细阅读


本文标题:关于云数据管理的复兴之路是怎样的?

地址:http://www.17bianji.com/lsqh/37956.html

关键词: 探索发现

乐购科技部分新闻及文章转载自互联网,供读者交流和学习,若有涉及作者版权等问题请及时与我们联系,以便更正、删除或按规定办理。感谢所有提供资讯的网站,欢迎各类媒体与乐购科技进行文章共享合作。

网友点评
自媒体专栏

评论

热度

精彩导读
栏目ID=71的表不存在(操作类型=0)