作家
登录

Log:被BigData遗忘的奠基者

作者: 来源: 2017-05-09 13:47:11 阅读 我要评论

05

Log的┞封种特点又付与了Log在大年夜数据世界里更多的应用。我们先说个简单的例子。自负年夜Spanner出来今后,大年夜家就造出了新名词New SQL。然则平日来嗣魅这些New SQL们都必须选一个已有的dialect来措辞。一般来说,当然不是MySQL就是Postgress了。

这可以认为是让本身体系上线的一个聪慧的设法主意。然则我们其实可以推广这个设法主意。作为Log的花费者,为什么非要和Log的临盆者是同类呢?如不雅我们欲望在大年夜数据的时代琅绫擎在各类不合的体系之间进行同步的话,最简单的办法就是稀有据的生成Log,须要同步的去按照Log履行就好。有的慢有的快,无所谓。并且Log天然就带有了故障恢复才能。用Log来搭建一个数据交换和同步的体系,在大年夜数据时代是一个异常好的选择。

于是我们就有了Kafka。当然Kafka有很多的名词,Pub/Sub啊,message queue啊。并且Kafka的实际实现也比简单的描述要复杂。然而究其本质来说,我们应用了关系数据库琅绫擎的巨大年夜创造Log,应用Log的重要特点,在给定初始状况今后,按部就班的履行log就可以获得最终状况,以及Log自带的故障恢复功能,构建了一个不合的数据源之间互相传递和同步数据的巨大年夜产品:Kafka。

3 张三 550

故事到这里讲完了。这篇文┞仿没有深刻到任何技巧细节琅绫擎去。然则我想说,Log作为一个逻辑层面的创造,是一个巨大年夜的供献。在大年夜数据时代的今天,我们谈论着很多时髦的词汇,高等的技巧。Log这个奠定的技巧的重要性,很大年夜程度上被人忽视了。

【本文为51CTO专栏作者“徐飞”的原创稿件,转载请经由过程作者微信"大众,"号“飞总的IT世界面面不雅”获取接洽和授权】

3 张三 - 50

戳这里,看该作者更多好文

02

【编辑推荐】

  1. 关系型数据库工作道理简述
  2. 一分钟搞懂列式与行式数据库
  3. 干细胞图片数据库共享,深度进修猜测细胞外不雅
  4. 企业级数据库若何上云 其实是如斯简单
  5. 五大年夜常见MySQL数据库的高可用筹划
【义务编辑:武晓燕 TEL:(010)68476606】

  推荐阅读

  分布式缓存技术redis学习系列----深入理解Spring Redis的使用

关于spring redis框架的应用,网上的例子很多很多。然则在本身比来一段时光的应用中,发明这些教程都是入门教程,包含很多的应用办法,与spring redis丰富的api大年夜相径庭,真是浪费了>>>详细阅读


本文标题:Log:被BigData遗忘的奠基者

地址:http://www.17bianji.com/lsqh/35092.html

关键词: 探索发现

乐购科技部分新闻及文章转载自互联网,供读者交流和学习,若有涉及作者版权等问题请及时与我们联系,以便更正、删除或按规定办理。感谢所有提供资讯的网站,欢迎各类媒体与乐购科技进行文章共享合作。

网友点评
自媒体专栏

评论

热度

精彩导读
栏目ID=71的表不存在(操作类型=0)