作家
登录

零基础搭建Hadoop大数据处理-环境

作者: 来源: 2017-05-11 12:31:41 阅读 我要评论

预备资本和情况

下载Centos 7.2 的iso安装镜像,jdk1.8 for Linux紧缩包,hadoop2.7.3紧缩包(本来竽暌姑hadoop3,发明后面不兼容hive的最新版本)

Java基本常识

因为Hadoop框架源码都是以java来写,是以最好都以java作为开辟的最佳说话,固然说有些用C#做了封装,但机能已大年夜打扣头。(这就是为什么说Java的学大年夜数据有很大年夜的优势,其它说话的还须要从新进修Java)

Eclipse IDE应用

  1. $ sudo su 
  2. $ vim /etc/sysconfig/network 
  3. 在个中添加“HOSTNAME=H32” 

Linux和Windows下源码编译技巧

还有最重要的是你的网速要好,因为安装过程中会下载依附包,网不好会卡到你困惑人生。

最后还须要有耐烦,每台机子的情况都不一样,并且每小我下载的包的版本也有可能不一样 会导致各类问题,此时就须要耐烦的去看日记,一向的测验测验和细心的比较安装步调,可能就是少了个变量 或大年夜小写缺点或是要重启。

情况预备就这么多,下一章开端讲若何安装Hadoop集群。



  推荐阅读

  Apache Kylin中对上亿字符串的精确Count_Distinct示例

事实表hive> desc test_t_pbs_uv_fact; OK ad_id string //维度 material_id string //维度 city_code string //维度 user_id >>>详细阅读


本文标题:零基础搭建Hadoop大数据处理-环境

地址:http://www.17bianji.com/lsqh/35155.html

关键词: 探索发现

乐购科技部分新闻及文章转载自互联网,供读者交流和学习,若有涉及作者版权等问题请及时与我们联系,以便更正、删除或按规定办理。感谢所有提供资讯的网站,欢迎各类媒体与乐购科技进行文章共享合作。

网友点评
自媒体专栏

评论

热度

精彩导读
栏目ID=71的表不存在(操作类型=0)