Hadoop常见错误和处理方式

萌芽办法mysqladmin version

hadoop采集的字符集问题。

修改/etc/sysconfig/i18n 更改字符集为en_US.UTF-8

重启机械生效。

重启机械的指令为：在root下敲入如下指令：sync;sync;init 6

在建立hive数据库的时刻，最好是:create database hive;

修改mapreduce。

在gateway/机能下修改：MapReduce 子 Java 基本选项、Map 义务 Java 选项库、Reduce 义务 Java 选项库全部设备成 -Xmx4294967296

在TASKTRACKER/机能下修改:MapReduce 子 Java 基本选项、Map 义务 Java 选项库、Reduce 义务 Java 选项库全部设备成 -Xmx4294967296

必须存眷各个义务的具体情况

当出现如下的缺点的时刻，请及时的将下载的过程数调小。

vi /home/boco/oozie_wy/config/lte/mro/ftp/807101.xml 将max_thread由本来的6个调剂为3个,或者调和厂家加大年夜FTP的最大年夜线程数。 
stderr logs： 
org.apache.commons.net.ftp.FTPConnectionClosedException: FTP response 421 received. Server closed connection. 
at org.apache.commons.net.ftp.FTP.__getReply(FTP.java:363) 
at org.apache.commons.net.ftp.FTP.__getReply(FTP.java:290) 
at org.apache.commons.net.ftp.FTP.connectAction(FTP.java:396) 
at org.apache.commons.net.ftp.FTPClient.connectAction(FTPClient.java:796) 
at org.apache.commons.net.SocketClient.connect(SocketClient.java:172) 
at org.apache.commons.net.SocketClient.connect(SocketClient.java:192) 
at org.apache.commons.net.SocketClient.connect(SocketClient.java:285) 
at com.boco.wangyou.utils.Ftp.connectServer(Ftp.java:550) 
at com.boco.wangyou.lte.mro.ftp.tools.FindFileThread.run(FindFileThread.java:67) 
登录ftp办事器【10.140.177.149】掉败，FTP办事器无法打开！ 
org.apache.commons.net.ftp.FTPConnectionClosedException: FTP response 421 received. Server closed connection. 
at org.apache.commons.net.ftp.FTP.__getReply(FTP.java:363) 
at org.apache.commons.net.ftp.FTP.__getReply(FTP.java:290) 
at org.apache.commons.net.ftp.FTP.connectAction(FTP.java:396) 
at org.apache.commons.net.ftp.FTPClient.connectAction(FTPClient.java:796) 
at org.apache.commons.net.SocketClient.connect(SocketClient.java:172) 
at org.apache.commons.net.SocketClient.connect(SocketClient.java:192) 
at org.apache.commons.net.SocketClient.connect(SocketClient.java:285) 
at com.boco.wangyou.utils.Ftp.connectServer(Ftp.java:550) 
at com.boco.wangyou.lte.mro.ftp.tools.FindFileThread.run(FindFileThread.java:67) 
登录ftp办事器【10.140.177.149】掉败，FTP办事器无法打开！ 
org.apache.commons.net.ftp.FTPConnectionClosedException: FTP response 421 received. Server closed connection. 	
			 1/4    1 2 3 4 下一页 尾页	
			

　　推荐阅读
　　微信高可用分布式数据库PhxSQL设计与实现
            
            因为MySQL没有供给在重启时的插件接口，为了后续保护便利，在MySQL代码层抽象出了一个新插件接口before_binlog_init用于校准Binlog。【MySQL的容灾缺点总结】    MySQL在容灾方面存在的问>>>详细阅读


本文标题：Hadoop常见错误和处理方式
地址：http://www.17bianji.com/lsqh/34799.html
 1/2    1