1. 想要在JobTracker的WebUI上(master:50030)多保持几个job执行状态,默认是100个
调整Hadoop配置文件,比如调整为200个
<property>
<name>mapred.jobtracker.completeuserjobs.maximum</name>
<value>200</value>
</property>
2. 想要在JobTracker的WebUI上延长job执行状态的存放时间,默认是24小时,现在调整为72小时,也就是259200000微秒
<property>
<name>mapred.jobtracker.retirejob.interval</name>
<value>259200000</value>
</property>
3. 想要在JobTracker的HistoryUI上延长Task log(Last 4KB,Last 8KB, ALL)的存放时间,默认是24小时,这个参数是MapReduce job控制的,要么在Hadoop的mapred-site.xml中设置该值为final或者在每个MapReduce job中设置为72
<property>
<name>mapred.userlog.retain.hours</name>
<value>72</value>
</property>
分享到:
相关推荐
hadoop-0.20.2-eclipse-pluginhadoop-0.20.2-eclipse-pluginhadoop-0.20.2-eclipse-pluginhadoop-0.20.2-eclipse-pluginhadoop-0.20.2-eclipse-pluginhadoop-0.20.2-eclipse-pluginhadoop-0.20.2-eclipse-plugin
Hadoop-0.20.2版本的hadoop是比较老的版本,但是很多教程中都是以hadoop-0.20.2为例子讲述的,所以我在这里分享一下,供大家下载!
hadoop-0.20.2-cdh3u6.rar
文章介绍了hadoop-0.20.2安装手册以及相关的使用方法
可以导进去编程的时候了解实现 hadoop-core-0.20.2 源码 hadoop-2.5.1-src.tar.gz 源码
基于apache发布的FTPserver实现的基于hadoop-0.20.2的FTP服务器,可以直接使用,但要进行hadoop网址的基本配置,另外只有一个匿名用户,除了几个我设定的系统文件夹不能删除外,基本具有所有权限。当然,您可以在此...
export CLASSPATH="$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar:${HADOOP_HOME}/lib/commons-logging-1.0.4.jar:${HADOOP_HOME}/lib/guava-r09-jarjar.jar:${HADOOP_HOME}/hadoop-core-0.20.2-cdh3u3.jar:/usr/...
把压缩文件解压之后可以防止sqoop-1.2.0版本下的lib中,使得sqoop在安装了hadoop-0,20,2版本的hadoop环境下也能运行。
hadoop-0.20.2的chm帮助文档
hadoop-0.20.2-eclipse-plugin 经典插件
Hadoop安装包,适用于linux,内含eclipse插件.
hadoop-0.20.2的安装配置,其他环境为JDK1.7.0_25,Ubuntu-12.04
hadoop-0.20.2.part1.rar
hadoop-0.20.2.part2.rar
hadoop-0.20.2-cdh3u6 cloudera
hadoop-0.20.2-cdh3u4 clouera
eclipse环境下hadoop的导入的关键包,方便使用编写,修改hadoop算法,以及导出应用