hadoop job history server
默認情況下是沒有啟動的,需要配置完后手工啟動服務.
1. 修改mapred-site.xml,添加如下內容(cluster mode, RM)
<property>
<name>mapreduce.jobhistory.address</name>
<value>master:10020</value>
</property>
<property>
<name>mapreduce.jobhistory.webapp.address</name>
<value>master:19888</value>
</property>
<property>
<name>mapreduce.jobhistory.joblist.cache.size</name>
<value>1000</value>
<description>default 20000</description>
</property>
<property>
<name>mapreduce.jobhistory.done-dir</name>
<value>/history/done</value>
</property>
<property>
<name>mapreduce.jobhistory.intermediate-done-dir</name>
<value>/history/done_intermediate</value>
</property>
2. 使用mr-jobhistory-daemon.sh start historyserver啟動
3 ./yarn-daemon.sh start timelineserver
總結
以上是生活随笔為你收集整理的hadoop job history server的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: HDU——1134 Game of C
- 下一篇: oracle下载安装教程(带安装包)