为了账号安全,请及时绑定邮箱和手机立即绑定

Hadoop Jobhistory配置启用

标签:
Hadoop

Hadoop Jobhistory记录下已运行完的MapReduce作业信息并存放在指定的HDFS目录下,
默认情况下是没有启动的,需要配置完后手工启动服务。

1.修改hadoop的配置文件mapred-site.xml如下

<property>
  <name>mapreduce.jobhistory.address</name>
  <value>zdh-9:10020</value>
  <description>MapReduce JobHistory Server IPC host:port</description></property><property>
  <name>mapreduce.jobhistory.webapp.address</name>
  <value>zdh-9:19888</value>
  <description>MapReduce JobHistory Server Web UI host:port</description></property><property>
    <name>mapreduce.jobhistory.done-dir</name>
    <value>/history/done</value></property><property>
    <name>mapreduce.jobhistory.intermediate-done-dir</name>
    <value>/history/done_intermediate</value></property>

2.启动history-server

mr-jobhistory-daemon.sh start historyserver
停止history-server
mr-jobhistory-daemon.sh stop historyserver

3.通过浏览器访问Hadoop Jobhistory的WEBUI

http://zdh-9:19888



作者:木木与呆呆
链接:https://www.jianshu.com/p/a9e2420612d9

点击查看更多内容
TA 点赞

若觉得本文不错,就分享一下吧!

评论

作者其他优质文章

正在加载中
JAVA开发工程师
手记
粉丝
39
获赞与收藏
123

关注作者,订阅最新文章

阅读免费教程

  • 推荐
  • 评论
  • 收藏
  • 共同学习,写下你的评论
感谢您的支持,我会继续努力的~
扫码打赏,你说多少就多少
赞赏金额会直接到老师账户
支付方式
打开微信扫一扫,即可进行扫码打赏哦
今天注册有机会得

100积分直接送

付费专栏免费学

大额优惠券免费领

立即参与 放弃机会
意见反馈 帮助中心 APP下载
官方微信

举报

0/150
提交
取消