yarn开启jobhistoryserver教程

355 阅读1分钟

要开启YARN的JobHistory Server,可以按照以下步骤进行操作:

  1. 打开终端或命令行界面。

  2. 导航到Hadoop的安装目录。

  3. 进入 etc/hadoop目录,其中包含Hadoop的配置文件。

  4. 打开 mapred-site.xml文件并添加以下配置:

    <property>
      <name>mapreduce.jobhistory.address</name>
      <value>localhost:10020</value>
    </property>
    <property>
      <name>mapreduce.jobhistory.webapp.address</name>
      <value>localhost:19888</value>
    </property>
    

    这些配置指定了JobHistory Server的地址和端口。

  5. 保存并关闭 mapred-site.xml文件。

  6. 打开 yarn-site.xml文件并添加以下配置:

    <property>
      <name>yarn.log.server.url</name>
      <value>http://localhost:19888/jobhistory/logs</value>
    </property>
    

    这个配置指定了JobHistory Server的日志URL。

  7. 保存并关闭 yarn-site.xml文件。

  8. 启动YARN服务,可以运行以下命令:

    start-yarn.sh
    

    这将启动YARN资源管理器和节点管理器。

  9. 启动JobHistory Server,可以运行以下命令:

    mr-jobhistory-daemon.sh start historyserver
    

    这将启动JobHistory Server,并开始记录作业历史信息。

现在,你已经成功开启了YARN的JobHistory Server。你可以通过访问 http://localhost:19888来查看JobHistory Server的Web界面,以及查看作业历史信息和日志。

希望以上解答对你有所帮助。如果还有其他问题,请随时提问。


香港服务器购买链接:www.tsyvps.com

蓝易云香港五网CN2 GIA/GT精品网络服务器。拒绝绕路,拒绝不稳定。