要开启YARN的JobHistory Server，请按照以下详细步骤操作：

1. 打开终端或命令行界面

首先，确保你已经安装并配置好了Hadoop和YARN环境。打开你的终端（macOS/Linux）或命令行界面（Windows）以开始后续操作。

2. 导航到Hadoop的安装目录

使用 cd命令进入Hadoop的安装目录。例如，如果Hadoop安装在 /usr/local/hadoop，则运行：

cd /usr/local/hadoop

• 解释：cd命令用于更改当前工作目录。进入Hadoop的安装目录是为了访问和修改相关配置文件。

? 3. 进入配置文件目录

在Hadoop安装目录下，进入 etc/hadoop目录，该目录包含所有Hadoop的配置文件。

cd etc/hadoop

• 解释：etc/hadoop目录存放了Hadoop和YARN的配置文件，修改这些文件可以配置Hadoop集群的各种参数。

4. 配置mapred-site.xml文件

使用文本编辑器（如 vi、nano或你喜欢的编辑器）打开 mapred-site.xml文件，并添加以下配置：

<property>
  <name>mapreduce.jobhistory.address</name>
  <value>localhost:10020</value>
</property>
<property>
  <name>mapreduce.jobhistory.webapp.address</name>
  <value>localhost:19888</value>
</property>

• 解释：<name>mapreduce.jobhistory.address</name>：指定JobHistory Server的通信地址和端口。<name>mapreduce.jobhistory.webapp.address</name>：指定JobHistory Server的Web界面地址和端口。

5. 配置yarn-site.xml文件

同样，打开 yarn-site.xml文件，并添加以下配置：

<property>
  <name>yarn.log.server.url</name>
  <value>http://localhost:19888/jobhistory/logs</value>
</property>

• 解释：<name>yarn.log.server.url</name>：指定JobHistory Server的日志URL，用于存储和访问作业日志。

6. 保存并关闭配置文件

完成上述配置后，保存并关闭 mapred-site.xml和 yarn-site.xml文件。确保配置文件格式正确，避免因格式错误导致服务无法启动。

7. 启动YARN服务

返回Hadoop的安装目录，运行以下命令启动YARN资源管理器和节点管理器：

./sbin/start-yarn.sh

• 解释：start-yarn.sh脚本用于启动YARN的核心组件，包括资源管理器（ResourceManager）和节点管理器（NodeManager）。

8. 启动JobHistory Server

接下来，启动JobHistory Server，运行以下命令：

./sbin/mr-jobhistory-daemon.sh start historyserver

• 解释：mr-jobhistory-daemon.sh脚本用于管理JobHistory Server的启动和停止。start historyserver参数指定启动JobHistory Server。

9. 验证JobHistory Server是否启动成功

打开浏览器，访问以下URL以查看JobHistory Server的Web界面：

http://localhost:19888

• 解释：在浏览器中访问该地址，可以查看JobHistory Server的运行状态、作业历史信息和日志。

10. 工作流程总结

以下是开启YARN的JobHistory Server的完整工作流程：

1. 打开终端 ?
2. 导航到Hadoop安装目录
3. 进入配置文件目录 ?
4. 配置 mapred-site.xml文件
5. 配置 yarn-site.xml文件
6. 保存并关闭配置文件
7. 启动YARN服务
8. 启动JobHistory Server
9. 验证服务器运行状态

重要提示

• 网络连接稳定 ：确保服务器和客户端之间的网络连接稳定，以避免配置和启动过程中出现问题。
• 端口冲突 ??：确保配置中使用的端口（如10020和19888）未被其他应用占用，避免端口冲突。
• 权限设置 ：确保你有足够的权限修改配置文件和启动服务，必要时使用 sudo权限。
• 日志检查 ：如果启动过程中出现问题，检查日志文件以获取详细错误信息，便于排查和解决问题。

通过以上步骤，你已经成功开启了YARN的JobHistory Server，可以开始记录和查看作业的历史信息和日志。这对于监控和调试YARN作业具有重要意义。