配置hadoop3.3.0 伪分布式(YARN)

54 阅读1分钟

配置:CentOS7 JDK1.8 Hadoop3.3.0

配置文件,配置文件都在etc目录下面 /opt/hadoop3.3.0/etc/hadoop/

yarn-site.xml

<configuration>
     <property>
          <name>yarn.nodemanager.aux-services</name>
          <value>mapreduce_shuffle</value>
     </property>
     <property>
           <name>yarn.resourcemanager.hostname</name>
           <value>ip</value>
     </property>
</configuration>

ip本地部署可以使用localhost 服务器中部署需要使用宿主主机ip

mapred-site.xml

<configuration>
   <property>  
      <name>mapreduce.framework.name</name>  
      <value>yarn</value>  
  </property>  
</configuration>

启动yarn

start-yarn.sh
mapred --daemon start historyserver

historyserver历史服务器,可以查看Mapreduce作业记录

ip:8088 打开访问正常就是启动成功

摘自:blog.csdn.net/lingzidong/…