1、通过FTP将安装包上传到linux的opt/software(ftp工具用Transmit)
2、解压JDK
tar -zxvf jdk-8u212-linux-x64.tar.gz -C /opt/module/
tar -zxvf hadoop-3.1.3.tar.gz -C /opt/module/
3、配置环境变量
- 3.1 在/etc/profile.d/创建my_env.sh
sudo touch /etc/profile.d/my_env.sh
- 3.2 在my_env.sh中配置
export JAVA_HOME=/opt/module/jdk1.8.0_212
export PATH=$PATH:$JAVA_HOME\bin
export HADOOP_HOME=/opt/module/hadoop-3.1.3
export PATH=$PATH:$HADOOP_HOME/bin
export PATH=$PATH:$HADOOP_HOME/sbin
4、重新链接(或者source一下)
source /etc/profile.d/mu_env.sh
5、检测是否安全正确
hadoop version
6、克隆hadoop虚拟机并将虚拟机hostname改为hadoop103,hadoop104
- 6.1需要将hadoop103,hadoop104机器的IP地址改为103 和 104 （ip根据自己配置虚拟网卡段来配置既可）
7、运行官方案例
- 7.1在hadoop的根目录下（/otp/module/hadoop-3.1.3）创建wcinput目录一一用来放数据
mkdir wcinput
vim world.txt
- 7.2在hadoop的根目录下（/opt/module/hadoop-3.1.3）运行命令
hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examplex-3.1.3.jar wordcount wcinput wcoutinput
运行完毕乜有报错并且生成了wcoutinput文件说明统计成功
- 7.3 查看官方案例是否统计
