VM上的Hadoop运行环境搭建(一)- 模板机和克隆机

186 阅读3分钟

1. 模板虚拟机环境准备

1.1. 安装模板虚拟机

IP地址:192.168.6.100 、主机名称:hadoop100 、内存 4G、硬盘 50G
(以上可以根据需求进行更改)

1.2. hadoop100虚拟机配置如下(以CentOS-7.5-x86-1804为例)

  1. 使用yum安装需要虚拟机可以正常上网,yum安装前可以先测试下虚拟机联网情况
[root@hadoop100 ~] ping www.baidu.com
PING www.baidu.com (14.215.177.39) 56(84) bytes of data.
64 bytes from 14.215.177.39 (14.215.177.39): icmp_seq=1 ttl=128 time=8.60 ms
64 bytes from 14.215.177.39 (14.215.177.39): icmp_seq=2 ttl=128 time=7.72 ms
  1. 安装epel-release

Extra Packages for Enterprise Linux是为“红帽系”的操作系统提供额外的软件包,适用于RHEL、CentOS和Scientific Linux。相当于是一个软件仓库,大多数rpm包在官方 repository 中是找不到的

[root@hadoop100 ~] yum install -y epel-release
  1. 注意:如果Linux安装的是最小系统版,还需要安装如下工具: net-tool、vim

1.3.. 关闭防火墙,关闭防火墙开机自启

在企业开发时,通常单个服务器的防火墙是关闭的,会整体对外设置非常安全的防火墙

[root@hadoop100 ~] systemctl stop firewalld
[root@hadoop100 ~] systemctl disable firewalld.service

1.4. 创建panda用户,并修改panda用户的密码

[root@hadoop100 ~] useradd panda
[root@hadoop100 ~] passwd panda

1.5. 配置panda用户具有root权限,方便后期加sudo执行root权限的命令

[root@hadoop100 ~] vim /etc/sudoers

修改/etc/sudoers文件,在%wheel这行下面添加一行,如下所示:

## Allow root to run any commands anywhere

root    ALL=(ALL)     ALL

## Allows people in group wheel to run all commands

%wheel  ALL=(ALL)       ALL

panda   ALL=(ALL)     NOPASSWD:ALL

注意:panda这一行不要直接放到root行下面,因为所有用户都属于wheel组,先配置了panda具有免密功能,但是程序执行到%wheel行时,该功能又被覆盖回需要密码。所以panda要放到%wheel这行下面。

1.6. 在/opt目录下创建文件夹,并修改所属主和所属组

  1. 在/opt目录下创建module、software文件夹(便于管理)
[root@hadoop100 ~] mkdir /opt/module

[root@hadoop100 ~] mkdir /opt/software
  1. 修改module、software文件夹的所有者和所属组均为panda用户
[root@hadoop100 ~]# chown panda:panda /opt/module

[root@hadoop100 ~]# chown panda:panda /opt/software
  1. 查看module、software文件夹的所有者和所属组
[root@hadoop100 ~]# cd /opt/
[root@hadoop100 opt]# ll
总用量 0
drwxr-xr-x. 2 panda panda 6 728 21:18 module
drwxr-xr-x. 2 panda panda 6 728 21:19 software

1.7. 卸载虚拟机自带的JDK

[root@hadoop100 ~]# rpm -qa | grep -i java | xargs -n1 rpm -e --nodeps

1.8. 重启虚拟机

[root@hadoop100 ~]# reboot

2. 克隆虚拟机

2.1. 修改模板机IP

  1. 修改模板虚拟机的静态IP
[root@hadoop100 ~] vim /etc/sysconfig/network-scripts/ifcfg-ens33

改成

DEVICE=ens33

TYPE=Ethernet

ONBOOT=yes

BOOTPROTO=static

NAME="ens33"

IPADDR=192.168.6.100

GATEWAY=192.168.6.2

DNS1=192.168.6.2
  1. 查看Linux虚拟机的虚拟网络编辑器,编辑->虚拟网络编辑器->VMnet8

image.png

image.png

  1. 查看Windows系统适配器VMware Network Adapter VMnet8的IP地址

image.png

  1. 保证Linux系统ifcfg-ens33文件中IP地址、虚拟网络编辑器地址和Windows系统VM8网络IP地址通段

2.2. 修改模板机host相关文件

  1. 修改主机名称
[root@hadoop100 ~] vim /etc/hostname

hadoop100
  1. 配置Linux模板主机名称映射hosts文件,打开/etc/hosts
[root@hadoop100 ~] vim /etc/hosts

添加如下内容(添加8个方便后续继续加入)

192.168.6.100 hadoop100
192.168.6.101 hadoop101
192.168.6.102 hadoop102
192.168.6.103 hadoop103
192.168.6.104 hadoop104
192.168.6.105 hadoop105
192.168.6.106 hadoop106
192.168.6.107 hadoop107
192.168.6.108 hadoop108

2.3. 修改windows的主机映射文件(hosts文件)

  • 进入C:\Windows\System32\drivers\etc路径

  • 打开hosts文件并添加如下内容,然后保存(添加8个方便后续继续加入)

192.168.6.100 hadoop100
192.168.6.101 hadoop101
192.168.6.102 hadoop102
192.168.6.103 hadoop103
192.168.6.104 hadoop104
192.168.6.105 hadoop105
192.168.6.106 hadoop106
192.168.6.107 hadoop107
192.168.6.108 hadoop108

2.4. 利用模板机hadoop100,克隆三台虚拟机:hadoop102、hadoop103、hadoop104

克隆完成后修改hostname、ip以及测试能否连网

注意:克隆时,要先关闭hadoop100