hadoop伪分布式搭建02

101 阅读1分钟

承接hadoop伪分布式搭建01:blog.csdn.net/qq_19968255…

3.安装Hadoop

版本 hadoop-2.4.1
3.1上传hadoop安装包

3.2解压hadoop安装包
mkdir /cloud
#解压到/cloud/目录下
tar -zxvf hadoop-2.2.0.tar.gz -C /cloud/

 

hadoop伪åå¸å¼æ­å»º02

文件夹内容
bin:可执行的脚本

include和libexec:本地库的头文件

sbin:启动和停止相关

etc:配置文件

lib:存放本地库

share:java 用的jar

 

3.3修改配置文件(5个)
第一个:hadoop-env.sh
在vim hadoop-env.sh 中

:echo $JAVA_HOME  确定后,复制java路径 
export JAVA_HOME=复制java路径 
第二个:core-site.xml


fs.defaultFS
hdfs://itcast01:9000



hadoop.tmp.dir
/itcast/hadoop-2.4.1/tmp

第三个:hdfs-site.xml


dfs.replication
1

第四个:mapred-site.xml (mv mapred-site.xml.template mapred-site.xml)
mv mapred-site.xml.template mapred-site.xml
vim mapred-site.xml


mapreduce.framework.name
yarn


第五个:yarn-site.xml


yarn.resourcemanager.hostname
itcast01



yarn.nodemanager.aux-services
mapreduce_shuffle

3.2将hadoop添加到环境变量

vim /etc/proflie
export JAVA_HOME=/usr/java/jdk1.7.0_65
export HADOOP_HOME=/itcast/hadoop-2.4.1
export PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin

#刷新配置

 source /etc/profile

3.3格式化namenode(是对namenode进行初始化)
hdfs namenode -format  或者

  hadoop namenode -format(过时了)

tmp :保存运行时重要的文件

 

未完待续!------------------------------------------------------------------------