我报名参加金石计划1期挑战——瓜分10万奖池，这是我的第7篇文章，点击查看活动详情

spark版本：spark-3.0.0-bin-hadoop2.7

一、安装JDK

略

二、安装Hadoop

1. 下载hadoop2.7.3安装包

archive.apache.org/dist/hadoop…

2. 解压到任意位置，自己记得就行
3. 下载Hadoop对应版本的winutils.exe、winutils.pdb放到hadoop/bin目录下

下载地址：github.com/cdarlint/wi…

4. 配置环境变量

D:\02-devTool\Bigdata\hadoop-2.7.3\bin
D:\02-devTool\Bigdata\hadoop-2.7.3\sbin

5. 测试

hadoop version

三、安装Spark

1. 下载安装包

spark.apache.org/

2. 解压到任意位置
3. 配置环境变量

D:\02-devTool\Bigdata\spark-3.0.0-bin-hadoop2.7/bin

4. 测试

spark-shell --version