大数据生态

目标： 了解Yarn的基本架构 掌握Yarn的工作机制 重点：掌握Yarn的作业提交过程 了解Yarn的资源调度器 1 Yarn的基本架构 Yarn是一个资源调度平台，负责为运算程序提供服务器运算资源

目标： 了解MapReduce的优缺点 重点：掌握MapReduce的核心思想 掌握MapReduce的框架原理 重点：掌握Shuffle机制 理解Combiner作用 理解Join的作用 掌握Had

目标： 重点：HDFS的数据流（读写操作） 重点：NameNode和SecondaryNameNode NN和SNN工作机制 Fsimage和Edits解析 CheckPoint时间设置 NN故障处理

目标： 了解HDFS背景及定义 掌握HDFS的优缺点 掌握HDFS的组成架构 掌握HDFS的Shell操作 1 HDFS概述 1.1 背景及定义 背景 在现实情况下，随着数据量增大，一个操作系统存不下

目标 掌握VMware安装Centos7系统 掌握Hadoop集群搭建 掌握相关软件的安装 知道常见问题的处理 1 VMware安装CentOS7 1.1 安装VMware15 扩展：Bridged、

Hadoop学习笔记：一、认识大数据生态体系 目标 认识大数据 从Hadoop框架来看大数据生态 1 大数据认知 1.1 部门业务流程 1.2 部门组织架构 2 Hadoop-->大数据生态 2.1