火航

通过本篇文章，能够彻底的理解基于用户的协同过滤思想，为推荐算法召回侧打下坚实的基础。 本文主要从用户协同过滤的原理、计算以及问题和改进方面进行阐述。 欢迎大家给予意见！

目标： 了解Yarn的基本架构 掌握Yarn的工作机制 重点：掌握Yarn的作业提交过程 了解Yarn的资源调度器 1 Yarn的基本架构 Yarn是一个资源调度平台，负责为运算程序提供服务器运算资源

目标： 了解MapReduce的优缺点 重点：掌握MapReduce的核心思想 掌握MapReduce的框架原理 重点：掌握Shuffle机制 理解Combiner作用 理解Join的作用 掌握Had

目标： 重点：HDFS的数据流（读写操作） 重点：NameNode和SecondaryNameNode NN和SNN工作机制 Fsimage和Edits解析 CheckPoint时间设置 NN故障处理

目标 掌握VMware安装Centos7系统 掌握Hadoop集群搭建 掌握相关软件的安装 知道常见问题的处理 1 VMware安装CentOS7 1.1 安装VMware15 扩展：Bridged、

目标： 了解HDFS背景及定义 掌握HDFS的优缺点 掌握HDFS的组成架构 掌握HDFS的Shell操作 1 HDFS概述 1.1 背景及定义 背景 在现实情况下，随着数据量增大，一个操作系统存不下

Hadoop学习笔记：一、认识大数据生态体系 目标 认识大数据 从Hadoop框架来看大数据生态 1 大数据认知 1.1 部门业务流程 1.2 部门组织架构 2 Hadoop-->大数据生态 2.1

设定要画一个什么样的图像：plot、scatter... 为了更好地理解所有基础绘图功能，我们通过天气温度变化的绘图来融合所有的基础API使用。 今天我们对Jupyter Notebook的使用和Matplotlib绘图的操作进行了总结，后续我们会总结Numpy和Pandas，…

Numpy（Numerical Python）是一个开源的Python科学计算库，本身是由C语言开发，用于快速处理任意维度的数组。Numpy支持常见的数组和矩阵操作。对于同样的数值计算任务，使用Numpy比直接使用Python要简洁的多。 Numpy专门针对ndarray的操作…