FocusBigData

【大数据如何进大厂】 一、为何要进大厂？ 当然补充一点：我认为进入大厂最重要的一点能力就是：自驱学习能力还有抗压能力要比较强大才行 二、凭什么拿下大厂的面试机会？ 牛逼的简历 踏实的履历 扎实的技能

Federation架构设计1.NameNode架构的局限性（1）Namespace（命名空间）的限制（2）隔离问题（3）性能的瓶颈​由于是单个NameNode的HDFS架构，因此整个HDFS文件系统

YARN-HA集群配置YARN-HA工作机制1.官方文档2.工作机制图其实就是配置多台RM保证集群高可用，操作和上个文档差不多配置YARN-HA集群1.环境准备（1）修改IP（2）修改主机名及主机名和

HDFDS-HA集群配置(一)环境准备修改IP修改主机名及主机名和IP地址的映射关闭防火墙ssh免密登录安装JDK，配置环境变量等(二)规划集群看出我们将NameNode分布到两台机器上，保证集群的高

HA高可用HA概述所谓HA（HighAvailable），即高可用（7*24小时不中断服务）。实现高可用最关键的策略是消除单点故障。HA严格来说应该分成各个组件的HA机制：HDFS的HA和YARN的H

DataNode相关概念DataNode工作机制一个数据块在DataNode上以文件形式存储在磁盘上，包括两个文件，一个是数据本身，一个是元数据包括数据块的长度，块数据的校验和，以及时间戳。DataN

集群安全模式为什么出现集群安全模式呢？其实安全模式就是集群数据都还没准备好时候的一个保护机制DataNode启动发生的事情这个足够多是多少呢？99.9%安全模式退出的判断集群安全模式下的操作hdfsd

NameNode故障处理问题场景：只配置了一个NameNode作为主节点，当它宕掉后如何恢复数据呢？方法一：拷贝SNN数据到NN存储数据的目录中kill-9NameNode进程删除NameNode存储

NameNode和SecondaryNameNode工作机制第一阶段：NameNode启动（1）第一次启动NameNode格式化后，创建Fsimage和Edits文件。如果不是第一次启动，直接加载编辑