搞数据的小伙伴

测试数据准备 1. 分析函数 1. GROUPING SETS 语法： grouping SETS要用在group by后面，并且在grouping SETS中的字段也要在group by中出现。 出

一、参数调优 1. explain EXPLAIN的输出包含以下三部分： TableScan：表扫描操作，map端第一个操作肯定是加载表，所以就是表扫描操作， 常见的属性： alias： 表名称 St

1.原因 如下图，用vmware搭建了个测试环境，随着测试数据的增加，磁盘不够了，所以需要进行扩容 2. 扩容步骤 1. 关闭虚拟机 必须关机，不然无法新增 2. vmware增加容量 如下图所示，我

1. 什么是执行计划 官方地址： 官方描述： 解释： EXPLAIN语句提供关于MySQL如何执行语句的信息。EXPLAIN与SELECT、DELETE、INSERT、REPLACE和UPDATE语句

1. 数据类型 mysql支持的数据类型有如下几种： 1、数值类型 2、日期时间类型 3、字符串类型 4、总结 应该尽量使用可以正确存储数据的最小数据类型，更小的数据类型通常更快，因为它们占用更少的磁

1. Mysql性能监控 1. show profile 1. 命令介绍 show profile 是查询剖析工具，默认是关闭的，需要手动开启，开启后我们可以根据执行sql的query_id来进行查看

sql是开发过程中必须用到的工具，是数据存储的目的地，所以总结一下从sql初级到sql高级的文章，从Msql的安装到基本的增删改查，常用的设置，高级的索引设置，索引优化，然后到sql调优等各个模块进行

1）MR程序提交到客户端所在的节点。 ​ （2）YarnRunner向ResourceManager申请一个Application。 ​ （3）RM将该应用程序的资源路径返回给YarnRunner。 ​ （4）该程序将运行所需资源提交到HDFS上。 ​ （5）程序资源提交完毕后…

Hadoop 2.x - 可以通过复制（浪费空间）来处理容错。 Hadoop 3.x - 可以通过Erasure编码处理容错。 Hadoop 2.x - 对于数据平衡使用HDFS平衡器。 Hadoop 3.x - 对于数据平衡使用Intra-data节点平衡器，该平衡器通过HD…