jiaojiao_bigdata

1.Spark的任务执行流程 Spark任务执⾏的流程 Spark 任务执⾏的流程 四个步骤 1.构建DAG（调⽤RDD上的⽅法） 2.DAGScheduler将DAG切分Stage（切分的依据是Sh

map mapPartitionsWithIndex:在处理的同时可以获得当前分区索引 只保留第二个分区的数据 flatMap:扁平映射 将List(List(1,2),3,List(4,5))进行扁

![1.png](https://p1-juejin.byteimg.com/tos-cn-i-k3u1fbpfcp/3c5eef58fb88485a905f07bf3cc48c99~tplv-k3u

![1.png](https://p6-juejin.byteimg.com/tos-cn-i-k3u1fbpfcp/11e1b94227b1431b909ab939ef0ef0ff~tplv-k3u

fhfhgfhgfhgfghghfjjjjjjjjjjjjgffghfhgfghffgfgfgfgfgf

![1.png](https://p9-juejin.byteimg.com/tos-cn-i-k3u1fbpfcp/26ab5f5d16814179a0ddc596b2d1b640~tplv-k3u

metastore的三种配置方式 Metastore服务是否需要单独配置、单独启动？ Metadata是存储在内置的derby中，还是第三方RDBMS,比如Mysql 单独启动 存储位置 内嵌模式 本

日期处理 date_format数如果第一个参数是字符串,连接符只能是-,别的识别不了包括month(),year()等也识别不了必须要先用egexp_replace()换成- 窗口函数 函数含有ov

面试题 单向链表:实现单向链表元素的反转 先定义一个新节点reverseHead = new HeroHead() 从头到尾遍历原来的元素，没遍历一个节点，将其取出，并放到新的链表reverseHea