高调奢华丶低就梦

赞

4

|

搜索文章

赞

文章( 4 ) 沸点( 0 )

Hadoop Shuffle详解

每个任务最重要的一个过程就Shuffle过程，这个过程会把所有的数据进行洗牌整理，排序，如果数据量大，将会非常的耗时。如图1.1所示，是一个从map端输出数据到合并成一个文件的过程。图1.1 Map文件输出从图中可以看到Map端输出的数据会被提交到一个内存缓冲区当中，当内存…

落寞的搬运工
7年前
2.4k
8
1

大数据资源整理

scala、spark 使用过程中，各种测试用例以及相关资料整理

jacksu
9年前
4.1k
186
1

java基础(十一) 枚举类型

枚举类型：就是由一组具有名的值的有限集合组成新的类型。(即新的类)。是不是很简单，很清晰。这样就可以省掉大量重复的代码，使得代码更加易于维护。现在有点明白枚举类型的定义了吧！在说的再仔细一点，就是 **使用关键字enum来用一组由常量组成的有限集合来创建一个新的cla…

好好学java
7年前
1.6k
28
评论

加入于

2018-04-18