spark
2篇文章 · 0订阅
  • 图解Spark排序算子sortBy的核心源码
    Spark sortKey核心源码是 this.keyBy[K](f).sortByKey(ascending, numPartitions).values。
    Spark
  • Firestorm - 腾讯自研Remote Shuffle Service在Spark云原生场景的实践
    Shuffle是分布式计算框架用来衔接上下游任务的数据重分布过程，在分布式计算中所有涉及到数据上下游衔接的过程都可以理解为shuffle。针对不同的分布式框架，shuff
    大数据