大数据
3篇文章 · 0订阅
  • 编写你的第一个 Java 版 Raft 分布式 KV 存储
    本文旨在讲述如何使用 Java 语言实现基于 Raft 算法的，分布式的，KV 结构的存储项目。该项目的背景是为了深入理解 Raft 算法，从而深刻理解分布式环境下数据强一致性该如何实现；该项目的目标是：在复杂的分布式环境中，多个存储节点能够保证数据强一致性。 Raft 算法大…
    Raft
  • Hadoop和spark为什么要对key进行排序
    1.思考只要对hadoop中mapreduce的原理清楚的都熟知下面的整个流程运行原理，其中涉及到至少三次排序，分别是溢写快速排序，溢写归并排序，reduce拉取归并排序，而且排序是默认的，即天然排序
    大数据
  • Hadoop MapReduce 保姆级吐血宝典，学习与工作必读此文！
    Hadoop 涉及的知识点如下图所示，本文将逐一讲解： 本文档参考了关于 Hadoop 的官网及其他众多资料整理而成，为了整洁的排版及舒适的阅读，对于模糊不清晰的图片及黑白图片进行重新绘制成了高清彩图
    大数据 Hadoop 后端