稀土掘金 稀土掘金
    • 首页
    • 沸点
    • 课程
    • 数据标注 HOT
    • AI Coding
    • 更多
      • 直播
      • 活动
      • APP
      • 插件
    • 直播
    • 活动
    • APP
    • 插件
      • 搜索历史 清空
        • 写文章
        • 发沸点
        • 写笔记
        • 写代码
        • 草稿箱
        创作灵感 查看更多
确定删除此收藏集吗
删除后此收藏集将被移除
取消
确定删除
确定删除此文章吗
删除后此文章将被从当前收藏集中移除
取消
确定删除
编辑收藏集
0 /100
spark
订阅
avatar
酸菜牛肉面不要酸菜
更多收藏集

微信扫码分享

微信
新浪微博
QQ

2篇文章 · 0订阅
  • Spark 存储模块源码学习
    能力有限,目前还是个学习者的姿态,所以只是记录一下spark存储模块源码的学习过程。在学习的过程中发现上面几个是不错的学习资料,推荐给大家,带*号表示值得优先查看学习的资料。 因为每个资料都各有侧重点,所以可能在看的时候对一些没有细讲的类和架构不了解。下面我对上面的资料进行了总…
    • Hiway
    • 6年前
    • 1.5k
    • 1
    • 评论
    Spark
  • Spark的分布式存储系统BlockManager全解析
    BlockManager的作用?我理解是负责做RDD的存储,如何存下来给后续任务去使用。 图中看到有个memoryStore和DiskStore,说明把block做存储时,有内存和磁盘2种方式,存储后就都i通过这个Store去管理。 还有个shuffClient,负责做 备份 …
    • 华为云开发者联盟
    • 5年前
    • 835
    • 8
    • 评论
    Spark