Hadoop专栏

Hadoop专栏

Hadoop专栏

Hadoop的读写机制 MR yarn的工作流程

暂无订阅共3篇文章创建于2022-12-19

MapReduce过程&&Shuffle机制

https://zhuanlan.zhihu.com/p/582620443 Mapreduce的shuffle过程

3年前
41
点赞
评论

Yarn的提交流程&&调度器

yarn的提交流程 client向ResourceManager发送请求 ResourceManager返回client一个ApplicationID client根据这个ApplicationID检

3年前
170
点赞
评论

HDFS的读写流程及故障恢复机制

HDFS的读流程客户端向NameNode请求元数据信息 NameNode返回数据块位置列表，并返回一个输入流对象客户端根据namenode返回的datanode列表，就进选择一个datanode建

3年前
219
点赞
评论