首页
沸点
课程
数据标注
HOT
AI Coding
更多
直播
活动
APP
插件
直播
活动
APP
插件
搜索历史
清空
创作者中心
写文章
发沸点
写笔记
写代码
草稿箱
创作灵感
查看更多
登录
注册
zhaofairy0105
掘友等级
获得徽章 0
动态
文章
专栏
沸点
收藏集
关注
作品
赞
16
文章 15
沸点 1
赞
16
返回
|
搜索文章
赞
文章( 15 )
沸点( 1 )
hadoop系列(1)---Hadoop介绍与由来
「这是我参与11月更文挑战的第1天,活动详情查看:2021最后一次更文挑战」 Hadoop诞生于2006年,是一款支持数据密集型分布式应用并以Apache 2.0许可协议发布的开源软件框架。 它支持在
hadoop系列(2)---HDFS 设计原理
「这是我参与11月更文挑战的第2天,活动详情查看:2021最后一次更文挑战」 ______ 从上图可以看出客户端是将文件的元数据(metadata)元数据包含块指针(也就是文件的每一个Block副本
hadoop系列(3)---HDFS 存储概念
「这是我参与11月更文挑战的第3天,活动详情查看:2021最后一次更文挑战」 文件系统命名空间 HDFS 的 文件系统命名空间 的层次结构与大多数文件系统类似 (如 Linux), 支持目录和文件的创
hadoop系列(4)---HDFS稳定性支持
「这是我参与11月更文挑战的第4天,活动详情查看:2021最后一次更文挑战」 心跳机制和重新复制 每个 DataNode 定期向 NameNode 发送心跳消息,如果超过指定时间没有收到心跳消息,则将
hadoop系列(5)---Hadoop读写流程
HDFS写流程 「这是我参与11月更文挑战的第4天,活动详情查看:2021最后一次更文挑战」 NameNode负责管理存储在HDFS上所有文件的元数据 ,它会确认客户端的请求,并记录下文件的名字和存储
hadoop系列(6)---Hadoop搭建-前置环境与单机模式
这是我参与11月更文挑战的第6天,活动详情查看:2021最后一次更文挑战」 前置环境 免密配置 单机模式 core-site.xml hdfs-site.xml slaves 文件 初始化HDFS 启
hadoop系列(7)---Hadoop搭建-分布式模式与高可用模式
这是我参与11月更文挑战的第7天,活动详情查看:2021最后一次更文挑战」 分布式模式 core-site.xml 不需要改 hdfs-site.xml 设置dataNode工作节点 将配置分发到其他
hadoop系列(8)---HDFS 常用 shell 命令
这是我参与11月更文挑战的第8天,活动详情查看:2021最后一次更文挑战」 显示当前目录结构 创建目录 删除操作 从本地加载文件到 HDFS 从 HDFS 导出文件到本地 查看文件内容 显示文件的最后
hadoop系列(9)---如何在JAVA中使用HDFS
这是我参与11月更文挑战的第7天,活动详情查看:2021最后一次更文挑战」 使用HDFS只需要引入特定的依赖就行了 依赖 代码(初始化配置 链接) 使用API(application programm
hadoop系列(10)---Hadoop如何体现计算向数据移动
这是我参与11月更文挑战的第10天,活动详情查看:2021最后一次更文挑战」 hadoop1.x的体现 根据每次需要计算的数据,咨询NN元数据,得到block信息,算出所需的split数,得到一个sp
下一页
关注了
1
关注者
0
收藏集
0
关注标签
0
加入于
2021-11-16