首页
首页
AI Coding
NEW
沸点
课程
直播
活动
AI刷题
APP
插件
搜索历史
清空
创作者中心
写文章
发沸点
写笔记
写代码
草稿箱
创作灵感
查看更多
会员
登录
注册
Hadoop
我妻礼弥
创建于2021-06-11
订阅专栏
Hadoop 相关
等 2 人订阅
共9篇文章
创建于2021-06-11
订阅专栏
默认顺序
默认顺序
最早发布
最新发布
本地搭建 CDH 集群
CDH是Cloudera的100%开源平台发行版,包括Apache Hadoop,是专门为满足企业需求而构建的。CDH可立即提供企业使用所需的一切。通过将Hadoop与其他十几个关键的开源项目集成在一起,Cloudera创建了功能先进的系统,可帮助您执行端到端的大数据工作流程。…
虚拟机的网络模式
桥接模式又称 Bridged 模式,是将主机网卡与虚拟机的网卡利用虚拟网桥进行通信。在桥接的作用下,类似于把物理主机虚拟为一个交换机,所有桥接设置的虚拟机连接到这个交换机的一个接口上,物理主机也同样插在这个交换机当中,所以所有桥接下的网卡与网卡都是交换模式的,相互可以访问而不干…
VirtualBox 安装 CentOS
说明 虚拟机软件使用的是 Oracle VM VirtualBox ,版本为 6.1.12, 官方下载地址 OS 用的是 ContOS 7 x64 Minimal 版 , 官方下载页面 配置 Virt
VirtualBox 通过复制现有虚拟机快速创建新虚拟机
当我们辛辛苦苦安装、配置好一台虚拟机后,肯定不想在重复一遍相同的操作来创建一台新虚拟机,这时候可以通过 VirtualBox 的复制功能,从现有虚拟机中,快速复制出一个新的虚拟机,具体操作如下 复制虚
Hadoop 生态圈组件
待更新impala官网phoenix官网
hadoop 完全分布式系统搭建
hadoop 完全分布式模式使用的是master-slave(一主多从)的架构,即一个 namanode,多个 datanode。 由于该模式只有一个 namanode,所以存在单点故障问题,生产中一般很少使用。 如上,我们需要3台虚拟机,我们可以先创建好一台机器后,通过虚拟机…
hadoop 高可用集群搭建
Hadoop 高可用分为 HDFS 高可用和 YARN 高可用,两者的实现基本类似,但 HDFS NameNode 对数据存储及其一致性的要求比 YARN ResourceManger 高得多,所以它的实现也更加复杂。
Linux 安装、配置 hadoop
单机模式:不需要配置任何东西,直接解压就可以使用,这种模式下不存在分布式文件系统,单机模式下数据的存取来源于本地文件系统,没有任何守护进程,该模式主要用于开发调试MapReduce程序的应用逻辑。 伪分布式模式:将hadoop安装在一个节点上,存在分布式文件系统,用起来和完全分…
windows 安装、配置 hadoop 3.x
由于 windows 安装 hadoop 是个基本需求,官方不提供自有他人提供。winutils 是 github 上开源的项目,提供编译好的hadoop的windows版本二进制文件供大家下载, 配置默认hdfs的访问端口。