docker部署spark
8篇文章 · 0订阅
  • 基于Docker搭建大数据集群（八）Kafka部署
    基于Docker搭建大数据集群（八）Kafka部署一、安装包准备Kafka官网下载微云下载|在tar目录下二、配置文件server.properties在bin目录下新建start-kafka.sh将
  • 基于Docker搭建大数据集群（七）Hbase部署
    一、安装包准备Hbase官网下载微云下载|在tar目录下二、版本兼容三、角色分配节点MasterRegionservercluster-masteryesnocluster-slave1backupy
    Docker
  • 基于Docker搭建大数据集群（六）Hive搭建
    1. MySQL驱动 2. 将hive的jline包替换到hadoop的yarn下 1. 使用mysql替换默认的derby存放元数据 3. 自动初始化元数据 4. 关闭校验 5. 删除 description 中的 &#8，这个解析会报错 6. 替换相对路径
    Docker
  • 基于Docker搭建大数据集群（五）Mlsql部署
    主要内容mlsql部署前提zookeeper正常使用spark正常使用hadoop正常使用安装包微云下载|tar包目录下mlsql-cluster-2.4_2.11-1.4.0.tar.gzmlsql
    Docker
  • 基于Docker搭建大数据集群（四）Spark部署
    主要内容spark部署前提zookeeper正常使用JAVA_HOME环境变量HADOOP_HOME环境变量安装包微云下载|tar包目录下Spark2.4.4一、环境准备上传到docker镜像dock
  • 基于Docker搭建大数据集群（三）Hadoop部署
    主要内容Hadoop安装前提zookeeper正常使用JAVA_HOME环境变量安装包微云下载|tar包目录下Hadoop2.7.7角色划分角色分配NNDNSNNcluster-master是否否cl
    Docker
  • 基于Docker搭建大数据集群（二）基础组件配置
    主要内容jdk环境搭建scala环境搭建zookeeper部署mysql部署前提docker容器之间能免密钥登录yum源更换为阿里源安装包微云分享|tar包目录下JDK1.8.221Scala2.12
  • 基于Docker搭建大数据集群（一）Docker环境部署
    主要内容docker搭建docker部署CentOS容器免密钥通信容器保存成镜像docker镜像发布环境Linux7.6一、Docker安装安装工具包yuminstall-yyum-utils#安装工
    Docker