大数据

本文已参与「新人创作礼」活动，一起开启掘金创作之路 azkaban 提交任务不执行直接失败 azkaban web 报错 ERROR [FlowTriggerScheduler] [Azkaban]

本文已参与「新人创作礼」活动，一起开启掘金创作之路 kafka消费不到远程bootstrap-server 数据

本文已参与「新人创作礼」活动，一起开启掘金创作之路 准备 安装 mdadm mdadm参数 -a 检测设备名称 -n 指定设备数量 -l 指定RAID等级 -C 创建 -v 显示过程 -f 模拟设备损

本文已参与「新人创作礼」活动，一起开启掘金创作之路 现象 datanode 运行一段时间后，先stale，最后dead 报错 查看datanode日志： 原因分析 因为是在Hadoop集群下跑hive

本文已参与「新人创作礼」活动，一起开启掘金创作之路 背景 在hive中orc格式会自动将string类型的数据，hdfs文件加载成数据类型，就导致使用多表关联 jion on id = "11"时报错

本文已参与「新人创作礼」活动，一起开启掘金创作之路 hbase 元数据修复 问题 hbase fck 报错： 解决 有的region上线有问题 用工具给触发上线了 Hbck异常定位和修复 这有点东西

本文已参与「新人创作礼」活动，一起开启掘金创作之路 ambari项目重部署问题 步骤 一、先将所有服务停掉（在页面上操作就行） 如果没有停止，执行以下操作补救 二、执行删除脚本 删除脚本参考 三、重新

本文已参与「新人创作礼」活动，一起开启掘金创作之路 背景 本文是 ambari 完全卸载的 然后更换ambari的 删除脚本，测试环境需要把之前安装ambari卸载，安装高版本amabri 删除脚本

本文已参与「新人创作礼」活动，一起开启掘金创作之路 背景 UAR（用户画像分析）系统 从CDH 迁移到 HDP --master yarn-cluster 没有问题 但是yarn -client 报错

本文已参与「新人创作礼」活动，一起开启掘金创作之路 MYSQL 连接缓慢 问题 原因 出现该错误的原因： MySQL 数据库服务器没有配置 /etc/hosts，也没有DNS服务，导致mysqld线程

本文已参与「新人创作礼」活动，一起开启掘金创作之路 CDH安装脚本 这个是很早之前写的，里面ip什么的细节需要调整，千万别直接用 前提要下好CDH的包

本文已参与「新人创作礼」活动，一起开启掘金创作之路 mongodb mongodb 副文本集搭建 脚本 mongodb 副文本集启动停止脚本

本文已参与「新人创作礼」活动，一起开启掘金创作之路 ambari-agent 主机心跳丢失报错 背景 amabri 安装后，ambari-agent包心跳丢失告警

动态加载hive-jdbc，由于hive-jdbc的版本一般不具有向下兼容性，所以当我们需要从不同hadoop集群取hive数据的时候，考虑动态去加载不同版本的hive-jdbc驱动。

本文已参与「新人创作礼」活动，一起开启掘金创作之路 mysqldump用于主主（主从）复制（不加锁，不影响业务） 操作 1.备份主库数据 2.从库加载数据 3.从库修改log位置 4.启动slave

org.apache.hadoop.hdfs.server.namenode.SafeModeException: Zero blocklocations for

本文已参与「新人创作礼」活动，一起开启掘金创作之路 TezSession has already shutdown. No cluster diagnostics found.

java.io.FileNotFoundException: Filejava.lang.NoClassDefFoundError: org/apache/hadoop/hive/conf/HiveC

本文已参与「新人创作礼」活动，一起开启掘金创作之路 pyspark 初始化报错 pyspark TypeError: ‘JavaPackage‘ object is not callable 问题

本文已参与「新人创作礼」活动，一起开启掘金创作之路 mysql双主+keepalived实现mysql高可用并为ambari 与hive 提供服务 mysql双主 同步初始状态 1、将主服务器要同步的