IT小王

近期打算升级dolphinscheduler到3.2.0，因此进行了一波测试。本文主要讲解在测试数据质量模块的时候遇到的问题，以及问题的原因。和临时解决方案（由于非专门后端...

先说结论：可能因为角色SQL判断复杂，查询不通用的特性。导致没有将JDBC方式进行角色查询与校验的相关代码放入。 一、背景 最近在调研 zeppelin（0.10.1 版本...

想要进行大数据相关开发、学习，就必须先有一个大数据环境。而面对如此繁多的大数据组件，维护和管理将异常困难，因此有一个好的管理工具，将事半功倍。而 Ambari 就是这样的一...

一、编译准备 创建一个CentOS7虚拟机 安装 JDK8 安装编译基本软件 安装 Maven 3.6.3 通常还可以在 setttings.xml 配置阿里云镜像（但是后...

今天在开发数据的时候，发现数据不对，排查后发现是原来用写的 presto 脚本改造成 spark-sql 后没有问题，放到 hive 中却有问题，最后，放到测试机器中的 h...

CentOS离线安装RPM及其依赖包 公司机器一般情况下都是内网，那么这时候如何安装软件呢，如果只是几个 rpm 包，手动下载还是能接受的，但是如果是大量依赖呢？这时候 r...

Apache Ambari是一种基于Web的工具，支持Apache Hadoop集群的供应、管理和监控。本文来从0开始，教你如何通过Ambari搭建一个大数据集群环境。...