XinXing

我司需对全国车厂数据做分析以及监控(缴费、异常抬杆、进出、车辆类型、牌照等),JAVA那边的小伙伴负责部署Driver端实时把各节点底表数据同步上传至kafka中供数据组使...

Clickhouse集群部署文档 Clickhouse集群部署文档 Clickhouse集群部署文档...

HiveSQL常用语法汇总。关联：hsql、hadoop、spark、spark sql、impala...

spark调用HTTP请求并返回数据落地到数据库 spark调用HTTP请求并返回数据落地到数据库 spark调用HTTP请求并返回数据落地到数据库...

SparkSQL外部数据源读写Oracle SparkSQL外部数据源读写Oracle SparkSQL外部数据源读写Oracle...

今天早晨看到CDH集群推送的邮箱告警，发现磁盘不够用了。本身生产线写入Clickhouse数据量并不大，但ClikeHouse把磁盘空间撑满了就很迷惑。 由于生产环境有业务...

加入依赖Demo...

全部依赖打入jar包中只把指定依赖打入jar包1.不需要打入的dependency加作用域<scope>provided</scope>即可2.例：不需要把Mysql打入j...

cluster：Driver端在Yarn分配的ApplicationMaster上启动一个Driver。与其他Excute交互 JARS：你程序依赖的jar包。如果有多个用...

Sqoop(发音：skup)是一款开源的工具，主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql...)间进行数据的传递，可以将一个关系型数...

|set wildmenu||命令模式下，操作指令按下Tab自动补全。第一次按下显示所有匹配的操作指令的清单；第二次按下依次选择各个指令。...

0. gitlab绑定主机密钥 1. 初始化本地仓库 2. 关联本地仓库与远程Gitlab仓库 3. 拉取远程仓库内容 4. 切换到开发分支 5. 代码推送至远程分支 5....

本地开发代码跟生产上线感觉就像两套代码一样，经常性在本地开发&#x26;调试无问题，一上生产就出问题。 在你自己要运行的jar包加参数-Xrunjdwp:transport...

错误。是所有错误的基类：java.lang.Error...

前言无论kafka作为MQ也好，作为存储层也罢，无非就是两个功能（好简单的样子），一是Producer生产的数据存到broker，二是Consumer从broker读取数据...

最近接到一个傻瓜任务，定期删除软件目录下的日志文件，但具体要保留多少天的日志确定不了。所以定时调度不能满足需求。 为什么要删除日志？C盘50GB D盘900G，实施人员把软...

Flume是一个高可用的、高可靠的、分布式的海量日志采集、聚合和传输的系统，Flume支持在日志系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据进行简单处...