XinXing

全部依赖打入jar包中只把指定依赖打入jar包1.不需要打入的dependency加作用域<scope>provided</scope>即可2.例：不需要把Mysql打入jar包:

cluster：Driver端在Yarn分配的ApplicationMaster上启动一个Driver。与其他Excute交互 JARS：你程序依赖的jar包。如果有多个用,分隔 个别作业需要单独设置spark-conf参数，就在这里加。有10个就--conf十次 程序所依赖的…

Sqoop(发音：skup)是一款开源的工具，主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql...)间进行数据的传递，可以将一个关系型数据库（例如 ： MySQL ,Oracle,Postgres等）中的数据导进到Hadoop的HDFS中，也…

|set wildmenu||命令模式下，操作指令按下Tab自动补全。第一次按下显示所有匹配的操作指令的清单；第二次按下依次选择各个指令。

0. gitlab绑定主机密钥 1. 初始化本地仓库 2. 关联本地仓库与远程Gitlab仓库 3. 拉取远程仓库内容 4. 切换到开发分支 5. 代码推送至远程分支 5.3.1 在git中一共有三个区，分别是工作区，暂存区和提交区。其三者的对应关系是这样的： 当在暂存区执行g…

本地开发代码跟生产上线感觉就像两套代码一样，经常性在本地开发&#x26;调试无问题，一上生产就出问题。 在你自己要运行的jar包加参数-Xrunjdwp:transport=dt_socket,address=5005,server=y,suspend=y即可，由于我一个jar…

错误。是所有错误的基类：java.lang.Error

最近接到一个傻瓜任务，定期删除软件目录下的日志文件，但具体要保留多少天的日志确定不了。所以定时调度不能满足需求。 为什么要删除日志？C盘50GB D盘900G，实施人员把软件直接装到C盘了。。为了一劳永逸，把日志目录搞到D盘后在软链过去。但是win快捷方式并不能像Linux软链…

Flume是一个高可用的、高可靠的、分布式的海量日志采集、聚合和传输的系统，Flume支持在日志系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据进行简单处理，并写到各种数据接受方（可定制）的能力。 Agent主要由:source,channel,sink三个组…