爱Rap篮球写代码的蔡徐

在提交大数据作业到集群上运行时，通常需要先将项目打成 JAR 包。这里以 Maven 为例，常用打包方式如下： 以下分别进行详细的说明。 不在 POM 中配置任何插件，直接使用 mvn package 进行项目打包，这对于没有使用外部依赖包的项目是可行的。但如果项目中使用了第三…

ContiPerf 是一个轻量级的单元测试工具，基于JUnit 4二次开发，使用它基于注解的方式，快速在本地进行单元压测并提供详细的报告。 1. 新建 SpringBoot 工程 2. 测试接口以及实现 3. 构建单元测试 4. 最终执行效果 @PerfTest(duratio…

详情请看 Kubernetes 中安装 Jenkins ，这里不过多叙述。 为了方便集成 Maven、Kubernetes、配置文件等等，这里需要安装几个别的插件,这里插件可以在 系统管理—>插件管理—>可选插件 里面安装下面列出的插件。 Jenkins 安装中默认安装 Git…

执行命令，出现以下信息即部署成功。

博主负责的项目主要采用阿里云数据库MySQL，最近频繁出现慢SQL告警，执行时间最长的竟然高达5分钟。导出日志后分析，主要原因竟然是没有命中索引和没有分页处理。其实这是非常低级的错误，我不禁后背一凉，团队成员的技术水平亟待提高啊。改造这些SQL的过程中，总结了一些经验分享给大家…

要实现在 Jenkins 中的构建工作，可以有多种方式，我们这里采用比较常用的 Pipeline 这种方式。Pipeline，简单来说，就是一套运行在 Jenkins 上的工作流框架，将原来独立运行于单个或者多个节点的任务连接起来，实现单个任务难以完成的复杂流程编排和可视化的工…

提到基于Kubernete的CI/CD，可以使用的工具有很多，比如Jenkins、Gitlab CI已经新兴的drone之类的，我们这里会使用大家最为熟悉的Jenkins来做CI/CD的工具，本教程基于k8s 1.16.1。 PVC 的全称是：PersistentVolumeC…

Spark汇总【Spark篇】---Spark中Shuffle文件的寻址【Spark篇】---SparkSql之UDF函数和UDAF函数【Spark篇】---SparkStreaming中算子中Out

kubectl安装后，默认是没有比如自动补全等功能的，频繁使用比较不方便。目前已经有各类kubectl小 工具 可以提高效率，还有kubectl专用的shell了。个人感觉比较好用有以下这些： kubectl 命令在bash中默认是没有自动补全的，需要安装bash_comple…