清茗一盏

前度学习 Vue.js 是一个渐进式 JavaScript 框架，主要用于构建用户界面。 Vue.js 基于组件化和响应式数据的理念，提供了一种简单高效的方式来构建用户界面...

1. 资源动态分配参数 测试生产环境中spark on yarn作业 发现资源的参数无论怎么调整资源参数 启动job后，任务的资源参数与启动的都对不上；后来在cdp集群的s...

大数据数仓 数仓的搭建主要包括数据的接入，数据的存储，数据的计算。数据接入主要依赖基于业务库查询或者binlog日志的cdc组件，存储组件主要就是hadoop的hdfs、y...

一、CDC 实现机制 目前实现 CDC 的机制主要有两种，即： 1. 基于查询的 CDC 每次通过查询去获取表中最新的数据 数据一致性无法保证，查的过程中有可能数据已经发生...

1. 行转列(转置) 行转列的常规做法是，group by+sum(if())【或count(if())】 year month amount 1991 1 1.1 199...

# 1. hive系列面试分享 ## 1.hive sql连续登录问题： ![image.png]...

sparksql源码解析 1.sparkSQL的主要组件以及作用 Spark SQL是Apache Spark的一个模块，用于处理结构化和半结构化数据。它提供了编程接口，用...

1.二叉树基本算法 1.1判断是否是完全二叉树？(IsCBT) 通过队列的方式 层式遍历； 当节点的右节点存在左节点不存在那么不是完全二叉树； 当一个节点为叶结点的时候 那...

动态规划一练习1）设计暴力递归：重要原则+4种常见尝试模型！重点！ 2）分析有没有重复解：套路解决 3）用记忆化搜索 -> 用严格表结构实现动态规划：套路解决 4）看看能否...

1.有一个消费kafka 信息报文的任务，手动创建分区数的线程，每个线程（守护）分别消费每个分区的数据，offset存储在redis。 突然生产环境消费的速率特别慢，排除由...

checkpoint的过程包含了JobManager和Taskmanager端task的执行过程，按照步骤为： 1、在JobManager端构建ExecutionGraph...

1.Flink 运行时的组件 接下来主要对这四个组件进行讲解； 1.1作业管理器（JobManager） 控制一个应用程序执行的主进程，也就是说，每个应用程序都会被一个不同...

jvm中对于不再存活的对象进项垃圾回收，那又是怎样判断对象是否存活？怎样垃圾回收？以及用什么样的方式进行垃圾回收？ 1.JVM 是如何判断对象是否存活的？ 通过可达性分析算...

1.dolphinscheduler的整体调用架构图： 2.通过阅读源码个人的简要理解 海豚调度 个人简单理解：是api 提供执行调度脚本的接口，比如发布一个调度脚本任务，...

运行时数据区包括什么？     31.说说你对程序计数器的理解 程序计数器（Program Counter Register）是一块较小的内存空间，它可以看作是当前线程所执...