冷月无声

debug并不是个简单的事情，有些问题产生了，不要着慌，了解哪些是可以确定的，哪些并不确定。解决问题总有基本点，不要错过了...

Hive的自定义函数的Java实现类需要集成org.apache.hadoop.hive.ql.exec.UDF 1. 实现自定义函数类 2. 部署jar 将jar导入Hi...

Hive JDBC的连接参数是jdbc:hive2://host:10001/（默认数据库是default），驱动是org.apache.hive.jdbc.HiveDri...

在Hive 0.1.3之前，Hive的事务能力是在分区级别上的，但0.1.3之后，Hive提供了在行级别上的ACID能力。 参考 【1】Hive官方文档...

Hive QL主要分为DDL、DML、UDF 1. 操作数据库 创建数据库 描述数据库 改变默认数据库 删除数据库 2. 创建表 先判断再创建表，默认创建的是内部表 创建外...

Hive是分布式的、可容错的数据仓库 Hive可以将结构化的数据文件映射为数据表，执行引擎可以是MR、Spark、Tez Hive通过SQL查询分析数据，该SQL称为Hiv...

xxl-job是分布式任务调度平台 ，通过web界面对任务进行CRUD操作；支持任务修改、启动、停止；调度中心HA采用中心式设计...

ls命令是常用的shell命令，但是其很多精微的用法，我们其实并不熟悉。在实际工作中，总会慢慢的有所接触，这里做下简单记录...

Livy是一个面向spark的REST服务，支持可编程的、可容错的、多租户的spark job的提交。...

Apache Kyuubi是分布式、多租户的网关，可以为数据仓库和湖仓提供serverless sql...

DolphineScheduler是国产的、分布式的、DAG工作流任务调度开源系统，致力于解决数据处理流程中的依赖关系。...

在kafka目录，查看topic列表，需要指定bootstrap-server 查看指定topic的消费信息...

这是在工作中遇到的一个问题，之前可以正常运行的本地代码，在更换环境配置之后，无法正常启动。报的错误是org.apache.kafka.common.errors.Timeo...

现象 打算在idea中引入redis插件，在搜索插件市场时，选中ledis 2，如下图所示 可惜该插件是付费插件，但也只是暂时使用。但不幸的是，在安装该插件之后，重启ide...

需求 在工作过程中，要实现单点登录往往需要不同服务所在主机保持时钟同步。 过程 1）安装chrony，并进行配置 首先确定，centos7中是否已经默认安装chrony 如...

背景 在项目开发中，需要keycloak的token返回手机字段，但是查看token的payload内容中却并没有相关字段。 过程 1 keycloak的token是可以通...

背景 当阅读到一些好的博客文章时，按照惯例，习惯将其添加到浏览器的收藏夹。不幸的是，当重新翻找时，它们往往已经链接失效。另一方面，自己平时有整理markdown的习惯，但是...

前提 在工作中遇到一个问题，基于kong的API网关，在遇到某些含有路径参数的情况下，会发生问题。下面举个例子，以说明情况。 当前有待注册服务请求A：/path/{page...

目标 通过REST API方式调用ldap分页结果 过程 ldap的分页是通过cookie实现，通过Cursor自动生成的代码并稍作如下 上面示例可以将ldap中的条目按照...