想喝又怕醉的酒

1. POM文件 2. 添加配置文件 在resource目录下新建 config.properties 在resource目录下新建generatorConfig.xml ...

连接kerberos认证的hive其实很简单，主要包含三个内容： krb5.conf配置文件 密钥文件.keytab 认证的principal 认证核心代码： 认证通过之后...

@RequiredArgsConstructor是Lombok的一个注解，简化了我们对@Autowired书写，我们在写Controller层或者Service层的时候，总...

数据治理过程中，需要java后端连接不同数据源去执行不同sql，这就涉及到根据jdbc去从jar文件里面去加载数据库的驱动(把所有驱动都加在依赖里面似乎不太现实，每新增一种...

1. 选择版本，安装PGSQL 例如MADlib 1.20 支持pgsql 11或者12。 yum 安装pgsql12，其安装脚本在官网上可以找到。 2. 配置PGSQL ...

web开发中，实现restful controller接口和graphql接口共存，即既支持restful，也支持graphql。 只需要让对应的controller继承该...

java Timer api SpringTask，通过注解进行配置 SpringBoot整合Quarze...

使用dynamic-datasource-spring-boot-starter组件 mybatis采用常规配置...

ClickHouse的BitMap只能用于存储整型，其用于存储用户画像数据的原理为： 对于一个画像需求，可能涉及到多个tag，每个tag都可能有多个tag value，例如...

Kakfa中的数据导入到ClickHouse，一般通过Flume/Logstash等数据采集工具进行导入 通过ClickHouse 的Kafka引擎 具体步骤如下： 使用引...

Flink/Spark作为读写Hudi的引擎，可以在写入Hudi的时候，将元数据信息同步到Hive中，这样Hive就能读取Hudi的数据了。同时还可以指定配置参数，实现Hi...

一、事件时间属性 1. 在创建表的DDL语句中定义 Flinksql 中支持的事件时间属性数据类型必须为 TIMESTAMP 或者 TIMESTAMP_LTZ。这里 TIM...

FlinkKafkaConsumer FlinkKafkaConsumer将当前读取的偏移量保存为算子状态，写入到检查点中；当发生故障时，从检查点中读取恢复状态，并由连接器...

当Flink程序从checkpoint恢复，或者从savepoint中重启的时候，就会涉及到状态的重新分配，尤其是当并行度发生改变的时候。算子状态和键控状态的分配策略不同。...

.newBuilder() 状态 TTL 配置的构造器方法，必须调用，返回一个 Builder 之后再调用.build()方法就可以得到 StateTtlConfig 了。...

1. union 所有流的数据类型必须一致。 对于合流之后的水位线，也是要以原有的流中最小的那个为准，这样才可以保证所有流都不会再传来之前的数据。换句话说，多流合并时处理的...