首页
AI Coding
NEW
沸点
课程
直播
活动
AI刷题
APP
插件
搜索历史
清空
创作者中心
写文章
发沸点
写笔记
写代码
草稿箱
创作灵感
查看更多
会员
登录
注册
想喝又怕醉的酒
掘友等级
获得徽章 0
动态
文章
专栏
沸点
收藏集
关注
作品
赞
2
文章 2
沸点 0
赞
2
返回
|
搜索文章
最新
热门
Hive 集成 Hudi
Flink/Spark作为读写Hudi的引擎,可以在写入Hudi的时候,将元数据信息同步到Hive中,这样Hive就能读取Hudi的数据了。同时还可以指定配置参数,实现Hive对Hudi的增量读取等功
flink sql设置表的时间属性
一、事件时间属性 1. 在创建表的DDL语句中定义 Flinksql 中支持的事件时间属性数据类型必须为 TIMESTAMP 或者 TIMESTAMP_LTZ。这里 TIMESTAMP_LTZ 是指带
flink-kafka 实现端到端的 exactly-once 状态一致性
FlinkKafkaConsumer FlinkKafkaConsumer将当前读取的偏移量保存为算子状态,写入到检查点中;当发生故障时,从检查点中读取恢复状态,并由连接器 FlinkKafkaCon
Flink 状态使用与状态分配
当Flink程序从checkpoint恢复,或者从savepoint中重启的时候,就会涉及到状态的重新分配,尤其是当并行度发生改变的时候。算子状态和键控状态的分配策略不同。 一、算子状态 1. 列表状
flink之状态生存时间
.newBuilder() 状态 TTL 配置的构造器方法,必须调用,返回一个 Builder 之后再调用.build()方法就可以得到 StateTtlConfig 了。方法需要传入一个 Time
Flink之多流转换
1. union 所有流的数据类型必须一致。 对于合流之后的水位线,也是要以原有的流中最小的那个为准,这样才可以保证所有流都不会再传来之前的数据。换句话说,多流合并时处理的时效性是以最慢的那个流为准的
个人成就
文章被点赞
2
文章被阅读
4,689
掘力值
189
关注了
0
关注者
0
收藏集
0
关注标签
0
加入于
2021-06-15