大家好，今天我将跟大家分享一下 Flink 里面的 Checkpoint，共分为四个部分。首先讲一下 Checkpoint 与 state 的关系，然后介绍什么是 state，第三部分介绍如何在 Flink 中使用state，第四部分则介绍 Checkpoint 的执行机制。 …

checkpoint机制是Flink可靠性的基石，可以保证Flink集群在某个算子因为某些原因(如 异常退出)出现故障时，能够将整个应用流图的状态恢复到故障之前的某一状态，保 证应用流图状态的一致性。Flink的checkpoint机制原理来自“Chandy-Lamport a…

Source 端：数据从上一阶段进入到 Flink 时，需要保证消息精准一次消费。 Flink 内部端：这个我们已经了解，利用 Checkpoint 机制，把状态存盘，发生故障的时候可以恢复，保证内部的状态一致性。不了解的小伙伴可以看下我之前的文章： Sink 端：将处理完的数…

面试，一个令人大多数同学头疼的问题，要么成功进入心仪公司，要么沮丧与其失之交臂。但是，如果能在面试前就能知道面试官将会问的问题，然后可以好好提前准备，这种感觉是不是特别棒？ 那么究竟怎么积累技术实力，成为 Flink 高级开发，拿下心仪公司的 offer 呢？小松鼠征集了 Fl…

概述2019年是大数据实时计算领域最不平凡的一年，2019年1月阿里巴巴Blink（内部的Flink分支版本）开源，大数据领域一夜间从Spark独步天下走向了两强争霸的时代。Flink因为其天然的流式

最近没什么事干就开始整理一下以前用过的技术，打发时间。 我之前基于Flink的使用主要也是用于实时处理，离线基本使用spark,这里可以简单了解一下Flink 与 Spark 简要对比，简单来讲就是实时处理方面Flink更好，离线Spark更好。安装部署的话，我这边就不再演示了…

大家好，我是老兵。 本系列为大数据技术栈面试体系系列，每期将分享一个技术组件的知识全体系，并结合面试的形式由浅入深讲解。 本期将介绍大数据实时计算利器Flink面试体系。

Flink 的 watermark 到底是什么？watermark有哪些类型？怎么生成？怎么处理数据？有没有代码样例？进来你都能看到

Word Count 是数据处理框架、平台的Hello World。程序作用很简单，就是数有多少英文的单词。我们今天要使用 Flink 1.10 制作一个流版本的 Word Count。在这个流版本的 Word Count 中呢，字符串会以流的方式从输入到Flink中，并且我们…