落叶飞逝的恋

一、Settings设置 可以设置索引库的一些配置信息，主要针对分片数量和副本数量。分片数量只能在一开始创建索引库的时候指定，后期不能修改，副本数量可以随时修改 返回的结果...

这是我参与「掘金日新计划 · 2 月更文挑战」的第 8 天，点击查看活动详情” 一、Elasticsearch查询详解 查询单条数据可以使用Get 查询一批满足条件的数据需...

这是我参与「掘金日新计划 · 2 月更文挑战」的第 7 天，点击查看活动详情” 一、ES的基本使用 针对ES操作，官方提供了很多种操作方式。https://www.elas...

这是我参与「掘金日新计划 · 2 月更文挑战」的第 6 天，点击查看活动详情” 一、为什么需要掌握Elasticsearch MapReduce、Hive、Spark、Fl...

这是我参与「掘金日新计划 · 2 月更文挑战」的第 5 天，点击查看活动详情” 一、常用数据类型 ClickHouse可以在数据库表中存储多种数据类型。可以通过下面的命令查...

这是我参与「掘金日新计划 · 2 月更文挑战」的第 4 天，点击查看活动详情” 一、什么是ClickHouse ClickHouse是一个用于联机分析(OLAP)的列式数据...

这是我参与「掘金日新计划 · 2 月更文挑战」的第 3 天，点击查看活动详情” 一、Savepoint Checkpoint是为了保证应用在出现故障时可以顺利重启恢复 Sa...

一、State的容错与一致性 如何保证Flink流式任务故障后恢复到之前的状态？ 针对流式计算任务，在故障后恢复状态数据的时候，会涉及到三种语义。第一种： 至少一次：At-...

一、什么是State状态 当前流计算任务执行过程中需要用到之前的数据，那么之前的数据就可以称之为状态。流计算任务中的状态其实可以理解为历史流数据。状态在代码层面体现，其实就...

一、Spark Streaming Spark Streaming是Spark Core API的一种扩展，它可以用于进行大规模、高吞吐量、容错的实时数据流的处理。这个实时...

一、并行度 一个Flink任务由多个组件组成（DataSource、Transformation、DataSink） 一个组件由多个并行的实例（线程）来执行，一个组件的并行...

一、Watermark 当我们使用EventTime处理流数据的时候，会遇到数据乱序的问题。流处理从数据产生，到流经Source，再到具体的算子，中间是有一个过程和时间的，...

一、Window窗口 Flink批处理是流处理的一个特例，所以Flink底层引擎是一个流式引擎，在上面实现了流处理和批处理，而window是流处理到批处理的一个桥梁 Win...

一、DataSet API 1.1、DataSet API 之 DataSource 基于集合 fromCollection(Collection) 基于文件 readTe...

一、Flink核心API SQL Table API DataStream/DataSet API Stateful Stream Processing 一、DataStr...

一、Flink批处理 先把hello.txt文件上传到hdfs文件中 java批处理代码实现 此时我们上面的代码还需要引入hadoop-client 执行完毕后，在hdfs...

一、什么线程安全？ 当多个线程访问一个对象时，如果不用考虑这些线程在运行时环境下的调度和交替执行问题，也不需要进行额外的同步，而调用这个对象的行为都可以获取正确的结果，那这...

一、什么是Flink Flink是一个开源的分布式，高性能，高可用，准确的流处理框架。支持流（Stream）处理（实时计算）和批（Batch）处理（离线计算） 分布式：可以...

一、Redis Java代码使用 pom文件引入依赖 不使用线程池的方式 使用线程池的方式 二、封装Redis工具类 二、Redis高级命令 2.1、expire 生成时间...

一、String string类型是Redis中最基本的数据类型，它能存储任何形式的内容，包含二进制数据，甚至一张图片 一个string类型的值存储的最大容量是1GB st...