empcl

Avro是Hadoop的一个数据序列化系统，具有丰富的数据结构，支持二进制序列化方式，用于支持大批量数据交换。Avro使用Json格式来定义schema。schema可以由简单类型（null、boolean、int、long、float、double、bytes、string）…

Flink Kafka Connector 是 Flink 内置的 Kafka 连接器，它包含了从 Kafka Topic 读入数据的 Flink Kafka Consumer 以及向 Kafka Topic 写出数据的 Flink Kafka Producer，除此之外 Fl…

有一天，有几条虫子，干扰了老板赚钱，老板希望你能抓住它们。你带着年轻的锐气，青春的活力，学艺多年积累的程序设计艺术，打开了公司的代码仓库。远看，似乎一个运转的机器，巨大的代码堆积在一起形成了大致的轮廓

Groupby和reduce是大数据领域常见的算子，但是很多同学应该对其背后机制不甚了解。本文将从源码入手，为大家解析Flink中Groupby和reduce的原理，看看他们在背后做了什么。 groupby的算子会对数据进行排序嘛。 groupby和reduce过程中究竟有几次…

GC 对于Java 来说重要性不言而喻，不论是平日里对 JVM 的调优还是面试中的无情轰炸。 这篇文章我会以一问一答的方式来展开有关 GC 的内容。 不过在此之前强烈建议先看这篇文章深度揭秘垃圾回收底层。 因为这篇文章解释了很多有关垃圾回收的基本知识，能从源头上理解垃圾回收和日…

b树的话，和二叉树比起来树是很矮胖，IO操作减少了，是个多叉树，它每个节点都存了对应的行数据，可是如果这一行的数据的列不断的增加，那么这一页存储的节点就会变少，因为所占的空间不断的变大，树也会越来越高，增加IO操作次数，同时是也不支持范围查找。要是相同大小的空间可以存很多的节点…

看了源码才知道，我还是太菜了。。 1. RUNNING 2. SHUTDOWN 3. STOP 4. TIDYING 5. TERMINATED 由此可见 getTask里面是有超时标志的timed的，我们在第一篇平常说的线程池原理里面讲到，若非核心线程空闲keepAliveT…

本章目录一、线程池实战例子二、例子重点讲解2.1创建任务2.2创建任务列表2.3创建线程池提交任务列表并且关闭线程池2.4解析结果三、future接口方法讲解四、题外话上一篇我们讲了讲线程池的基本概念