在 Spark 2.0 中，有一些内置的 sources 。 以文件流的形式读取目录中写入的文件。支持的文件格式为 text ， csv ， json ， parquet 。文件必须以 atomically （原子方式）放置在给定的目录中 来自 Kafka 的 Poll 数据。…

如果想判断一个元素是不是在一个集合里，一般想到的是将集合中所有元素保存起来，然后通过比较确定。链表、树、散列表（又叫哈希表，Hash table）等等数据结构都是这种思路，一般来讲，计算机中的集合是用哈希表（Hash table）来存储的。 但是随着集合中元素的增加，我们需要的…

最近开始在学习mysql相关知识，自己根据学到的知识点，根据自己的理解整理分享出来，本篇文章会分析下一个sql语句在mysql中的执行流程，包括sql的查询在mysql内部会怎么流转，sql语句的更新是怎么完成的。在分析之前我会先带着你看看 MySQL 的基础架构，知道了 My…