Oliver511

本章将通过对大数据核心架构类型进行梳理，以及通过对不同阶段基础选型工具的讲解，带大家详细了解大数据架构的演进历程。

1、纯Java API读写HBase的方式 2、使用 saveAsHadoopDataset和saveAsNewAPIHadoopDataset 写入数据 3、使用 newAPIHadoopRDD 读

IOC---控制反转，也称依赖倒置。

在这篇文章中，我将从消息在Kafka中的物理存储方式讲起，介绍分区-日志段-日志的各个层次。 然后我将接着上一篇文章的内容，把消费者的内容展开讲一讲，区分消费者与消费者组，以及这么设计有什么用。 根据消费者的消费可能引发的问题，我将介绍Kafka中的位移主题，以及消费者要怎么提…

众所周知，消息队列的产品有好几种，这里我选择学习Kafka的原因，无他，公司在用。 下面我以Kafka为例对这些问题进行简单的解答，进而入门Kafka。 众所周知，Kafka是一个消息队列，把消息放到队列里边的叫生产者，从队列里边消费的叫消费者。 一个消息中间件，队列不单单只有…