这是我参与「第五届青训营 」伴学笔记创作活动的第10天
消息队列的前世今生
消息中间件其实诞生的很早，早在1983年互联网应用还是一片荒芜的年代，有个在美国的印度小哥Vivek就设想了一种通用软件总线，世界上第一个现代消息队列软件The Information Bus(TIB)，他 TIB受到了企业的欢迎，这家公司的业务发展引起了当时最牛气的IT公司IBM的注意，于是他们一开始研发了自己消息队列软件，于是才有了后来的wesphere mq，再后来微软也加入了战团。接近2000年的时候，互联网时代已经初见曙光，全球的应用程序得到了极大地丰富，对于程序之间互联互通的需求越来越强烈，但是各大IT公司之间还是牢牢建立着各种技术壁垒，以此来保证自己的商业利益，所以消息中间件在那个时候是大型企业才能够用的起的高级玩意。
然而时代的洪流不可逆转，有壁垒就有打破壁垒的后来者，2001年sun发布了jms技术，试图在各大厂商的层面上再包装一层统一的java规范。java程序只需要针对jms api编程就可以了，不需要再关注使用了什么样的消息中间件，但是jms仅仅适用于java。2004年AMQP（高级消息队列协议）诞生了，才是真正促进了消息队列的繁荣发展，任何人都可以针对AMQP的标准进行编码。有好的协议指导，再加上互联网分布式应用的迅猛发展成为了消息中间件一飞冲天的最大动力，程序应用的互联互通，发布订阅，最大契合了消息中间件的最初的设计初衷。除了刚才介绍过的收费中间件，后来开源消息中间件开始层出不穷，常见比较流行的有ActiveMQ、RabbitMQ 、Kafak、阿里的RocketMQ，以及目前存算分离的Pulsar，在目前互联网应用中消息队列中间件基本上成为标配。
消息队列-Kafka
使用
- 创建一个Kafka集群
- 在集群中创建一个Topic，并且设置好分片数量
- 引入对应语言的SDK，配置好集群和Topic等参数，初始化一个生产者，调用send方法进行调试
- 引入对应语言的SDK，配置好集群和Topic等参数，初始化一个消费者，调用poll方法进行调试
基本概念
- Topic:Kakfa中的逻辑队列，可以理解成每一个不同的业务场景就是一个不同的topic,对于这个业务来说，所有的数据都存储在这个topic中
- Cluster:Kafka的物理集群，每个集群中可以新建多个不同的topic
- Producer:顾名思义，也就是消息的生产端，负责将业务消息发送到Topic当中
- Consumer:消息的消费端，负麦消费已经发送到topic中的消息
- Partition:通常topic会有多个分片，不同分片直接消息是可以并发来处理的，这样提高单个Topic的吞吐
