RabbitMq
MQ引言
什么是MQ
MQ(Message Quene) : 翻译为 消息队列, 通过典型的 生产者和消费者模型, 生产者不断向消息队列中生产消息,消费者不断的从队列中获取消息。
因为消息的生产和消费都是异步的,而且只关心消息的发送和接收,没有业务逻辑的侵入, 轻松的实现系统间解耦。
别名为 消息中间件 通过利用高效可靠的消息传递机制进行平台无关的数据交流,并基于数据通信来进行分布式系统的集成。
- 对生产者来说,无需关心消费者怎么消费,只需要把消息写入消费队列即可。
- 消费者也无需关心生产者有没有正常运行,只需要把接收到的消息进行业务处理即可。
- 整个消息队列中没有api的侵入,实现了系统间的解耦
MQ有哪些
当今市面上有很多主流的消息中间件,如老牌的ActiveMQ、RabbitMQ,炙手可热的Kafka,阿里巴巴自主开发RocketMQ等。
不同MQ特点
-
ActiveMQ
ActiveMQ 是Apache出品,最流行的,能力强劲的开源消息总线。它是一个完全支持JMS规范的的消息中间件。
丰富的API,多种集群架构模式让ActiveMQ在业界成为老牌的消息中间件, 在中小型企业颇受欢迎!性能是它的缺点,吞吐量不高。 -
Kafka Kafka是LinkedIn开源的分布式发布-订阅消息系统,目前归属于Apache顶级项目。
Kafka主要特点是基于Pull的模式来处理消息消费,追求高吞吐量,一开始的目的就是用于日志收集和传输。0.8版本开始支持复制,不支持事务,对消息的重复、丢失、错误没有严格要求,适合产生大量数据的互联网服务的数据收集业务。 -
RocketMQ RocketMQ是阿里开源的消息中间件,它是纯Java开发,具有
高吞吐量、高可用性、适合大规模分布式系统应用的特点。
RocketMQ思路起源于Kafka,但并不是Kafka的一个Copy,它对消息的可靠传输及事务性做了优化,目前在阿里集团被广泛应用于交易、充值、流计算、消息推送、日志流式处理、binglog分发等场景。官方版本才支持分布式事务(收费),开源版本不支持。 -
RabbitMQ
RabbitMQ是使用Erlang语言开发的开源消息队列系统,基于AMQP协议来实现。
AMQP的主要特征是面向消息、队列、路由(包括点对点和发布/订阅)、可靠性、安全。
AMQP协议更多用在企业系统内对数据一致性、稳定性和可靠性要求很高的场景,对性能和吞吐量的要求还在其次。
RabbitMQ比Kafka可靠,Kafka更适合IO高吞吐的处理,一般应用在大数据日志处理或对实时性(少量延迟),可靠性(少量丢数据)要求稍低的场景使用,比如ELK日志收集。
RabbitMQ 的引言
基于
AMQP协议,erlang语言开发,是部署最广泛的开源消息中间件, 是最受欢迎的开源消息中间件之一。
官方教程: www.rabbitmq.com/#getstarted
AMQP 协议
AMQP(advanced message queuing protocol)在2003年时被提出,最早用于解决金融领不同平台之间的消息传递交互问题。
顾名思义,AMQP是一种协议,更准确的说是一种binary wire-level protocol(链接协议)。
这是其和JMS的本质差别,AMQP不从API层进行限定,而是直接定义网络交换的数据格式。这使得实现了AMQP的provider天然性就是跨平台的。以下是AMQP协议模型:
如上图,rabbitMq不会把消息直接发送到队列,而是发送到交换机
RabbitMQ 的安装
下载
官网下载地址: www.rabbitmq.com/download.ht…
最新版本: 3.7.18
下载的安装包
注意:这里的安装包是centos7安装的包
安装步骤
1. 将rabbitmq安装包上传到linux系统中
erlang-22.0.7-1.el7.x86_64.rpm
rabbitmq-server-3.7.18-1.el7.noarch.rpm
socat-1.7.3.2-2.el7.x86_64.rpm
2. 安装依赖包
rpm -ivh erlang-22.0.7-1.el7.x86_64.rpm
rpm -ivh socat-1.7.3.2-2.el7.x86_64.rpm
rpm -ivh rabbitmq-server-3.7.18-1.el7.noarch.rpm
3. 安装RabbitMQ安装包(需要联网)
yum install -y rabbitmq-server-3.7.18-1.el7.noarch.rpm
注意: 默认安装完成后配置文件模板在: /usr/share/doc/rabbitmq-server-3.7.18/rabbitmq.config.example目录中, 需要将配置文件复制到/etc/rabbitmq/目录中, 并修改名称为rabbitmq.config
4. 复制配置文件
cp /usr/share/doc/rabbitmq-server-3.7.18/rabbitmq.config.example /etc/rabbitmq/rabbitmq.config
5. 查看配置文件位置
ls /etc/rabbitmq/rabbitmq.config
6. 修改配置文件(参见下图:)
vim /etc/rabbitmq/rabbitmq.config
需要开放这个账户权限
将上图中配置文件中红色部分去掉%%,以及最后的,逗号 修改为下图:
7. 执行如下命令,启动rabbitmq中的插件管理
rabbitmq需要启动一些插件才能看到管理界面
rabbitmq-plugins enable rabbitmq_management
8. 启动RabbitMQ的服务
systemctl start rabbitmq-server
systemctl restart rabbitmq-server
systemctl stop rabbitmq-server
9. 查看服务状态(见下图:)
systemctl status rabbitmq-server
10. 关闭防火墙服务
systemctl disable firewalld
systemctl stop firewalld
11. 访问web管理界面
12. 登录管理界面
username: guest
password: guest
RabiitMQ 配置
RabbitMQ 管理命令行
-
服务启动相关
systemctl start|restart|stop|status rabbitmq-server -
管理命令行 用来在不使用web管理界面情况下命令操作RabbitMQ
rabbitmqctl help 可以查看更多命令 -
插件管理命令行
rabbitmq-plugins enable|list|disable
rabbitmqctl list_users;
web管理界面介绍
overview概览
connections:无论生产者还是消费者,都需要与RabbitMQ建立连接后才可以完成消息的生产和消费,在这里可以查看连接情况channels:通道,建立连接后,会形成通道,消息的投递获取依赖通道。Exchanges:交换机,用来实现消息的路由Queues:队列,即消息队列,消息存放在队列中,等待消费,消费后被移除队列。
Admin用户和虚拟主机管理
- 添加用户
上面的Tags选项,其实是指定用户的角色,可选的有以下几个:
超级管理员(administrator)
可登陆管理控制台,可查看所有的信息,并且可以对用户,策略(policy)进行操作。监控者(monitoring)
可登陆管理控制台,同时可以查看rabbitmq节点的相关信息(进程数,内存使用情况,磁盘使用情况等)策略制定者(policymaker)
可登陆管理控制台, 同时可以对policy进行管理。但无法查看节点的相关信息(上图红框标识的部分)。普通管理者(management)
仅可登陆管理控制台,无法看到节点信息,也无法对策略进行管理。其他
无法登陆管理控制台,通常就是普通的生产者和消费者。
- 创建虚拟主机
虚拟主机
为了让各个用户可以互不干扰的工作,RabbitMQ添加了虚拟主机(Virtual Hosts)的概念。其实就是一个独立的访问路径,不同用户使用不同路径,各自有自己的队列、交换机,互相不会影响。
- 绑定虚拟主机和用户
创建好虚拟主机,我们还要给用户添加访问权限:
点击添加好的虚拟主机:
进入虚拟机设置界面: