kafka通过一系列优化，写入和读取速度能够达到数万条/秒。通过增加分区数量，能够通过部署多个消费者增加并行消费能力。但还是有很多情况下，某些业务的执行速度实在是太慢，这个时候我们就要用到多线程去消费，提高应用机器的利用率，而不是一味的给kafka增加压力。 使用Spring创…

最近要把原来做的那套集中式日志监控系统进行迁移，原来的实现方案是: Log Agent => Log Server => ElasticSearch => Kibana，其中Log Agent和Log Server之间走的是Thrift RPC，自己实现了一个简单的负载均衡(W…

一、背景说明vivo在2016年引入RabbitMQ，基于开源RabbitMQ进行扩展，向业务提供消息中间件服务。2016~2018年，所有业务均使用一个集群，随着业务规模的增长，集群负载越来越重，集

一、简介ApacheKafka是一个分布式的流处理平台（分布式的基于发布/订阅模式的消息队列【MessageQueue】）。流处理平台有以下3个特性：1.1消息队列的两种模式1.1.1点对点模式生产者