​大家好，我是小羽最近很少发文，一是开始总结了一下自己做了两个多月的公号了，都收获了什么，学到了什么。二是正好这段时间公号开始迁移，所以也借这段时间可以休息下，总结下别人是怎么写好文章的。从文章排版，

同时欢迎关注我们的公众号：OPPO_tech，与你分享OPPO前沿互联网技术及活动。 Kafka是一个分布式的基于发布、订阅的消息系统，具有着高吞吐、高容错、高可靠以及高性能等特性，主要用于应用解耦、流量削峰、异步消息等场景。 为了让大家更加深入的了解Kafka内部实现原理，文…

由于controller是临时节点，当控制器broker挂机之后，就会断开与zookeeper的会话连接，临时节点也会消失，其它节点监听到controller节点消失后，就会重新争取controller节点。 当某个消费组中的消费者挂掉或退出之后，此时就会自动把分配给它的分区分…

Kafka存在丢消息的问题，消息丢失会发生在Broker，Producer和Consumer三种。 Broker丢失消息是由于Kafka本身的原因造成的，kafka为了得到更高的性能和吞吐量，将数据异步批量的存储在磁盘中。消息的刷盘过程，为了提高性能，减少刷盘次数，kafka采…

前言无论kafka作为MQ也好，作为存储层也罢，无非就是两个功能（好简单的样子），一是Producer生产的数据存到broker，二是Consumer从broker读取数据。那Kafka的快也就体现在

虽然本质上 API 就是拿来用的，但即便某个 API 的使用者全是内部人员，它还是可能会出现安全问题。为了解决 API 安全问题，在本文我们收集了一系列 API 的最佳实践，希望你记住这些 Tips 日后在保护 API/Web 服务安全和免受入侵时，会帮助到你。 现在的 Web…

1. Producer 生产者 2. Consumer 消费者 3. Broker 独立的 Kafka 服务器 4. Topic 主题 5. Partition 分区 6. Replicas 副本 7. Offset 偏移量 1. Partition 2. Consumer 1…

谈到大数据传输都会想到 Kafka，Kafka 号称大数据的杀手锏，在业界有很多成熟的应用场景并且被主流公司认可。这款为大数据而生的消息中间件，以其百万级TPS的吞吐量名声大噪，迅速成为大数据领域的宠儿，在数据采集、传输、存储的过程中发挥着举足轻重的作用。 在业界已经有很多成熟…

一、什么是消息队列（MQ）MessageQueue是一个广泛应用在互联网项目中且非常重要的技术，MessageQueue通常被用来解决在高并发压力下类似于流量削峰、服务解耦、消息通讯、最终消息一致性等