kafka
4篇文章 · 0订阅
  • Kafka之Java客户端的生产者模块详解（分区,拦截器,发送缓冲）
    在Kafka历史变迁中，一共有两大版本的生产者客户端，一个是0.9.x之前的scala客户端；另一个是之后引入的Java客户端。当这并不代表Kafka不具有多语言的支持性。实际上，常用的语言如C/C++，Python，Go等语言都有Kafka的客户端，只不过不由官方进行维护 K…
    Kafka
  • 插曲：Kafka的生产者案例和消费者原理解析
    假设我们现在有一个电商系统，凡是能登录系统的用户都是会员，会员的价值体现在，消费了多少钱，就会累计相应的积分。积分可以兑换礼品包，优惠券···等等。 又到了我们的画图时间👌。首先我们得先来一个订单系统，那这个订单系统中肯定就会有数据日志产生，它现在就是把这些日志写到Kafka…
    Kafka 后端
  • Kafka 使用ExecutorService 多线程消费
    Apache Kafka 作为当下最常用消息中间件之一。给到我的需求是需要我们处理大量的消息（如果单线程处理过多消息会出现性能瓶颈）。 1.创建一个可以从topic中poll()消息后传递到线程池以进行进一步处理。 2.创建工作线程，以执行每条消息的进一步处理。 可能并不适合所…
    Kafka
  • 使用多线程增加kafka消费能力
    kafka通过一系列优化，写入和读取速度能够达到数万条/秒。通过增加分区数量，能够通过部署多个消费者增加并行消费能力。但还是有很多情况下，某些业务的执行速度实在是太慢，这个时候我们就要用到多线程去消费，提高应用机器的利用率，而不是一味的给kafka增加压力。 使用Spring创…
    Java Kafka
    使用多线程增加kafka消费能力