kafka
4篇文章 · 0订阅
  • Kafka在美团数据平台的实践
    本文分享了美团Kafka面临的实际挑战，以及美团针对性的一些优化工作，希望能给从事相关开发工作的同学带来帮助或启发。
    后端 大数据
    Kafka在美团数据平台的实践
  • Kafka事务简介
    说明：本文翻译Confluent官网，原文地址： https://www.confluent.io/blog/transactions-apache-kafka/ 在之前的博客文章（见尾部链接）中，我们介绍了ApacheKafka的exactly once语义，介绍了各种消息传…
    消息队列
  • 历史性难题——如何为Kafka挑选合适的分区数？
    如何为Kafka挑选合适的分区数？很多人都为这个问题伤过脑筋。 从吞吐量方面考虑，增加合适的分区数可以很大程度上提升整体吞吐量，但是超过对应的阈值之后吞吐量不升反降。如果应用对吞吐量有着一定程度上的要求，建议在投入生产环境之前对同款硬件资源做一个完备的吞吐量相关的测试，以找到合…
    Kafka
  • Kafka的Consumer负载均衡算法
    但是partition只有P0-P5根本就没有P6和P7，所以这两个消费者相当于是会被闲置的，就相当于占用资源，却没什么用，所以在这里真正起到作用的就是C0-C5。 同上面一样C3和C4没有起到任何作用。 1. 按照如上的算法，所以如果kafka的消费组需要增加组员，最多增加到…
    Kafka