kafka
6篇文章 · 0订阅
  • 插曲：Kafka的集群部署实践及运维相关
    假设每天集群需要承载10亿数据。一天24小时，晚上12点到凌晨8点几乎没多少数据。 使用二八法则估计，也就是80%的数据（8亿）会在16个小时涌入，而且8亿的80%的数据（6.4亿）会在这16个小时的20%时间（3小时）涌入。 QPS计算公式：640000000 ÷ (3x60…
    Kafka
  • 面试完腾讯，总结了这12道Zookeeper面试题！
    ZooKeeper 是一个开源的分布式协调服务，可以基于 ZooKeeper 实现诸如：数据发布/订阅、负载均衡、命名服务、分布式协调/通知、集群管理、Master 选举、配置维护，名字服务、分布式同步、分布式锁和分布式队列等功能。 ZooKeeper 是一个分布式的，开放源码…
    ZooKeeper 后端
  • 从零开始的高并发（六）--- Zookeeper的Master选举及官网小览
    在分布式架构中经常采用的结构就是一主多从，主节点祈使句就是负责协调管理集群用的。我们可以借用这个场景去展开。 首先我们需要有一个master节点，然后cluster代表的是集群的名字，name是指服务名，address是指服务的地址。masterPath是指master的zno…
    ZooKeeper
  • 这可能是全网讲得最清楚的 ZooKeeper 概念文章了
    相信大家对 ZooKeeper 应该不算陌生。但是你真的了解 ZooKeeper 是个什么东西吗？如果别人/面试官让你给他讲讲 ZooKeeper 是个什么东西，你能回答到什么地步呢？ 我本人曾经使用过 ZooKeeper 作为 Dubbo 的注册中心，另外在搭建 solr 集…
    Java
  • KOA + egg.js 集成 kafka 消息队列
    上述代码新建了生产者、消费者。 生产者新建后加载进app全局对象。我们将在请求时候生产消息。这里只是先新建实例 消费者获取消息将访问service层的insert方法（数据库插入数据）。 具体参数可以参考kafka-node官方API，往下看会有生产者和消费者的配置参数。 一些…
    Kafka JavaScript Egg.js
  • 插曲：Kafka的生产者原理及重要参数说明
    本来插曲系列是应大家要求去更新的，但是好像第一篇的kafka效果还可以所以更插曲就勤快些了（毕竟谁不想看着自己被多多点赞呢hhh🤣），上一篇说了一个案例是为了说明如何去考量一个kafka集群的部署，算是一个参考吧，毕竟大家在不同的公司工作肯定也会有自己的一套实施方案。 这次我…
    Kafka