首页
首页
沸点
课程
直播
资讯
活动
开放社区
商城
APP
插件
搜索历史
清空
创作者中心
写文章
发沸点
掘金会员预售 5.16-6.16
登录
Kafka
24933 关注,1997 文章
关注
热门
最新
最热
撸猫的代码
3天前
后端
Kafka
Kafka由浅入深
持续创作,加速成长!这是我参与「掘金日新计划 · 6 月更文挑战」的第7天,点击查看活动详情 Kafka浅析 一、前言 在项目中,我们常常需要用到消息队列中间件,主要用来解决应用耦合,异步消息,流量削
449
3
评论
一条coding
11天前
Spring Boot
Kafka
Java
SpringBoot集成Kafka——如此简单
持续创作,加速成长!这是我参与「掘金日新计划 · 6 月更文挑战」的第22天,点击查看活动详情 哈喽,大家好,我是一条。 今天下午本打算整理一下服务器资源,给每个服务器打个标签,标明部署了哪些服务,方
1961
18
5
BIT_666
10天前
Kafka
Flink / Kafka - Recovery is suppressed by FixedDelayRestartBackoffTimeStrategy
一.引言 使用 Flink - Kafka 接数据 Source 时程序报错: 任务每次启动后持续10min左右,然后 RUNNING -> FAILED,如此重启失败了多次。 二.问题现象 1.
763
1
评论
vivo互联网技术
27天前
Kafka
大数据
负载均衡
Kafka 负载均衡在 vivo 的落地实践
副本迁移是Kafka最高频的操作,对于一个拥有几十万个副本的集群,通过人工去完成副本迁移是一件很困难的事情。Cruise Control作为Kafka的运维工具,它包含了Kafka服务上下线、集群内负
2440
3
2
吴欣
20天前
Kafka
所有关于数据管道和Kafka的基础知识
关于Kafka的介绍 当我们听到 "数据管道 "这个术语时,以下问题立即值得一提。 什么是数据管道? 它的目的是什么? 它与ETL有什么区别? 在数据生产者和数据消费者的情况下,生产者在做一些数据处理
1623
点赞
评论
菜鸟厚非
2月前
Kafka
为什么Kafka这么快,解密Kafka高性能背后的秘密
介绍 说起 Kafka 很多同学都知道,即使你没有用过也知道,它是消息队列中数一数二的运动健将,他可以承载每秒钟上百万此的数据处理,但问什么 Kafka 可以这么快呢? 归纳原因主要有这四点原因,磁盘
6078
15
6
vivo互联网技术
1月前
大数据
Kafka
数据分析
Kafka 万亿级消息实践之资源组流量掉零故障排查分析
本篇对在kafak万亿消息实践中一次典型的故障进行详细分析和说明。深入到kafka架构原理层分析故障出现的根因及对应的解决方案。
2246
8
2
阿里云云原生
1月前
云原生
消息队列
Kafka
消息队列Kafka「检索组件」重磅上线!
本文旨在帮助大家对消息队列 Kafka「检索组件」的特点及使用方式更加熟悉,以期可以帮助大家更有效的解决在消息排查过程中遇到的痛点问题。
3634
9
评论
肖恩Sean
18天前
Kafka
Kafka源码分析01:生产者整体架构
我们先看一下生产端的架构图: 架构图 生产者主要分为两个线程,分别为KafkaProducer主线程和Sender线程,这两个线程相互配合运行。在实际的使用中开发者只会涉及到KafkaProducer
861
1
评论
卷几你哇
24天前
后端
Kafka
【Kafka】图解 Leader 切换时发生数据丢失问题
在高水位 HW 机制下,Leader 切换时候会发生哪些问题? 会有两个主要问题: Leader 切换时
1025
4
评论
阿里云云原生
1月前
云原生
监控
Kafka
最佳实践|从Producer 到 Consumer,如何有效监控 Kafka
对于运维人而言,如何安装维护一套监控系统,或如何进行技术选型,从来不是工作重点。如何借助工具对所需的应用、组件进行监控,发现并解决问题才是重中之重。随着 Prometheus 逐渐成为云原生时代可观测
1574
点赞
评论
挖坑的张师傅
1月前
后端
Kafka
网络协议
一次 Kafka 导致的 Sentry 无法处理 MiniDump 问题分析
一次线上问题分析实录,看看 wireshark 如何在排查问题中发挥重要作用,kafka 发送包大小的一些限制
2356
12
1
枫度柚子
1月前
后端
Kafka
Kafka生产问题总结及性能优化实践
Kafka生产问题总结及性能优化实践 Kafka线上JVM调优 详细链接: https://www.processon.com/view/link/628753b51efad466f3421903 J
1355
23
评论
卷几你哇
20天前
后端
Kafka
【Kafka】图解 partition 维护 ISR 列表的底层机制是如何设计的?
这里不得不提 2 个重要参数:replica.lag.max.messages 和 replica.lag.time.max.ms
470
3
评论
llsydn
2月前
后端
ZooKeeper
Kafka
Linux部署zookeeper和kafka(用户权限)
一起养成写作习惯!这是我参与「掘金日新计划 · 4 月更文挑战」的第25天,点击查看活动详情。 部署zookeeper、kafka(用户权限) 一、 服务器资源 服务名称:Linux服务器 IP:[请
2166
17
评论
程序员cxuan
2年前
Kafka
真的,Kafka 入门一篇文章就够了
Kafka 是由 Linkedin 公司开发的,它是一个分布式的,支持多分区、多副本,基于 Zookeeper 的分布式消息流平台,它同时也是一款开源的基于发布订阅模式的消息引擎系统。 消息:Kafka 中的数据单元被称为消息,也被称为记录,可以把它看作数据库表中某一行的记录。…
6.2w
482
25
linyb极客之路
1月前
Kafka
Java
聊聊如何实现一个带幂等模板的Kafka消费者
前言 不知道大家有没有这样的体验,你跟你团队的成员,宣导一些开发时注意事项,比如在使用消息队列时,在消费端处理消息时,需根据业务场景,考虑一下幂等。后面走查代码的时,会发现一些资浅的开发,在需要幂等判
979
3
评论
翊君
6月前
Spring
Kafka
当Spring邂逅Kafka,有趣的知识增加了
在这篇文章中,我们介绍了如何安装Kafka以及Spring支持Apache Kafka的基本情况。我们简单学习了一下用于发送和接收消息的类。
6507
70
5
A一只程序猿
1月前
Kafka
Java
Kafka大厂高频面试题:在保证高性能、高吞吐的同时保证高可用性
Kafka的消息传输保障机制非常直观。当producer向broker发送消息时,一旦这条消息被commit,由于副本机制(replication)的存在,它就不会丢失。但是如果producer发送数
1253
2
评论
阿里云云栖号
1月前
Kafka
数据湖揭秘—Delta Lake
简介:Delta Lake 是 DataBricks 公司开源的、用于构建湖仓架构的存储框架。能够支持 Spark,Flink,Hive,PrestoDB,Trino 等查询/计算引擎。作为一个开放
1087
1
评论