大数据
12篇文章 · 0订阅
  • 每天上亿条日志，Elasticsearch 是怎么扛住的？
    Elasticsearch 能扛住每天上亿条日志，靠的是全链路批量处理、异步刷盘、分片并行写入和背压保护，核心思想就六个字：批量、异步、并行。
    后端 架构 设计
  • Flink的实时分析应用案例：实时数据监控
    1.背景介绍 1. 背景介绍 Apache Flink 是一个流处理框架，用于实时数据处理和分析。它可以处理大量数据，并在实时进行分析和处理。Flink 的核心特点是高性能、低延迟和容错性。它可以处理
    后端
  • Flink背压机制：原理与调优策略
    在实时数据处理的战场上，数据洪流永不停歇。当上游数据生产速度超过下游消费能力时，系统会面临"数据堰塞湖"的风险——这就是流处理领域的核心挑战：背压（Backpressure）。作为分布式流计算的标杆，
    • Homi
    • 5月前
    • 222
    • 评论
    大数据
    Flink背压机制：原理与调优策略
  • 跟腾讯云智谈薪了，在二线城市很满意！
    腾讯云智是腾讯的子公司，主要负责是腾讯云相关的业务，所以负责的项目就是腾讯云的项目，在腾讯csig工作的同学也跟我说，经常跟腾讯云智的同事对接工作。
    后端 面试 Java
    跟腾讯云智谈薪了，在二线城市很满意！
  • 存储：Lakehouse 的核心
    在基于 Lakehouse 架构的平台中，存储层在高效持久化各种数据和提升查询性能方面起着重要作用。Lakehouse 存储层由云存储、文件格式和表格式组成。本章将重点介绍这些概念以及实现 Lakeh
    大数据 数据分析 架构
    存储：Lakehouse 的核心
  • Redis的那些经典问题-概述
    从这篇文章开始，将会针对 Redis 工作中比较常见的问题，进行详细的介绍，如有必要，将会结合源码进行分析。本文是第一篇，概述。概述类文章比较适合使用 ChatGPT，那我们一起看下它的表现吧~
    面试 后端 Redis
  • 一文读懂什么是Flink、Kafka Consumer与Kafka Stream
    随着流处理场景的日益扩大，我们经常会面临流数据处理的技术选型问题，本文试图简要介绍流数据处理时常见的三种框架Flink，Kakfa Consumer和Kakfa Stream的主要区别
    架构
  • ✨JDK21✨虚拟线程彻底杀死响应式编程
    在2023年9月19日正式发布的JDK21引入了虚拟线程，其是一种轻量化的用户线程，让JAVA中的线程实现了从内核线程向用户线程的切换
    后端 响应式编程 Java
    ✨JDK21✨虚拟线程彻底杀死响应式编程
  • 面试必考：怎样解决线上消息队列积压问题
    提到消息队列，最常问到的问题就是消息积压，真实线上环境该怎么解决消息积压的问题？真实情况并不是网上说的把积压的消息投递到一个新Topic中，然后慢慢消费。这样做，成本太高、流程复杂、操作麻烦，而
    后端 消息队列 Java
    面试必考：怎样解决线上消息队列积压问题
  • Redis 入门
    为了解决高并发、高可用、高可扩展，大数据存储等一系列问题而产生的数据库解决方案，就是NoSql。 NoSql，叫非关系型数据库，它的全名Not only sql。它不能替代关系型数据库，只能作为关系型数据库的一个良好补充。 典型应用： 内容缓存，主要用于处理大量数据的高访问负载…
    Redis 数据库 后端