鸟人不会飞

Hadoop的一个重要思想就是移动计算，而不是移动数据。我们更愿意尽可能将计算移动到数据所在节点。因此，HDFS中经常出现客户端和数据在一个节点上，当客户端读取一个数据块时...

​  大数据架构师是一个综合学科，除了平台编码，架构设计，更需要了解行业领域、以及具备产品和运维的思维能力。本文梳理了作为一个架构师应该具备哪些能力，文章比较长，干货满满，...

1. 概述 在实际业务系统中为了解决单表数据量大带来的各种问题，我们通常采用分库分表的方式对库表进行拆分，以达到提高系统的吞吐量。 但是这样给后面数据分析带来了麻烦，这个时...

端到端的实时计算：TiDB + Flink 最佳实践 作者简介 孙晓光，PingCAP Community Development 团队负责人，原知乎基础研发团队架构师，长...

一. 背景 数据准实时复制（CDC）是目前行内实时数据需求大量使用的技术，随着国产化的需求，我们也逐步考虑基于开源产品进行准实时数据同步工具的相关开发，逐步实现对商业产品的...

CDC,Change Data Capture,变更数据获取的简称，使用CDC我们可以从数据库中获取已提交的更改并将这些更改发送到下游，供下游使用。这些变更可以包括INSE...

小谈namespace以及inode。讲解NameNode的editlog以及fsimage。简单剖析高可用namenode的选举流程...

仿照源码|HDFS之DataNode：启动过程，NameNode也从启动过程开始。 namenode的启动过程与HA紧紧绑定在一起，但本文暂不讨论HA相关内容，以后再填HA...