ShowerSong
获得徽章 1
8月15日，今日打卡《K8s 长什么样子，一文道清它的整体架构》。文章聚焦K8s的整体架构，给读者描绘出K8s的大致模样。 K8s 由主节点、工作节点两大部分组成，文章逐一展开，介绍主节点和工作节点分别由哪些组件构成。
评论
点赞
8月14日打卡，今日学习《一文搞懂 K8s 准入控制（Admission Controller）》。本篇文章聚焦于 kube-apiserver 请求处理过程中一个很重要的部分 -- 准入控制器（Admission Controller）
评论
点赞
8月13日打卡，今日学习《深度解析 Raft 分布式一致性协议》。这是一篇权威靠谱、清晰易懂的系统性文章，帮助读者深入理解 Raft 算法，并能付诸于工程实践中，同时解读了不易理解或容易误解的关键点。
评论
点赞
8月12日打卡，今日学习《分布式系列第一弹：分布式一致性！》。文章通过理论和实际方案的介绍，详细讲解了分布式一致性的相关内容！主要介绍了背景、基础理论、分布式一致性协议和最终一致性模式。
评论
点赞
8月11日，今日打卡《博文｜Apache Pulsar 在自研数据管道中的技术实践》。在需要同步大量增量数据的场景下，作者团队采用了 Maxwell + Pulsar 的自研解决方案，Pulsar Key_Shared 订阅模式能否很好解决分布式消息消费过程中的顺序问题，在数据管道数据链路中增设过滤器，能保证消息不重不漏。
评论
点赞
8月10日打卡，今日学习《Apache Pulsar 技术系列 - Pulsar事务实现原理》。Apache Pulsar 是一个多租户、高性能的服务间消息传输解决方案，支持多租户、低延时、读写分离、跨地域复制、快速扩容、灵活容错等特性。腾讯云MQ Oteam Pulsar工作组对 Pulsar 做了深入调研以及大量的性能和稳定性方面优化，目前已经在TDBank、腾讯云TDMQ落地上线。本篇简单介绍了Pulsar服务端消息确认的一些概念和原理。
展开
评论
点赞
8月9日打卡，今日学习《一文讲清HBase存储结构》。Hbase 是一个分布式的、多版本、面向列的开源 KV 数据库。运行在 HDFS 的基础上，支持 PB 级别、百万列的数据存储。作为性能如此强大的KV数据库，HBase的存储结构究竟是怎样的呢？文章详细介绍了HBase的储存结构、架构以及读取和写入数据的过程。
评论
点赞
8月8日打卡，今日学习《入门Hbase，看这一篇就够了》。文章介绍了HBase的概览、架构、安装、API操作等内容，是一篇很详细的入门文章，推荐读一读。
评论
点赞
8月7号打卡，今日学习《带你入坑大数据（一） --- HDFS基础概念篇》。本文介绍了HDFS的概念、HDFS的三大件以及HDFS的负载均衡和心跳机制。介绍得非常详细，对于课外知识补充来说是一篇很棒的文章。
评论
点赞
8月6日打卡，今日学习《节跳动10万节点HDFS集群多机房架构演进之路》。字节跳动在维护 HDFS 服务时，采用的是横跨多个机房的联邦大集群部署模式，即 HDFS 只有一个集群，这个集群有多个 nameservice，但是底层的 DN 是横跨 A/B/C 3 个机房的 ，由于社区版 HDFS 没有机房感知相关的支持，因此字节跳动 HDFS 团队在这个功能上做了专门的设计和实现，本文介绍了这部分的工作。
展开
评论
点赞
8月5日打卡，今日学习《Presto在字节跳动的内部实践与优化》。文章介绍了字节跳动OLAP数据引擎平台Presto部署使用情况、Presto 集群稳定性和性能提升以及在不同场景的优化与实践。
评论
点赞
8月4日打卡，今日学习《Spark的Shuffle总结分析》。文章从shuffle概述、spark中的shuffle介绍、HashShuffle机制、Sort shuffle以及使用到参数这几个部分详细介绍了spark中的shuffle，对于深入了解shuffle很有帮助。
评论
点赞
8月3日打卡，今日学习《5小时推开Spark的大门——02.搭建开发环境》。文章详细介绍了spark的安装步骤：下载spark、spark目录简介、启动spark以及spark shell，还介绍了IDEA集成Scala插件。是一篇偏实战的文章。
评论
点赞
8月2日，今日打卡《SparkSQL 在企业级数仓建设的优势》。随着企业的业务发展越来越复杂，需要更加灵活、更加高效的数仓架构，在这样的业务驱动背景下，Hive 的局限变得越来越明显，而基于 Spark SQL 灵活构建数仓的方案将会变得越来越主流。
评论
点赞