执着码农

本篇继续介绍HBase写数据put的核心原理 写数据流程简述 Client先访问zookeepr，获取hbase:meta表位于哪个RegionServer哪个Region...

读数据流程简述 CLient先访问Zookeeper，获取hbase:meta表位于哪个RegionServer中并且缓存到MetaCache 访问对应的RegionSer...

随着数据的不断写入，MemStore中存储的数据会越来越多，系统为了将使用的内存保持在一个合理的水平，会将MemStore中的数据写入文件形成HFile。flush阶段是H...

在大数据分析领域，有几种通用的文件格式，如Parquet、RCFile、ORCFile、CarbonData等等，这些文件大都是基于列示的设计结构，来加速通用的分析型查询。...

前序 HBase体系结构借鉴了BigTable论文，是典型的Master-Slave模型 hbase核心架构由五部分组成：分别是Hbase client、HMaster、R...

背景 很对大数据相关的产品，都对用户或者分析师提供了SQL API，比如Hive，Spark，Flink等，SQL作为传统关系型数据库的查询语言，是应用在批查询场景的，Hi...

背景 前面分析了Flink在计算处理流过程中Stream转为动态表、动态表上进行连续查询、生成新的动态表、动态表转为Stream将其写入外部表，本篇从对以下三个问题进行解剖...

背景 Flink已经成为未来流计算趋势，目前包括阿里在内的很多大厂已经广泛使用。前段时间在团队内部分享了flink的基本概念相关，感觉深入还是需要去撸下代码，相关内核就是j...

前言 前面的章节主要是分析了Mybatis初始化启动以及如何解析配置文件，本篇章开始讲解应用程序是如何通过sqlSession去执行SQL语句的。 sqlSessionFa...

前言 上面那篇文章我们知道Mybatis和数据库的交互方式有Java和Mapper接口两种，所以Mybatis的初始化方式必然也有两种；本篇我们开始对Mybatis的初始化...

背景 Mybatis本是apace的一个开源项目iBatis，2010年这个项目由apache software foundation迁移到google code，改名为M...

背景 前面已经对Server、Service和Executor进行了分析讲解，本篇章开启分析解剖Tomcat如何处理Request请求，众所周知，客户端是可以发起多个请求的...

背景 前面我们了解到，Exector是包含在Service中，Service中关于Execute的配置和相关代码如下： Service中executors相关方法 和Ser...

启动脚本 整体流程 可以先看下整体流程，启动的入口是从Bootstrap类中的main函数发起，逐步int和start 代码浅析 Bootstrap入口 Tomcat源码就...

背景 Tomcat作为JavaWeb领域的Web容器，大多数Java应用的Web容器都使用了Tomcat，为了对平时开发的Web系统有更深入的理解，出于好奇心对我们的Web...

背景 身在大数据工程团队，经常同ODPS&D2&Flink打交道，了解掌握大数据相关知识对工程端还是有必要；早期团队技术之美围绕Flink专题学习了论文《Apache Fl...

背景 基于上一篇对<Presto>源码的解读，了解了Presto基本原理和使用方式。但书上的内容还是讲的比较浅，对于其中的分布式SQL查询原理，通过网上的资料进行了更深入的...

一、前言 团队技术之美FY22财年S1阶段学习了Spark RDD架构以及原理，业余时间对Spark、Hadoop生态进行了学习和总结，并在团队内部进行了架构分享。 二、产...

1、Presto 的概念 Presto 是一个用于大数据分析的高性能、基于内存的、分布式SQL查询引擎，主要基于 Java 开发，最初由 Facebook 开源，后项目一分...