Linzx的学习笔记

浅谈Apache Atlas-元数据管理入门、成Hive元数据的方式以及初始化、HiveHook源码分析、HiveMetastoreHook源码分析、HiveMetaSto...

初始化 HIve 元数据至 Atlas Atlas HiveMetaStoreBridge 处理流程...

Hive 中 MetastoreListener 的分类 Atlas-HiveMetastoreHook 的实现...

Hive 中 Hook 的分类 Atlas-HiveHook 的实现 HiveHook 的入口 HiveHook 的处理流程...

Atlas 如何集成 Hive 的元数据 Atlas 集成 Hive 元数据核心操作 什么是 Hook 什么是 Listener...

浅谈Apache Atlas-元数据管理入门 什么是元数据 元数据管理的主要流程 什么是 Apache Atlas...

一、Hbase架构 Client： 包含访问HBase的接口并维护cache来加快对HBase的访问 与HRegionServer进行数据读写操作 Zookeeper： 用...

相信很多同学在学习设计模式过程，会遇到各式各样的类图，且大家做法很一致看不懂，一律跳过类图，直接看代码。随着学习设计模式的深入，你会发现UML其实就是一个设计模式的灵魂，一...

0、前言 该篇文章为IO的前置知识学习 1、Linux操作系统 1.1、冯诺依曼计算机体系结构 无论是以前的计算机还是现在计算机都是采用计算机之父冯诺依曼结构，依据冯诺依曼...

1、前言 由前面的文章Spark源码解析04-Submit提交流程及SparkContext准备流程我们已经知道了SparkContext准备过程中会向Master发送Re...

1、前言 由前面的文章Spark源码解析03-Submit提交流程及Driver启动流程我们已经知道了Spark的重要角色Driver的启动，既DriverWrapper ...

1、前言 本文使用spark源码版本为 2.3.4 2、SparkContext注释 我们来看一段Spark源码的注释，进入SparkContext，可以看到“Only o...

1、前言 由前面的文章Spark基础06-Spark client和cluster提交流程我们已经知道了Spark client和cluster提交模式流程 启动Drive...

0、前言 该文章为Spark知识文章目录，便于查看，持续更新中。。。。。 1、Spark基础 Spark基础01-RDD和宽窄依赖 Spark基础02-RDD数据集操作 S...

1、前言 上一章我们已经跟踪完了Master的启动过程以及相应的一些RpcEnv环境准备工作，我们知道Master是RpcEndpoint，其它角色想要跟Master进行通...

0、前言 我们先来看一下，spark提交任务的脚本，这里的deploy-mode就是本篇文章的重点，表示着提交模式，分别只有client客户端模式和cluster集群模式 ...