胖DA

已知有个java文件叫Demo.java，执行javac命令后生成Demo.class。再执行java命令，就会使用ClassLoader加载到内存，同时Java相关类库也会加载到内存。然后调用字节码解释器或即时编译器进行编译。最后调用执行引擎进行程序执行。 关于javac的过…

本文通过一个简单的建模流程来解读Spark ML代码框架，了解了优秀的框架是如何抽象和解剖复杂问题之后，再简单说明了解了架构之后可以在这个基础上做什么。

Yarn包含了三种调度模式：FIFO、Capicity和Fair。Fair Scheduler作为一种公平调度器，在生产环境中经常会碰到任务阻塞或莫名其妙被杀死重跑的情况，有必要详细了解后再使用。

写在前面： 本文主要梳理了Cassandra读数据的过程，列举了几个常用参数，尝试解释了在读取操作中内存变化的原因。但是关于内存变化还是有疑点，本文也会抛出，待阅读源码后再来补充。文章参考：https://docs.datastax.com/en/cassandra-oss/3…

本片文章记录了Redo Log和Undo Log，以及数据更新流程中Redo Log的两段提交的学习笔记。

写在前面： 前段时间使用DataX从Hive同步数据到MySQL，出现了死锁的报错。MySQL目标表是InnoDB，存在唯一索引。DataX的两个关键参数job.setting.speed.channel=2和writeMode=replace。本文通过描述InnoDB的锁原理…

MySQL的锁机制比较简单，其最显著的特点是不同的存储引擎支持不同的锁机制。比如，MyISAM和MEMORY存储引擎采用的是表级锁（table-level locking）；InnoDB存储引擎既支持行级锁（row-level locking），也支持表级锁，但默认情况下是采用…