丁凯博客

除redo日志文件外，InnoDB的物理文件基本上具有相当统一的结构：固定大小页面，使用B-tree来管理。默认情况下，每个页面为16KB，也可以自定义配置该数值。对于压缩表，可以在建表时指定页大小，但在内存中表现的解压页依旧为统一的页大小。 从物理文件的分类来看，有日志文件、…

Apache HBase 是 Apache Hadoop 生态体系中的大规模、可扩展、分布式的数据存储服务。同时它还是 NoSQL 数据库。它的设计初衷是为包含了数百万列的数十亿行记录提供随机的、强一致性的实时查询。 默认情况下，HBase 的数据会保存在 HDFS 上，HBa…

Windows Azure Storage(WAS)是微软Azure云计算的基础存储设施，为Azure上层产品提供包括Blob、Table、Queue在内的统一存储服务，命名缩写WAS倒是与AWS有几分相似，乍看起来很容易混淆。 WAS作为Azure云计算的底层存储设施已经在2…

简单梳理一下微软HyperScaleDB-Socrates设计，与Aurora定位相似，也是云原生数据库，但架构完全不同。

目前很多文件系统基于Fuse（ http://fuse.sourceforge.net/ ）开发，在较为深入钻研Fuse实现后，总结出开发此类文件系统时可考虑的优化方案，拿出来与大家讨论讨论，如有不准确的地方，还望大家不吝赐教。阅读本文前，我假设你对Fuse有了足够多的了解（起…

简单的PPT解释Paxos运转流程

在bitcask的论文（或者说概要设计更合适）中主要描述了Bitcask对文件存储格式的定义以及一些优化措施。 BeansDB是Douban参考bitcask论文开发的适合于douban使用场景的海量小文件存储系统。作者David通过匠心独具的设计和深厚的技术水平将这一复杂的问…

倒排索引是Google搜索引擎中最为关键的技术之一。应对海量数据时，高效的索引创建和索引的实时更新都是必须解决的难题。Google设计了MapReduece系统解决了海量数据索引创建的问题，但MR并没有解决增量数据的实时更新问题。 因此，Google设计Percolator的初…

linux系统中有一种比较特殊的文件称之为链接（link）。通俗地说，链接就是从一个文件指向另外一个文件的路径。linux中链接分为俩种，硬链接和软链接。简单来说，硬链接相当于源文件和链接文件在磁盘和内存中共享一个inode，因此，链接文件和源文件有不同的dentry，因此，这…