robinhasan

Hadoop两大核心组件MapReduce和HDFS的架构的改进与提升。 难以看到程序整体逻辑。 执行迭代操作效率低。 两个名称节点的状态同步，可以借助于一个共享存储系统来实现，比如 NFS、QJM、或者Zookeeper. 待命名称节点会一直监听该系统，一旦有新的写入，就立即…

本文翻译自 TopCoder 上的一篇文章： Dynamic Programming: From novice to advanced ，并非严格逐字逐句翻译，其中加入了自己的一些理解。水平有限，还望指摘。 我们遇到的问题中，有很大一部分可以用动态规划 (简称 DP) 来解。 …

Apache HBase is a database that runs on a Hadoop cluster. HBase is not a traditional RDBMS, as it relaxes the ACID (Atomicity, Consistency,…

在HBase中Hmaster负责监控RegionServer的生命周期，均衡RegionServer的负载，如果Hmaster挂掉了，那么整个HBase集群将陷入不健康的状态，并且此时的工作状态并不会维持太久。所以HBase支持对Hmaster的高可用配置。 每一个region…

I will tell you some points. First increase you thinking abilities. (Don't take this, in wrong way, my mean to say is , solve problem relat…

HBase是三维有序存储的，通过rowkey（行键），column key（column family和qualifier）和TimeStamp（时间戳）这个三个维度可以对HBase中的数据进行快速定位。 rowkey是一个二进制码流，可以是任意字符串，最大长度 64kb ，实…

下面，我们从 DFSOutputStream 类开始，说明其内部实现原理。 打开一个 DFSOutputStream 流，Client 会写数据到流内部的一个缓冲区中，然后数据被分解成多个 Packet，每个 Packet 大小为 64k 字节，每个 Packet 又由一组 c…