isfox

Hadoop简介：分布式系统的基石与核心架构详解 Hadoop 作为 Apache 基金会开发的分布式系统基础架构，彻底改变了海量数据的存储与处理方式。它允许用户在不深入了...

Google Bigtable深度解析：分布式存储的设计典范 Google Bigtable 作为分布式结构化数据存储的里程碑技术，其设计理念深刻影响了 HBase、Cas...

Google GFS 深度解析：分布式文件系统的开山之作 Google 文件系统（GFS）作为分布式存储领域的里程碑技术，其设计理念深刻影响了 HDFS、TFS 等后续系统...

flume拓扑结构详解：从简单串联到复杂聚合的完整指南 Flume 作为分布式数据采集工具，其拓扑结构直接决定了数据流转的效率、可靠性和扩展性。官网定义了三种核心拓扑结构：...

flume扩展实战：自定义拦截器、Source 与 Sink 全指南 Flume 内置的组件虽然能满足大部分场景，但在复杂业务需求下（如特殊格式数据采集、定制化数据清洗），...

flume接收处理器：构建高可用与高性能的数据链路 在大规模数据采集场景中，单点故障和性能瓶颈是两大核心挑战。Flume 通过 Sink Group + 接收处理器（Pro...

flume事务机制详解：保障数据可靠性的核心逻辑 在数据采集过程中，“不丢数据、不重数据” 是核心需求。Flume 之所以能在分布式环境下保证数据可靠性，关键在于其内置的事...

flume监控目录文件实战：三种 Source 方案对比与配置指南 在实际业务中，监控目录文件变化并实时采集数据是常见需求（如应用日志、业务数据文件等）。Flume 提供了...

flume实战：从零配置到启动运行的完整指南 掌握 Flume 的核心组件后，实际配置和运行才是关键。本文将通过一个简单案例，带你从零开始配置 Flume Agent，理解...

flume详解：分布式日志采集的核心原理与组件解析 在大数据体系中，日志采集是数据处理的第一步。Flume 作为 Apache 旗下的分布式日志采集工具，以高可用、高可靠、...

安全模式 NameNode在启动的时候，首先将映射文件fsimage载入内存，并执行编辑日志edits中的各项操作，一旦在内存中成功建立文件系统元数据的映射，则创建一个新的...

Hadoop RPC Hadoop RPC主要分为四个部分，分别是序列化层、函数调用层、网络传输层和服务器端处理框架，实现机制为： 序列化层：主要作用是将结构化对象转为字节...

Hadoop版本 hadoop1.x版本 由三部分组成 Common(辅助工具) HDFS(数据存储) MapReduce(计算和资源调度) 存在的问题 JobTracke...

Hadoop简介 Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和...

协程 我记得大学还没毕业那会儿出去面试，有个面试官问我知道什么是协程吗？我当时说知道呀，我还在携程上买过火车票呢，然后面试官笑了笑，什么都没有说。 那么协程是什么呢？协程是...

线程死锁 死锁是由于多个线程间相互等待资源，而又不释放资源导致的无穷无尽的等待 造成死锁的条件 互斥条件：一个资源每次只能被一个线程使用 请求与保持条件：一个线程因请求资源...

LongAdder 在使用AtomicLong时，如果是在高并发场景下去同时竞争修改同一个原子变量，由于内部使用的是CAS，只会有一个线程修改成功，这就造成了大量的线程竞争...

CAS操作 之前说在java.util.concurrent.atomic包下提供的原子操作类底层使用的是CAS，那么什么是CAS呢，CAS的全称为Compare And ...

原子操作 在java.util.concurrent.atomic包下提供了很多原子操作类，多个线程执行一个操作时，其中任何一个线程要么完全执行此操作，要么没有执行此操作的...

ip存储 ipv4 ipv4使用long类型进行存储即可 ipv6 ipv6使用long类型是存储不了的，需要使用BigInteger 参考文献 ip存储...