大数据
3篇文章 · 0订阅
  • 字节跳动 EB 级 HDFS 实践
    因为 HDFS 这样一个系统已经存在了非常长的时间，应用的场景已经非常成熟了，所以这部分我们会比较简单地介绍。 HDFS 全名 Hadoop Distributed File System，是业界使用最广泛的开源分布式文件系统。原理和架构与 Google 的 GFS 基本一致。…
    架构 HDFS
    字节跳动 EB 级 HDFS 实践
  • Kafka 集群在马蜂窝大数据平台的优化与应用扩展
    Kafka 是当下热门的消息队列中间件，它可以实时地处理海量数据，具备高吞吐、低延时等特性及可靠的消息异步传递机制，可以很好地解决不同系统间数据的交流和传递问题。 Kafka 在马蜂窝也有非常广泛的应用，为很多核心的业务提供支撑。本文将围绕 Kafka 在马蜂窝大数据平台的应用…
    Kafka 后端
  • 兄弟，用大白话告诉你小白都能看懂的Hadoop架构原理
    Hadoop是目前大数据领域最主流的一套技术体系，包含了多种技术。 包括HDFS（分布式文件系统），YARN（分布式资源调度系统），MapReduce（分布式计算系统），等等。 有些朋友可能听说过Hadoop，但是却不太清楚他到底是个什么东西，这篇文章就用大白话给各位阐述一下。…
    Java 架构 微服务
    兄弟，用大白话告诉你小白都能看懂的Hadoop架构原理