孤独的红心

这是我参与「第四届青训营 」笔记创作活动的第13天 行为数据分析 什么是用户行为分析？ 用户行为可以用5W2H来总结： Who(谁)、What(做了什么行为)、When(什么时间)、Where(在哪里

这是我参与「第四届青训营 」笔记创作活动的第12天 大数据与OLAP系统的演进 什么是大数据 大数据!=大规模的数据量? 关于大数据这里我们参考马丁·希尔伯特的总结:大数据基实是在2000年后，因为信

这是我参与「第四届青训营 」笔记创作活动的第11天 Kuberbetes 1.Kubernetes是什么？ 特点:便携，可扩展，开源 目的:管理容器应用和服务 作用:声明式配置和自动化 2.Kuber

这是我参与「第四届青训营 」笔记创作活动的第10天 yarn概述 1.调度系统演进 调度系统解决的问题 用有限资源解决有限资源无法满足的需求时就需要调度; 调度系统主要解决资源请求和可用资源间的映射(

这是我参与「第四届青训营 」笔记创作活动的第9天 数据湖发展历史 第一阶段---Hadoop 数据湖最开始的概念——分布式存储HDFS使用目录来区分不同的数据集 /douyin /20220623/2

这是我参与「第四届青训营 」笔记创作活动的第8天 LSMT存储引擎介绍 1 LSMT历史 LSMT 是 Log-Structured Merge-Tree的缩写，由Patrick O ‘Neil et

这是我参与「第四届青训营 」笔记创作活动的第7天 所有的大数据作业简单来说都可以简化 从存储服务读取数据 计算引擎解析和计算数据 结果呈现 “如何高效从存储读取所需的数据”是决定大数据计算作业性能的关

这是我参与「第四届青训营 」笔记创作活动的第6天 消息队列 1.消息队列应用场景 MQ消息通道 异步解耦 削峰填谷 高可用 发布订阅 EventBridge数据总线 事件源:将云服务、自定义应用、Sa

这是我参与「第四届青训营 」笔记创作活动的第5天 大数据处理引擎Spark介绍 1.大数据处理技术栈 数据-Volume Variety Velocity 存储-HDFS Kafka HBase 计算