大数据项目

开启掘金成长之旅！这是我参与「掘金日新计划 · 12 月更文挑战」的第1天，点击查看活动详情 将markupsafe依赖的版本回退到 2.0.1 如果将markupsafe改为2.0.1之后还是会报如

@[toc] 8. 实时数仓同步数据   实时数仓由Flink源源不断从Kafka当中读数据计算，所以不需要手动同步数据到实时数仓。 9. 离线数仓同步数据 9.1 用户行为数据同步 9.1.1 数据

@[toc] 7. 业务数据采集模块 7.2 采集工具 7.2.4 Maxwell使用 7.2.4.1 启动Kafka集群   若Maxwell发送数据的目的地为Kafka集群，则需要先确保Kafka

@[toc] 7. 业务数据采集模块 7.1 采集通道 7.1.1 业务数据通道 7.2 采集工具 7.2.1 Maxwell简介 7.2.1.1 Maxwell概述   Maxwell 是由美国Ze

@[toc] 6. 业务数据介绍 6.5 业务数据模拟 6.5.1 连接MySQL 6.5.2 建表语句 注意：完成后，要记得右键，刷新一下对象浏览器，就可以看见数据库中的表了。 6.5.3 生成业务

@[toc] 6. 业务数据介绍 6.4 MySQL安装 6.4.1 安装包准备 6.4.1.1 将安装包和JDBC驱动上传到/opt/software，共计6个 将这6个文件拉到里面 6.4.1.2

@[toc] 6. 业务数据介绍 6.1 电商系统表结构   以下为本电商数仓系统涉及到的业务数据表结构关系。这34个表以订单表、用户表、SKU商品表、活动表和优惠券表为中心，延伸出了优惠券领用表、支

@[toc] 5. 电商业务简介 5.1 电商业务流程   电商的业务流程可以以一个普通用户的浏览足迹为例进行说明，用户点开电商首页开始浏览，可能会通过分类查询也可能通过全文搜索寻找自己中意的商品，这

@[toc] 4. 用户行为数据采集模块 4.3 日志采集Flume 4.3.4 日志采集Flume测试 4.3.4.1 启动Zookeeper、Kafka集群 4.3.4.2 启动hadoop102

@[toc] 4. 用户行为数据采集模块 4.3 日志采集Flume 4.3.2 日志采集Flume配置概述   按照规划，需要采集的用户行为日志文件分布在hadoop102，hadoop103两台日

@[toc] 4. 用户行为数据采集模块 4.3 日志采集Flume 4.3.1 Kafka的三个架构 4.3.1.1 source taildir source：可以读取文件的数据，实时的读取文件的

@[toc] 4. 用户行为数据采集模块 4.2 环境准备 4.2.5 Flume安装 按照采集通道规划，需在hadoop102，hadoop103，hadoop104三台节点分别部署一个Flume。

@[toc] 4. 用户行为数据采集模块 4.2 环境准备 4.2.4 Kafka安装 4.2.4.1 安装部署 4.2.4.1.1 集群规划 hadoop102 hadoop103 hadoop10

@[toc] 4. 用户行为数据采集模块 4.2 环境准备 4.2.3 Zookeeper安装 4.2.3.1 分布式安装部署 4.2.3.1.1 集群规划 在hadoop102、hadoop103和