沃乐光浩

DWD层分为 处理业务数据和处理日志数据，业务数据通过 flink CDC 读取动态分流配置， 将 ODS数据 分发到 DWD层 和 DIM层，日志数据通过清洗，放入DWD

先观察 模糊的地方就是有些小黑色点 只需去掉小黑点，就清楚了  先看下效果 原图 修复后  是不是看着还不错 想思路 如何去掉小黑点，拿到每个像素点 将小黑点变成白色的就OK了 去操作 观察每个像素值

ODS 层 采集到 kafka 直接作为 ODS 层，不需要额外处理，保持数据原貌。 日志数据主题：ods_base_log 业务数据主题：ods_base_db_m DWD 层 日志 DWD 层  

channel 主要是用于在不同 goroutines 间传递数据的，所以想要谈 channel 就少不了 go routines ，可以通过 select 实现对 channel 的控制。

Spark解决什么问题 二 Spark为什么会有自己的资源调度器 三 Spark运行模式 四 Spark常用端口号 五 Spark提交作业参数 六 Spark的transformation算子

这是我参与8月更文挑战的第26天，活动详情查看：8月更文挑战” 内存泄漏与优化 平常用 JavaScript 开发代码，内存的泄漏和优化是应该经常留意的。内存泄漏是指 JavaScript 中，已经分

给掘金做了一个数据统计分析工具，统计大部分作者，每天/每周/每月增长多少赞/浏览，生成top榜单，以及每日表格展示出来

概览 一、离线计算和实时计算的差别 离线计算：计算前就已知所以输入数据，且输入数据不会发生变化，一般计算量很大，计算时间也比较长。 一般都是根据前一日的数据生成报表，虽然统计指标、报表繁多，但是对着时

前段时间做出来一个活动排名，虽然有很多不足的地方，但是依然收获很多好评。 有些小伙伴很好奇，怎么实现的，最近比较忙，也没及时修复bug、添加新功能，所以决定，公布源码，让大家一起舔砖加瓦，将功能完善