沃乐光浩

DWD层分为 处理业务数据和处理日志数据，业务数据通过 flink CDC 读取动态分流配置， 将 ODS数据 分发到 DWD层 和 DIM层，日志数据通过清洗，放入DWD...

先观察 模糊的地方就是有些小黑色点 只需去掉小黑点，就清楚了  先看下效果 原图 修复后  是不是看着还不错 想思路 如何去掉小黑点，拿到每个像素点 将小黑点变成白色的就O...

ODS 层 采集到 kafka 直接作为 ODS 层，不需要额外处理，保持数据原貌。 日志数据主题：ods_base_log 业务数据主题：ods_base_db_m DW...

channel 主要是用于在不同 goroutines 间传递数据的，所以想要谈 channel 就少不了 go routines ，可以通过 select 实现对 cha...

Spark解决什么问题 二 Spark为什么会有自己的资源调度器 三 Spark运行模式 四 Spark常用端口号 五 Spark提交作业参数 六 Spark的transf...

这是我参与8月更文挑战的第26天，活动详情查看：8月更文挑战” 内存泄漏与优化 平常用 JavaScript 开发代码，内存的泄漏和优化是应该经常留意的。内存泄漏是指 Ja...

给掘金做了一个数据统计分析工具，统计大部分作者，每天/每周/每月增长多少赞/浏览，生成top榜单，以及每日表格展示出来...

概览 一、离线计算和实时计算的差别 离线计算：计算前就已知所以输入数据，且输入数据不会发生变化，一般计算量很大，计算时间也比较长。 一般都是根据前一日的数据生成报表，虽然统...

前段时间做出来一个活动排名，虽然有很多不足的地方，但是依然收获很多好评。 有些小伙伴很好奇，怎么实现的，最近比较忙，也没及时修复bug、添加新功能，所以决定，公布源码，让大...

xdm，大家好，我是摸鱼专家呀，我又带来最新的排行榜啦。 初衷：通过排行榜激励每位创作者，创作出许许多多的优质文章，让大家卷起来...

数据倾斜解决方案三：过滤导致倾斜的key 如果在Spark作业中允许丢弃某些数据，那么可以考虑将可能导致数据倾斜的key进行过滤，滤除可能导致数据倾斜的key对应的数据，这...

日志数据采集 流程 前端埋点 通过nginx到日志服务器 将 Event 打印到日志文件 将 Event 发送至Kafka 实现 1. 新建日志项目...

面试常被问到：浏览器从URL输入到页面展现到底发生了什么？这也算一个前端面试经典问题了，本文就带你彻底了解面试官到底问这个问题想让你回答些什么。...

常规性能调优一：最优资源配置 Spark性能调优的第一步，就是为任务分配更多的资源，在一定范围内，增加资源的分配与性能的提升是成正比的，实现了最优的资源配置后，在此基础上再...

用户通过系统返回按钮导航回去的一组页面，在开发中被称为返回栈 (back stack)。多返回栈即一堆 "返回栈"，对多返回栈的支持是在 Navigation 2.4.0-...

通过暴露组件的交互事件和API方法，给Vue动态表单增加了可编程接口，轻松实现表单的复杂交互逻辑，详情请点击阅读。...

这是我参与8月更文挑战的第1天，活动详情查看：8月更文挑战 代码优化可以让你的性能更好运行流畅,或者说可以让你的代码更简短，更具备维护性 优化点(性能)1 如下面代码 ar...

本文已参与掘金创作者训练营第三期「话题写作」赛道，详情查看：掘力计划｜创作者训练营第三期正在进行，「写」出个人影响力。 📖前言 知道的越多不知道的就越多 编程开发这条路上...

HBase Java Api DML 、DDL 的使用 包括namespace，table，data的增删改查操作...