和姬

ODS 层 采集到 kafka 直接作为 ODS 层，不需要额外处理，保持数据原貌。 日志数据主题：ods_base_log 业务数据主题：ods_base_db_m DW...

5. 定义数据库配置类 6. 定义CDC操作类型枚举类 7. 封装 Kafka 工具类 8. 封装 redis 工具类，缓存DIM数据 9. 封装 Phoenix 工具类，...

给掘金做了一个数据统计分析工具，可以统计到大部分作者，每天天增长多少赞，每个小时增长多少浏览，生成top榜单，展示出来...

Fragment 从 Android 3.0 版本开始引入，它可以称为“迷你版”的 Activity，在 Android 开发中可以让我们的界面更加灵活。 Fragment...

在封装组件的时候, 可能要一次性引入多个文件, 网上找了很多方法不行, 最后借鉴以为不愿意透露姓名的大佬的代码...

算子调优四：filter与coalesce的配合使用   在Spark任务中我们经常会使用filter算子完成RDD中数据的过滤，在任务初始阶段，...

首先简单聊一下什么是 XMLHTTPRequest 历史： 1999年诞生，微软在IE5中集成了XMLHttpRequest对象，但是并没有受到人们重视。 2005年，go...

介绍 Spark中的数据倾斜问题主要指shuffle过程中出现的数据倾斜问题，是由于不同的key对应的数据量不同导致的不同task所处理的数据量不同的问题。例如，reduc...

不知不觉我已经通宵发文1890天了，在这煎熬的夜晚，我频频失眠，连做梦都想着啥时候有个定时发文章功能，好让我睡个好觉...

这是我参与8月更文挑战的第5天，活动详情查看：8月更文挑战 使用binlog快速回滚mysql数据 模拟操作 在各种蜜汁操作前，特殊是没有把握的操作，例如各种批量操作，结构...

在Spark中创建RDD的创建方式可以分为四种： 从集合（内存）中创建RDD 从集合中创建RDD，Spark主要提供了两个方法：parallelize和makeRDD...

这是我参与8月更文挑战的第11天，活动详情查看：8月更文挑战 前言 大家在用 React 开发时，有没有遇到过这样的问题“我们有时候只想更新单个组件，却触发了大量无关组件的...

这是我参与8月更文挑战的第13天，活动详情查看：8月更文挑战 前言   在互联网高速发展的时代，每个人都是一个自媒体。技术人员作为互联网的工匠，为互联网的发展注入新的生命和...

前端の痛：开发两分钟，跨域两小时。使用 Nginx 反向代理解决大部分跨域问题，不再有跨域烦恼，拿来吧你！...

这是我参与8月更文挑战的第3天，活动详情查看：8月更文挑战 废话开篇：大家都知道在苹果手机设置里面有“辅助触控”这样的一个开关，它其实就相当于一个屏幕软键盘，可以拖动到屏幕...

`能把复杂的知识讲的简单很重要`--在学习的过程中我们看过很多资料、视频、文档等，因为现在资料视频都较多所以往往一个知识点会有多种多样的视频形式讲解。...

Kafka对于消息体的大小默认为单条最大值是1M但是在我们应用场景中，常常会出现一条消息大于1M，如果不对Kafka进行配置。则会出现生产者无法将消息推送到Kafka或消费...

Google发布一个新的库都要经历alpha,beta,release等多个版本的迭代,在迭代过程中，通常会有Bug的修复，代码与功能的增删等等，哪些代码应该该增加或删除，...

FLume组成部分 1. taildir source 断点续传、多目录 Flume Apache1.7 CDH1.6 版本产生的 没有断点续传功能时怎么做的？ 自定义 t...