tech - 江北太乙的收藏集 - 掘金

tech

更多收藏集

2篇文章 · 0订阅

HBase海量数据高效入仓解决方案

一、方案背景现阶段部分业务数据存储在HBase中，这部分数据体量较大，达到数十亿。大数据需要增量同步这部分业务数据到数据仓库中，进行离线分析，目前主要的同步方式是通过HBase的hive映射表来实现

vivo互联网技术
4年前
1.7k
18
评论

实战！Spring Boot 整合阿里开源中间件 Canal 实现数据增量同步！

大家好，我是不才陈某~ 数据同步一直是一个令人头疼的问题。在业务量小，场景不多，数据量不大的情况下我们可能会选择在项目中直接写一些定时任务手动处理数据，例如从多个表将数据查出来，再汇总处理，再插入到相

码猿技术专栏
4年前
7.7k
65
2