flink
5篇文章 · 0订阅
  • Flink SQL 的数据脱敏解决方案
    Flink SQL 的数据脱敏解决方案，支持面向用户级别的数据脱敏访问控制，即特定用户只能访问到脱敏后的数据。
    后端 大数据 Flink
    Flink SQL 的数据脱敏解决方案
  • Flink 从0-1实现 电商实时数仓 - DIM & DWD（下）
    DWD层分为 处理业务数据和处理日志数据，业务数据通过 flink CDC 读取动态分流配置， 将 ODS数据 分发到 DWD层 和 DIM层，日志数据通过清洗，放入DWD
    后端 大数据 Flink
    Flink 从0-1实现 电商实时数仓 - DIM & DWD（下）
  • Flink 从0-1实现 电商实时数仓 - DWD（中）
    5. 定义数据库配置类 6. 定义CDC操作类型枚举类 7. 封装 Kafka 工具类 8. 封装 redis 工具类，缓存DIM数据 9. 封装 Phoenix 工具类，查询 HBase 10. 封
    大数据 后端 Flink
    Flink 从0-1实现 电商实时数仓 - DWD（中）
  • Flink 从0-1实现 电商实时数仓 - ODS & DWD（上）
    ODS 层 采集到 kafka 直接作为 ODS 层，不需要额外处理，保持数据原貌。 日志数据主题：ods_base_log 业务数据主题：ods_base_db_m DWD 层 日志 DWD 层  
    后端 大数据 Flink
    Flink 从0-1实现 电商实时数仓 - ODS & DWD（上）
  • Flink 1.11 与 Hive 批流一体数仓实践
    为什么要做 Flink 和 Hive 集成的功能呢？最早的初衷是我们希望挖掘 Flink 在批处理方面的能力。众所周知，Flink 在流计算方面已经是成功的引擎了，使用的用户也非常多。在 Flink 的设计理念当中，批计算是流处理中的一个特例。也就意味着，如果 Flink 在流…
    Flink