武子康

离线数仓（Data Warehouse）中“会员留存（Retention）”的落地做法：用 Hive 在 DWS 层沉淀“每日会员留存明细表”（dws_member_retention_day）

离线数仓（Hive）中“新增”“留存”的口径与落地实现，给出一套可直接复用的工程化方案：先计算新增，再基于新增计算留存。核心做法是维护一张“所有信息表（id, dt）”，dt 记录

Hive 离线数仓中的 JSON 数据处理，覆盖三类最常见需求：1）从 JSON 串中取数组字段并在 SQL 中 explode 展开；2）从 JSON 串中同时解析普通字段（json_tuple）

Hive 离线数仓口径：以“启动日志”为 DWD 明细，构建 DWS 主题汇总（dws_member_start_day / week / month），最终在 ADS 层输出活跃会员数（DAU

离线数仓（2026）中 ODS（Operational Data Store）层的工程落地，给出 Hive 外部表（external table）+ 按天分区（partition dt）承接原始日志的

Apache Flume 的离线日志采集链路，给出一套工程化落地：使用 Taildir Source 监控多个目录与多文件正则匹配，为不同目录日志注入 logtype 等 Header；通过自定义 I

使用 TAILDIR Source 监控多个目录（start/event），通过 filegroups headers 为不同来源打上 logtype；再配合自定义 Interceptor 从日志正文

Flume 1.9.0 在离线数仓（日志采集→HDFS）场景的工程化优化：从 Source→Channel→Sink 全链路给出 batchSize、Memory/File Channel 的 cap

离线数仓建设，给出“日志采集→落地→分层→指标”的工程化路径。会员以设备唯一标识（Android IMEI / iOS OpenUDID）为口径，输出新增会员、活跃会员（DAU/WAU/MAU）与留存