一、方案背景 现阶段部分业务数据存储在HBase中，这部分数据体量较大，达到数十亿。大数据需要增量同步这部分业务数据到数据仓库中，进行离线分析，目前主要的同步方式是通过HBase的hive映射表来实现

本文介绍了腾讯看点基于 Flink 构建实时数仓以及实时数据查询系统，亚秒级的响应多维条件查询请求。

结合 Flink SQL 和 Flink 有状态计算能力，字节跳动构建下一代通用的基础特征计算统一架构。

开篇介绍本篇将分享，算法测试同学在数据质量和接口语义监控领域，遇到的问题与挑战。他们如何通过搭建功能业务监控平台，来建立数据质量与接口语义监控的能力，最终取得了哪些实践结果？其他业务线的开发&测试同学

概述 随着业务发展和数据量的增加，大数据应用开发已成为部门应用开发常用的开发方式，由于部门业务特点的关系，spark和hive应用开发在部门内部较为常见。当处理的数据量达到一定量级和系统的复杂度上升时

本文将介绍火山引擎数据质量平台是如何弥合大数据场景下数据质量校验与计算消耗资源大、校验计算时间长的冲突，并介绍数据质量平台是如何用一套架构框架来满足流批方面的数据质量监控。

9月26日下午，爱奇艺技术产品团队举办了第19期“i技术会沙龙”，本次i技术会的主题是“数据治理探索与应用”，来自快手、美团、快看的几位资深专家共同就相关技术议题进行了深入探讨。 爱奇艺研究员彭涛老师

美团外卖业务种类繁多、场景丰富，根据业务特点可分为推荐、广告、搜索三大业务线以及数个子业务线，比如商家推荐、菜品推荐、列表广告、外卖搜索等等，满足了数亿用户对外卖服务的全方面需求。而在每条业务线的背后，都涉及用户、商家、平台三方面利益的平衡：用户需要精准的展现结果；商家需要尽可…