本文主要讲解数据仓库的一个重要环节：如何设计数据分层！其它关于数据仓库的内容可参考之前的文章。本文对数据分层的讨论适合下面一些场景，超过该范围场景 or 数据仓库经验丰富的大神就不必浪费时间看了。

有赞大数据技术应用的早期，我们使用 Sqoop 作为数据同步工具，满足了 MySQL 与 Hive 之间数据同步的日常开发需求。 随着公司业务发展，数据同步的场景越来越多，主要是 MySQL、Hive 与文本文件之间的数据同步，Sqoop 已经不能完全满足我们的需求。在2017…

导读：阿里巴巴高级技术专家云狄将为大家从管理的角度分享技术TL的核心职责，这其中包括团队建设、团队管理、团队文化、沟通与辅导、招聘与解雇等，希望与大家共同探讨、交流。 互联网公司的技术团队管理通常分为2个方向：技术管理和团队管理，互联网公司的技术TL与传统软件公司的PM还是有很…

本篇文章内容来自2016年TOP100summit 链家网大数据部资深研发架构师李小龙的案例分享。 李小龙：链家网大数据部资深研发架构师，负责大数据工具平台化相关的工作。专注于数据仓库、任务流调度、元数据管理、自助报表等领域。之前在百度从事了四年的数据仓库和工具平台的研发工作。…

公司内部的报表体系，前后经过了3批人员的3次重大改动，但是仍然处于很尴尬的处境。是我们不够努力吗，显然不是。我们开发了几百张各种各样的报表，但是令人满意的几乎没有。随着我们踩坑越来越多，我们也慢慢发现了，在报表体系方面，我们缺的不是技术。 从理论开始，到实际可以操作的步骤结束，…