笔者从 2008 年开始工作到现在也有 11 个年头了，一路走来都在和数据打交道，做过大数据底层框架内核的开发（Hadoop，Pig，Tez，Spark，Livy），也做过上层大数据应用开发（写 MapReduce Job 做 ETL ，用 Hive 做 Ad hocquery…

数据仓库（DW）是一个 面向主题的、集成的、稳定的、随时间变化的数据的集合，以用于支持管理决策过程。 主题是指用户使用数据仓库进行决策时所关心的重点领域。数据仓库通过一个个主题将多个业务系统的数据加载到一起，为了各个主题（如：用户、订单、商品等）进行分析而建，操作型数据库是为了…

人类都是视觉动物，讲究一图胜千言。如果没了可视化，那么你在跟领导汇报工作时，很大程度会鸡同鸭讲。 其实excel2016+已经是一个不错的数据分析及可视化工具了(支持几十种数据源),但是，不方便权限控制，集中，及报警。 我一般将redash作为可视化工具、数据库查询编辑器(类似…

1. 大数据，到底是什么？ 大数据，一场生活、工作与思维的大变革。那它到底是什么呢？如何去分析大数据？ 大数据的关注点是“规律是什么，将会发生什么”，而不是“为什么会发生”。 以上呢，就大体上通俗得去说明了大数据的概念和分析过程。其实，大数据分析就是让数据“发声”。让原本“沉默…