人脑具备不断积累经验的能力，依赖经验我们便具备了分析处理的能力，比如我们要去菜场挑一个西瓜，别人或者自己的经验告诉我们色泽青绿、根蒂蜷缩、纹路清晰、敲声浑响的西瓜比较好吃。

things you need know before you touch Spark and before you decide to use spark in your next project.

模型随着接收的新消息，不断更新自己；而不是像离线训练一次次重新训练。

要想学好 spark，怎么能不先搞清楚 RDD 的来龙去脉呢～～～

RDD：弹性分布式数据集，是一种特殊集合 ‚ 支持多种来源 ‚ 有容错机制 ‚ 可以被缓存 ‚ 支持并行操作，一个 RDD 代表一个分区里的数据集 RDD 有两种操作算子： Transformation（转换）：Transformation 属于延迟计算，当一个 RDD 转换成一 个 RDD 时并没有立即进行转换，仅仅是记住了数据集的逻辑操作 Ation（执行）：触发 Spark 作业的运行，真正触发转换算子的计算

scala、spark 使用过程中，各种测试用例以及相关资料整理

用户编写的Spark程序，通过一个有main方法的类执行,完成一个计算任务的处理。它是由一个Driver程序和一组运行于Spark集群上的Executor组成 弹性分布式数据集。RDD是Spark的核心数据结构，可以通过一系列算子进行操作。当RDD遇到Action算子时，将之前…

该入门教程搭配了在线环境，可以直接在线体验 spark。Apache Spark 是一个新兴的大数据处理通用引擎，提供了分布式的内存抽象。本教程从核心组件、体系结构、安装部署方面做了介绍。

不久前我在 StackOverflow 上回答了一系列关于 Apache Spark 架构相关的问题。这似乎是由于网上缺乏好的 Spark 整体架构的文章。甚至是官网指导中也没有很多详细的介绍，当然也缺少好的架构图。“Learning Spark” 这本书和官方资料中也一样没有。