Spark

DataSet DataSet是类型安全的API，我们可以提前定义好DataSet的数据类型，这样加载数据的时候，就是严格按照定义的类型来处理的。 同样的，DataSet也是分为Transform &

Spark组成节点： 驱动器进程，Spark集群中的一个节点上，3个功能： 维护Spark程序的有关信息 与用户交互 给执行器分配任务 执行器进程，Spark集群的节点，2个功能： 执行驱动器分配的任