光羽隼

大数据开发

一个人要像一支队伍，对着自己的头脑和心灵招兵买马，不气馁，有召唤，

赞

12

|

搜索文章

spark提交作业的参数

待补充：收集尽可能多的参数，这里只是几个主要的参数示例 spark提交作业示例都有什么参数 spark提交作业中的参数： master 指定spark提交的方式，可以是spark://host:p

2年前
94
点赞
评论

每日一题：手写wordcount

wordcount手写的多种实现方式，还有不完善的地方，后期补充并完善不同实现方式的优缺点。wordcount是最经典和最基础的大数据统计案例，很多复杂问题都可以拆解成wordcount。

2年前
54
点赞
评论

二、Scala的方法与函数

零、匿名方法的简化逻辑一、方法的定义 def 方法名(带有类型的参数)：返回值类型={ 方法内容 } 注意点：方法的定义使用def 可以定义传入的参数，要制定参数的类型方法的返回值类型一般情况下

2年前
79
点赞
评论

一、Scala简介、类和对象、简单语法

为什么学习Scala？因为需要学习Spark，而Spark框架开发使用最好的语言就是Scala，虽然Java也可以进行Spark的开发，但是不如Scala效率高，并且市面上大家都是使用Scala开发

2年前
151
点赞
评论

个人成就

文章被阅读 1,533

加入于

2016-08-25