首页
沸点
课程
数据标注
HOT
AI Coding
更多
直播
活动
APP
插件
直播
活动
APP
插件
搜索历史
清空
创作者中心
写文章
发沸点
写笔记
写代码
草稿箱
创作灵感
查看更多
登录
注册
涤生大数据
掘友等级
大数据架构专家
大数据架构专家,擅长大数据开发,组件调优,集群运维架构。当前管理1500节点大数据集群,100PB+数据,爱好python,爬虫。微信公众号:涤生手记大数据
获得徽章 0
动态
文章
专栏
沸点
收藏集
关注
作品
赞
276
文章 276
沸点 0
赞
276
返回
|
搜索文章
最新
热门
Spark系列:RDD之间的依赖关系,窄依赖和宽依赖
1.2. 假如 rddB = rddA.val sc = ...val rddA = sc.val rddB = sc.rddA.cartesian(rddB).collect().Represents a dependency on the output of a shuffl...
Spark系列:DataSet和DataFrame使用详解
1.val spark: SparkSession = new sql.SparkSession....import spark.implicits.val dataset: Dataset[People] = spark.dataset.filter(item => item....
Spark系列: DataFrameReader读取json/parquet等格式文件详解
1.import org.apache.spark.sql.import org.apache.spark.sql.val spark: SparkSession = ...val reader: DataFrameReader = spark.import org.apache...
Spark系列:sparksql操作hive表的使用
1.Step 1: 修改 hive-site.<name>hive.metastore.warehouse.<name>javax.jdo.option.<name>javax.jdo.option.<value>com.mysql.jdbc.<name>javax.jdo.o...
Scala系列:Actor创建,Actor发送,接受消息等详解与案例演示
0.scala的Actor并发编程模型可以用来开发比Java线程效率更高的并发程序。我们学习scala Actor的目的主要是为后续学习Akka做准备。0.在Java并发编程中,每个对象都有一个逻辑监视器(monitor),可以用来控制对象的多线程访问。我们添加sychroniz...
Scala系列:Scala提取器的使用
0.我们之前已经使用过scala中非常强大的模式匹配功能了,通过模式匹配,我们可以快速匹配样例类中的成员变量。// 1. // 2. // 3. 使用match...不可以的。要支持模式匹配,必须要实现一个提取器。样例类支持自动匹配,那是因为样例类自动实现了apply、unapp...
Scala系列:Option类型,隐函数以及正则表达式的使用详解
0. 0.1.1.2.2.2.2.0. 使用Option类型,可以用来有效避免空引用(null)异常。也就是说,将来我们返回某些数据时,可以返回一个Option类型来替代。scala中,Option类型来表示可选值。0.package com.robot.val result1 ...
Scala系列:模式匹配之简单匹配,匹配类型,守卫,匹配样例类,匹配集合等详解
0.1.1.1.2.2.2.3.4.4.5.5.5.5.6. 0.1.在Java中,有switch关键字,可以简化if条件判断语句。在scala中,可以使用match表达式替代。1.1.从控制台输入一个单词(使用StdIn.package com.robot.import sca...
Scala系列:抽象,匿名内部类,特质,模板等使用详解与演示
# 0. 抽象类 和Java语言一样,scala中也可以定义抽象类 ## 0.1 定义 如果类的某个成员在当前类中的定义是不包含完整的,它就是一个**抽象类** 不完整定义有两种情
Scala系列:轻松搞定Scala中方法与函数的区别与使用
Scala 有方法与函数,二者在语义上的区别很小。Scala 方法是类的一部分,而函数是一个对象可以赋值给一个变量。换句话来说在类中定义的函数即是方法。有些翻译上函数(function)与方法(method)是没有区别的,比如都叫函数。Scala 中的方法跟 Jav...
下一页
个人成就
文章被点赞
1,565
文章被阅读
168,819
掘力值
4,867
关注了
9
关注者
87
收藏集
1
关注标签
6
加入于
2021-10-19