首页
AI Coding
NEW
沸点
课程
直播
活动
AI刷题
APP
插件
搜索历史
清空
创作者中心
写文章
发沸点
写笔记
写代码
草稿箱
创作灵感
查看更多
会员
登录
注册
zhouguowei
掘友等级
获得徽章 0
动态
文章
专栏
沸点
收藏集
关注
作品
赞
0
文章 0
沸点 0
赞
0
返回
|
搜索文章
最新
热门
面试|spark模块 - spark的工作流程?
所有spark程序都离不开程序初始化和执行任务这两部分,所以该问题可以从这两部分开始回答。 用户通过sparksubmit提交程序以后,driver程序开始运行(driver程序就是运行起来的提交的程序,可以理解为spark的main程序)。 driver程序运行起来会首先初始…
如何让你的spark sql运行的更快一些?
但是如果使用来spark sql,用spark sql的那个stage的并行度,你没办法自己指定,因为spark sql 自己会默认根据hive表对应的hdfs的block,自动设置spark sql查询所在的那个stage的并行度。 你自己通过spark.default.pa…
个人成就
文章被点赞
1
文章被阅读
1,526
掘力值
36
关注了
5
关注者
0
收藏集
0
关注标签
6
加入于
2020-01-05