首页
首页
BOT
沸点
课程
直播
活动
竞赛
商城
APP
插件
搜索历史
清空
创作者中心
写文章
发沸点
写笔记
写代码
草稿箱
创作灵感
查看更多
会员
登录
注册
spark
stay_foolish
创建于2021-06-28
订阅专栏
spark
暂无订阅
共3篇文章
创建于2021-06-28
订阅专栏
默认顺序
默认顺序
最早发布
最新发布
Spark
基础原理 1. Spark组件 2. Spark 部署模式 本地部署 Spark 不一定非要跑在 hadoop 集群,可以在本地,起多个线程的方式来指定。将 Spark 应用以多线程的方式直接运行在本
spark 常用算子
1、转换算子 1.1 map 1.2 mapPartitions map和mapPartition的区别: map 算子主要目的将数据源中的数据进行转换和改变。但是不会减少或增多数据。是串行,效率低
spark 端口号
4040:spark查看当前Spark-shell运行任务情况端口号; 7077:Spark Master内部通信服务端口号; 8080:Standalone模式下,Spark Master Web端