Spark

Spark

Spark

记录个人学习Spark的点点滴滴

暂无订阅共22篇文章创建于2023-07-19

Spark SQL调优篇-入门

Spark SQL调优，调优过程中通过Spark UI查看任务运行情况，调整参数主要是spark.num.output.files和spark.sql.shuffle.partitions

2年前
794
1
评论

Runtime.getRuntime().exec执行shell脚本提交Spark任务

Runtime.getRuntime().exec执行shell脚本并提交Spark任务到集群执行过程

2年前
176
1
评论