获得徽章 26
赞了这篇文章
赞了这篇文章
#每天一个知识点# 使用spark on yarn或者flink on yarn时，经常会使用到yarn application的各种命令，比如：1、yarn application -list //列出正在执行的所有任务
2、yarn application -kill applicationId //kill正在执行的任务
3、yarn application -list | grep dwd //列出正在执行任务名中带有dwd的任务
4、yarn application -list | grep dwd | awk '{print $1}' //过滤出applicationId
5、yarn application -list | grep dwd | awk '{print $1}' | xargs yarn application -kill //根据applicationId批量kill任务，这里会用到xargs命令：xargs 是一个强有力的命令，它能够捕获一个命令的输出，然后传递给另外一个命令
2、yarn application -kill applicationId //kill正在执行的任务
3、yarn application -list | grep dwd //列出正在执行任务名中带有dwd的任务
4、yarn application -list | grep dwd | awk '{print $1}' //过滤出applicationId
5、yarn application -list | grep dwd | awk '{print $1}' | xargs yarn application -kill //根据applicationId批量kill任务，这里会用到xargs命令：xargs 是一个强有力的命令，它能够捕获一个命令的输出，然后传递给另外一个命令
展开
评论
点赞
#每天一个知识点# conda 使用相关命令：
1、conda info //查看信息 ；
2、conda create -n score python=3.9 //创建指定版本的环境 ；
3、conda activate score //切换环境 ；
4、conda env list //查看环境列表 ；
5、pip install -i
pypi.tuna.tsinghua.edu.cn 库名 //库安装命令；
6、conda deactivate //退出当前环境 ；
7、conda remove --name [虚拟环境的名称] --all // 删除指定名称的虚拟环境；
8、conda env export --name [虚拟环境的名称] > environment.yaml //保存环境；
9、conda env create --name [新环境的名称] --file environment.yaml //恢复环境；
10、conda create --name [新虚拟环境的名称] --clone [原虚拟环境的名称] //重命名环境
1、conda info //查看信息 ；
2、conda create -n score python=3.9 //创建指定版本的环境 ；
3、conda activate score //切换环境 ；
4、conda env list //查看环境列表 ；
5、pip install -i
pypi.tuna.tsinghua.edu.cn 库名 //库安装命令；6、conda deactivate //退出当前环境 ；
7、conda remove --name [虚拟环境的名称] --all // 删除指定名称的虚拟环境；
8、conda env export --name [虚拟环境的名称] > environment.yaml //保存环境；
9、conda env create --name [新环境的名称] --file environment.yaml //恢复环境；
10、conda create --name [新虚拟环境的名称] --clone [原虚拟环境的名称] //重命名环境
展开
评论
点赞