Shell脚本和编程
学习shell的价值
1.Linux服务器的基本操作和管理
2.前端Node.js服务的进程管理,问题排查,资源监控等运维操作
3.使用shell编写TCE、SCM、Docker脚本,完成服务编译和部署
准备
安装linux系统的物理机或云主机,可运行shell脚本
本地的vscode安装bash edbug插件,并升级到bash、4.x以上
Npm全局安装zx依赖
Shell基础概念
概念
终端(获取用户输入,展示运算结果的硬件设备)=tty
终端模拟器(Mac Terminal 、iTerm2等,关联虚拟tty的输入输出软件)
Shell 命令行解释器,处理来自终端模拟器的输入,桔视智行之后输出结果给终端
Bash是shell的一种具体实现
发展
v6shell->sh->bash
构成
命令行解释器
编程语言(变量,运算,语句,函数)
命令和语法
变量:
| 类型 | 作用域 | 声明方式 | 规范 |
|---|---|---|---|
| 自定义变量 | 当前shell | = | 字符串,整型,浮点型,日期型 |
| 环境变量 | 当前shell及其子shell | export、declare -x | |
| 系统环境变量 | 所有shell | 启动加载 |
父子shell
自定义变量:
等号左右不能有空格
将命令或命令结果复制给变量
默认字符串
声明变量为整型
Let
Declare -
导出环境变量
Export
| declare[+/-]选项变量 | |
|---|---|
| - | 给变量设定类型属性 |
| + | 取消变量的类型属性 |
| -a | 将变量声明为数组类型 |
| -i | 将变量声明为整数型 |
| -x | 将变量声明为环境变量 |
| -r | 将变量声明为只读变量 |
| -p | 显示指定变量的被声明的类型 |
系统环境变量
home/PS1/PATH/
配置文件加载过程
登录式shell
非登录式shell(交互式,非交互式的)
运算符和引用
| 类型 | 符号 | 作用 | 用法 | ||||
|---|---|---|---|---|---|---|---|
| 算数运算符 | + - * / % | & | 常规运算 | ||||
| 逻辑运算符 | && ! | ||||||
| 比较运算符 | == ! = < > | ||||||
| 引号 | 双引号“” | 部分引用,仅仅¥`\保留作用 | foo=“${a}123” | ||||
| 单引号‘’ | 完全引用,原样输出 | foo='foo$a' | |||||
| 反引号“ | 执行命令 | foo=‘ls-a‘ | |||||
| 圆括号 | (()) | 算数运算 | foo=$(1+2) | ||||
| () | 执行命令 | $(ls-a) | |||||
| 命令链接 | cmd1执行完返回码非0(不成功),则继续执行cmd2 | cmd1 | cmd2 | ||||
| && | cmd1执行完返回码为0(成功),则继续执行cmd2 | cmd1 && cmd2 | |||||
| ; | 串行执行 | cmd1 ; cmd2 | |||||
| 后台运行 | & | 让命令在后台运行,可与nohup一起使用 | cmd& |
管道与管道符|,作用是将前一个命令的结果传递给后面的命令
语法: cmd1|cmd2
要求:管道右侧的命令必须能接受标准输入才行,比如grep命令,ls、mc等不能直接使用,可以使用xargs预处理(转化为参数列表的形式)
注意:管道命令仅仅处理stdout(标准输出),对于stderr(标准错误输出)会予以忽略,可以使用set-o pipfail 设置shell遇到管道错误退出
重定向
标准输入-->fd0-->终端的输入
标准输出-->fd1-->终端输出
标准错误-->fd2-->终端输出
输出重定向
:覆盖写入文件
:追加写入文件
2>:错误输出写入文件
&>:正确和错误输出统一写入到文件中
输入中定向
<
<<
判断命令
shell提供了test [ [[ 三种判断符号,用于:
整数测试
字符串测试
文件测试
语法:
Test condition
[condition]
[[condition]]
注意:
中括号前后要有空格符
[和test是命令,只能使用自己支持的标志位,<、>、=只能用来比较字符串
中括号内的变量,最好都是用引号括起来
[[更丰富,在整型比较中支持<>=,在字符串比较中支持正则表达式
分支语句
语法1:
If condition ;then
程序段
Elif condition;then
程序段
Else
程序段
Fi
语法2:
case $变量 in:
"第一个变量内容")
程序段
;;
"第一个变量内容")
程序段
;;
*)
程序段
;;
Esac
循环
While循环
While condition ; do 程序段 ; done
Until循环
Until condition ; do 程序段; done
for循环
For var in [word...]; do 程序段; done
函数
语法一:funcName(){echo“abc”;}
语法二:function funcName(){echo“abc”;}
(自上而下执行,函数必须在使用之前定义
函数获取变量和shell script类似,1,$2..获取
函数内return仅仅表示函数执行状态,不代表函数执行结果
返回结果一般使用echo,printf,在外面使用$()、“获取
如果没有return,函数状态上是一条命令的执行状态,存储在$?中
local限定
模块化原理是在当前shell内执行函数文件,方式
source[函数库的路径]
常用命令
| 命令 | 使用 |
|---|---|
| grep | 查找错误日志:grep-n"ERROR"-A3-B3 cloudfun.log统计次数:grep-n"ERROR"-c cloudfun.log |
| Sort | 指定分隔符以后第三列进行排序:sort -t " "-k 3 |
| wc | 统计出现的行数、单词数、字符数 wc -lwn |
| head | 查看前十行:head -n 10 cloudfun.log |
| tail | 等待追加内容:tail -f -n 10 cloudfun.log |
| cut | 对数据行的内容进行处理 cut -d " " -f 3 |
| find | 文件和目录查找 |
| xargs | 参数处理 |
| which | 查找命令路径 |
执行过程和原理
执行
shell脚本一般以.sh结尾,也可以没有,这是一个约定;第一行需要执行用什么命令解释器来执行
#! /bin/bash
#! /usr/bin/env bash
启动脚本的方式
文件名运行 解释器运行 source 运行
规程
字符解析;shell展开;重定向;执行命令;收集状态并返回
shell展开
大括号展开,波浪号展开;参数展开;命令替换;数学计算;文件名展开
调试和前端集成
调试
1.普通log,使用echo、printf
2.使用set命令,确认标志位
3.vscode debug插件(shellman shellcheck shellformat bash debug支持单步调试
集成
node调用(exec,spawn大数据);脚本中node;使用zx库进行javascript、shellscript的融合
总结
shell是不是Linux的一种编程文件嘛,由命令行解释器和编程语言构成,bash是升级,我只看懂变量那一块,听不懂,不适合小白