目录
一、Shell 脚本概述
在一些复杂的Linux维护工作中,大量重复性的输入和交互操作不仅费时费力,而且容易出错,二编写一个恰到好处的Shell脚本程序,可以批量处理、自动化地完成一系列维护任务,大大减轻管理员的负担。
(1)Shell 的作用
Linux系统中的Shell是一个特殊的应用程序,它介于操作内核与用户之间,充当一个“命令解释器”的角色,负责接收用户输入的操作指令并进行解释,将需要执行的操作传递给内核执行,并输出执行结果。
常见的 Shell 解释器程序有很多种,使用不同的 Shell 时,其内部指令、命令行提示符等方面会存在一些区别。通过/etc/shells 文件可以了解当前系统所支持的 Shell 脚本种类。
cat /etc/shells
(2)编写Shell脚本
Bash(/bin/bash)是目前大多数 Linux 版本采用的默认 Shell。Bash 的全称为 BourneAgainShell,是最受欢迎的开源软件项目之一。本文中讲述的所有 shell 操作,均以 Bash 为例。
那么,什么是“shell 脚本”呢?
简单地说,只要将平时使用的各种 Linux 命令按顺序保存到一个文本文件中,然后添加可执行权限,这个文件就成为一个 shell 脚本了。例如,执行以下操作可以创建一个脚本文件:aaa.sh。
vim aaa.sh
chmod +x aaa.sh #添加可执行权限
上述aaa.sh脚本文件中包括三条命令:cd /boot、pwd、ls -l。执行此脚本文件后,输出结果与依次单独执行这三条命令是相同的,从而实现“批量处理”的自动化过程。
执行脚本的方式有多种,如下:
执行方式 | 在哪里执行 | 例子 |
bash | 打开一个子shell,执行脚本的指令,然后退出该子shell | bash aaa.sh |
sh | sh aaa.sh | |
./(需要执行权) | ./aaa.sh | |
. | 直接用当前shell执行 | . aaa.sh |
source | source aaa.sh |
在aaa.sh脚本文件第一行还应该加入“#!/bin/bash”,它是一行特殊的脚本声明,表示此行以后的语句通过/bin/bash程序来解释执行;其他以“#”开头的语句表示注释信息;echo 命令用于输出字符串,可使脚本输出的信息更容易读懂。
(3)重定向与管道操作
由于 Shell 脚本“批量处理”的特殊性,其大部分操作过程以静默方式运行,不需要用户进行干预因此学会提取、过滤执行信息变得十分重要。下面主要介绍Shell环境中的两个I/O操作:从定向和管道。
1、从定向操作
Linux系统中用户通过操作系统处理信息的过程中,包括以下几类交互设备文件:
标准输入(STDIN) | 键盘,文件编号为0,命令将从标准输入文件中读取在执行过程中需要的输入数据。 |
标准输出(STDOUT) | 显示器,文件编号为 1,命令将执行后的输出结果发送到标准输出文件。 |
标准错误(STDERR) | 显示器,文件编号为2,命令将执行期间的各种错误信息发送到标准错误文件。 |
在实际的 Linux 系统维护中,可以改变输入、输出内容的方向,而不使用默认的标准输入、输出设备(键盘和显示器),这种操作称为重定向。
①、重定向输出
重定向输出指的是将命令的正常输出结果保存到指定的文件中,而不是直接显示在显示器的屏幕上。
重定向输出使用“>”或“>>”操作符号,分别用于覆盖或追加文件。
若重定向输出的目标文件不存在,则会新建该文件,然后将前面命令的输出结果保存到该文件中;若目标文件已经存在,则将输出结果覆盖或追加到文件中。
例如,若要将当前主机的CPU 类型信息(uname -p)保存到 kernel.txt 文件中,而不是直接显示在屏幕上,可以执行以下操作。
uname -p > kernel.txt #会覆盖原本内容。
或
uname -r >> kernel.txt #追加内容而不是全部覆盖
②重定向输入
重定向输入指的是将命令中接收输入的途径由默认的键盘改为指定的文件,而不是等待从键盘输入。
重定向输入使用“<”操作符。
通过重定向输入可以使一些交互式操作过程能够通过读取文件来完成。
例如,使用 passwd 命令为用户设置密码时,每次都必须根据提示输入两次密码字串,非常烦琐,若改用重定向输入将可以省略交互式的过程,而自动完成密码设置。passwd 命令的“--stdin”选项可以用来识别标准输入。
vim pass.txt #添加初始密码串内容123456(两行)
passwd --stdin jerry < pass.txt
注:从 pass.txt 文件中取密码,需要注意 SELinux 会影响此命令执行,若执行失败可尝试关闭SELinux。
③错误重定向
错误重定向指的是将执行命令过程中出现的错误信息(如选项或参数错误等)保存到指定的文件,而不是直接显示在屏幕上。
错误重定向使用“2>”操作符,其中“2”是指错误文件的编号
(在使用标准输出、标准输入重定向时,实际上省略了 1、0 编号)。
错误重定向可用来收集程序执行的错误信息,为排错提供依据;对于shell 脚本,还可以将无关紧要的错误信息重定向到空文件/dev/null 中,以保持脚本输出的简洁。
例如,执行以下操作可以将使用 tar 命令进行备份时出现的错误信息保存到 error.log 文件中。
tar jcf /nonedir/etc.tgz /etc/ 2> error.log
cat error.log #查看文件内容
使用“2>”操作符时,会像使用“>”操作符一样覆盖目标文件的内容,若要追加内容而不是覆盖文件,则应改用“2>>”操作符。
当命令输出的结果可能既包括标准输出(正常执行)信息,又包括错误输出信息时,可以使用操作符“>”、“2>”将两类输出信息分别保存到不同的文件,也可以使用“&>”操作符将两类输出信息保存到同一个文件。
例如,在编译源码包的自动化脚本中,若要忽略 make、makeinstall 等操作过程信息,则可以将其定向到空文件/dev/null。
vim httpd_install.sh
#!/bin/bash
#自动编译安装 httpd 服务器的脚本
cd /usr/src/httpd-2.4.25/
./configure --prefix=/usr/local/httpd --enable-so &> /dev/null
make &> /dev/null
make install &> /dev/null
2、管道操作
管道(pipe)操作为不同命令之间的协同工作提供了一种机制,位于管道符号“|”左侧的命令输出的结果,将作为右侧命令的输入(处理对象),同一行命令中可以使用多个管道。
在Shell脚本应用中,管道操作通常用来过滤所需要的关键信息。
例如:
使用管道符操作输出用户名和登录Shell列:
awk 命令的作用是以冒号“:”作为分隔,输出第1个、第7 个区域的字符串。
“-F’部分用来指定分隔符号(未指定时,默认以空格或制表符分隔)。
又如下例:
二、Shell 变量的作用、类型
各种 shell 环境中都使用到了“变量”的概念。Shell 变量用来存放系统和用户需要使用的特定参数(值),而且这些参数可以根据用户的设定或系统环境的变化而相应变化。通过使用变量,Shell 程序能够提供更加灵活的功能,适应性更强。
常见 Shell 变量的类型包括自定义变量、环境变量、只读变量、位置变量、预定义变量。
(1)自定义变量
自定义变量是由系统用户自己定义的变量,只在用户自己的 shell 环境中有效,因此又称为本地变量。在编写 shell 脚本程序时,通常会设置一些特定的自定义变量,以适应程序执行过程中的各种变化满足不同的需要。
1、定义新的变量
定义变量的基本格式为“变量名=变量值”,等号两边没有空格。
变量名称需以字母或下划线开头,名称中不得包含特殊字符(+、-、*、/、.、?、%、#等)。
例如:
Product=Python
Version=2.7.13
2、查看和引用变量的值
通过在变量名称前添加前导符号“$”,可以引用一个变量的值。使用echo 命令可以查看变量,可以在一条 echo 命令中同时査看多个变量值。
当变量名称容易和紧跟其后的其他字符相混淆时,需要添加大括号“{}”将其括起来,否则将无法确定正确的变量名称。对于未定义的变量,将显示为空值。
3、变量赋值的特殊操作
符号 | 作用 | 例子 | 特殊 |
双引号(") | 界定字符串,特别是赋值的内容包括空格; | PYTHON="Python 2.7.13"; PyVersion="Python $Version" | 可以使用“¥”符号引用其他变量的值,如PyVersion="Python $Version" |
单引号(') | 当要赋值的内容中包含$、“、\等具有特殊含义的字符时,应使用单引号括起来。 | PyVersion='Python $Version' | 在单引号的范围内,将无法引用其他变量的值,任何字符均作为普通字符看待;赋值内容中包含单引号(')时,需使用\符号进行转义,以免冲突。 |
反撇号(`) | 用于命令替换,将执行某个命令的屏幕输出结果赋值给变量(括起来的范围内必须是能执行的命令行)。 | ls -lh `which useradd`; DenyList=`grep -v "^#" /etc/vsftpd/ftpusers` | 反撇号不能在一行命令中实现嵌套命令替换操作,这时可以改用“$()”来代替文撇号操作,以解决嵌套的问题。例如,rpm -qc $(rpm -qf $(which useradd)) |
除了上述赋值操作以外,还可以使用Bash的内置命令read 来给变量赋值。
read 命令用来提示用户输入信息,从而实现简单的交互过程。
read 变量名
输入变量的值
还可以使用“-p”选项来设置提示信息,如:
read -p "请指定备份存放目录:" ToDir2
请指定备份存放目录:/opt/backup
4、设置变量的作用范围
默认情况下,新定义的变量只在当前的 shell 环境中有效,因此称为局部变量。当进入子程序或新的子 Shell 环境时,局部变量将无法再使用。
例如,直接执行 Bash 进入一个新的子 shel1 脚本后,将无法引用父级 Shell 环境中定义的 Product、Version 等变量。
查看:
bash #进入子Shell环境
echo "$Product $Version" #无法调用父Shell环境中的变量
exit #退回原有的Shell环境
可以使用内部命令export将指定的变量导出为全局变量。可以同时指定多个变量名称作为参数,不用使"$"符号,变量名之间以空格分隔。
export Product Version #将Product、Version设为全局变量
bash #进入子Shell环境
echo "$Product $Version"
exit #退出
使用 export 导出全局变量的同时,也可以为变量进行赋值,这样在新定义全局变量时就不需要提前进行赋值了。
例如,执行以下操作可以直接新建一个名为FQDN 的全局变量。
export FQDN="www.jb-aptech.com.cn"
5、数值变量的运算
Shell 变量的数值运算多用于脚本程序的过程控制(如循环次数、使用量比较等)。在Bash shell 环境中,只能进行简单的整数运算,不支持小数运算。整数值的运算主要通过内部命令 expr进行,基本格式如下所示。需要注意,运算符与变量之间必须有至少一个空格。
expr 变量1 运算符 变量2 [运算符 变量3]...
其中,变量1、变量2..…对应为需要计算的数值变量(需要以“$”符号调用),常用的几种运算符
如下所述。
+:加法运算。
-:减法运算。
\*:乘法运算,注意不能仅使用“*”符号,否则将被当成文件通配符。
/:除法运算。
%:求模运算,又称为取余运算,用来计算数值相除后的余数。
如下:
X=35
Y=16
expr $X + $Y
expr $X - $Y
expr $X \* $Y
expr $X / $Y
expr $X % $Y
若要将运算结果赋值给其他变量,可以结合命令替换操作(使用反撇号)。
例如,计算变量Y 的3次方,并将结果赋值给变量 Ycube。
Ycube=`expr $Y \* $Y \* $Y`
(2)特殊的Shell变量
除了用户自行定义的 She11 变量以外,在Linux 系统和 Bash shell 环境中还有一系列的特殊变量-环境变量、只读变量、位置变量、预定义变量。
1、环境变量
环境变量指的是出于运行需要而由 Linux 系统提前创建的一类变量,主要用于设置用户的工作环境包括用户宿主目录、命令査找路径、用户当前目录、登录终端等。环境变量的值由 Linux 系统自动维护会随着用户状态的改变而改变。
使用 env 命令可以査看到当前工作环境下的环境变量,对于常见的一些环境变量应了解其各自的用途。
例如,变量 USER 表示用户名称,HOME 表示用户的宿主目录,LANG表示语言和字符集,PWD 表示当前所在的工作目录,PATH 表示命令搜索路径等。
PATH 变量用于设置可执行程序的默认搜索路径,当仅指定文件名称来执行命令程序时,Linux 系统将在 PATH 变量指定的目录范围査找对应的可执行文件,如果找不到则会提示“command not found”。
例如,first.sh 脚本位于/root 目录下,若希望能直接通过文件名称来运行脚本,可以修改 PATH 变量以添加搜索路径,或者将first.sh 脚本复制到现有搜索路径中的某个文件夹下。
ls -lh /root/aaa.sh #确认脚本位置
echo $PATH #查看当前搜索路径
aaa.sh #直接执行会找不到命令
PATH="$PATH:/root" #将/root添加到搜索路径
echo $PATH #查看修改后的搜索路径
aaa.sh #直接以文件名运行脚本
在 Linux 系统中,环境变量的全局配置文件为/etc/profile,在此文件中定义的变量作用于所有用户。除此之外,每个用户还有自己的独立配置文件(~/.bash_profile)。若要长期变更或设置某个环境变量,应在上述文件中进行设置。
例如,执行以下操作可以将记录的历史命令条数改为280 条(默认为 1000 条),只针对 root 用户。
vim /root/.bash_profile
export HISTSIZE=200
上述修改只有当 root 用户下次登录时才会生效。若希望立即生效,应手动修改环境变量,或者可以加载配置文件执行。
history | wc -l #查询已经记录的历史命令条数
source /root/.bash_profile #重新加载配置文件
history | wc -l
2、只读变量
Shell 变量中有一种特殊情况,一经设定,其值是不可改变的,这种变量被称为只读变量。
在创建变量的时候可将其设置为只读属性,也可以将已存在的变量设置为只读属性,只读变量主要用于变量值不允许被修改的情况。
例如脚本中定义了一个变量“log_path”用来定义日志文件的路径,在脚本的执行过程中如果不想被修改,就可以将该变量设置为只读变量。
使用readonly 命令将变量定义为只读变量,定义之后不能通过再次赋值的方式进行修改。
name=cloud
readonly name #设置为只读变量
echo $name
name=yun #会发现只读变量不可以被重新赋值
unset name #只读变量不可被删除
上述中unset 命令通常用于删除变量。
3、位置变量
为了在使用 She11 脚本程序时,方便通过命令行,为程序提供操作参数,Bash 引入了位置变量的概念。当执行命令行操作时,第一个字段表示命令名或脚本程序名,其余的字符串参数按照从左到右的顺序依次赋值给位置变量。
位置变量也称为位置参数,使用$1、$2、$3、…、$9 表示。例如,当执行命令行“1s-1h/boot/”时,其中第 1 个位置变量为“-lh”,以“$1”表示;第 2 个位置变量为“/boot/”,以“$2”表示。
命令或脚本本身的名称使用“$0”表示,虽然$0与位置变量的格式相同,但是$0 属于预定义变量而不是位置变量。
vim adder2num.sh
#!/bin/bash
SUM=`expr $1 +$2`
echo "$1 + $2 = $SUM"
chmod +x adder2num.sh
./adder2num.sh12 34 #$1为12、$2为34 的情况
./adder2num.sh 56 78 #$1为56、$2为78 的情况
4、预定义变量
预定义变量是由 Bash 程序预先定义好的一类特殊变量,用户只能使用预定义变量,而不能创建新的预定义变量,也不能直接为预定义变量赋值。预定义变量使用“$”符号和另一个符号组合表示,较常用的几个预定义变量的含义如下。
$# | 表示命令行中位置参数的个数。 |
$* | 表示所有位置参数的内容。 |
$? | 表示前一条命令执行后的返回状态,返回值为 0 表示执行正确,返回任何非 。值均表示执行出现异常。 |
$0 | 表示当前执行的脚本或程序的名称。 |