业界所说的 shell 通常都是指 shell 脚本,但读者朋友要知道,shell 和 shell script 是两个不同的概念。Shell 编程跟 JavaScript、php 编程一样,只要有一个能编写代码的文本编辑器和一个能解释执行的脚本解释器就可以了。
1 案例1:字符串截取及切割
1.1 问题
使用Shell完成各种Linux运维任务时,一旦涉及到判断、条件测试等相关操作时,往往需要对相关的命令输出进行过滤,提取出符合要求的字符串。
1.2 方案
子串截取的三种用法:
${变量名:起始位置:长度}
• expr substr “$变量名” 起始位置 长度
• echo $变量名 | cut -b 起始位置-结束位置
子串替换的两种用法:
• 只替换第一个匹配结果:${变量名/old/new}
• 替换全部匹配结果:${变量名//old/new}
字符串掐头去尾:
• 从左向右,最短匹配删除:${变量名#*关键词}
• 从左向右,最长匹配删除:${变量名##*关键词}
• 从右向左,最短匹配删除:${变量名%关键词*}
• 从右向左,最长匹配删除:${变量名%%关键词*}
1.3 步骤
实现此案例需要按照如下步骤进行。
步骤一:字符串的截取
1)方法一,使用 ${}表达式
格式:${变量名:起始位置:长度}
使用${}方式截取字符串时,起始位置是从0开始的。
定义一个变量phone,并确认其字符串长度:
-
[root@svr5 ~]# phone=\"13788768897\"[root@svr5 ~]# echo ${#phone}11 //包括11个字符
使用${}截取时,起始位置可以省略,省略时从第一个字符开始截。比如,以下操作都可以从左侧开始截取前6个字符:
-
[root@svr5 ~]# echo ${phone:0:6}137887
或者
-
[root@svr5 ~]# echo ${phone::6}137887
因此,如果从起始位置1开始截取6个字符,那就变成这个样子了:
-
[root@svr5 ~]# echo ${phone:1:6}378876
2)方法二,使用 expr substr
格式:expr substr “$变量名” 起始位置 长度
还以前面的phone变量为例,确认原始值:
-
[root@svr5 ~]# echo $phone13788768897
使用expr substr截取字符串时,起始编号从1开始,这个要注意与${}相区分。
从左侧截取phone变量的前6个字符:
-
[root@svr5 ~]# expr substr \"$phone\" 1 6137887
从左侧截取phone变量,从第9个字符开始,截取3个字符:
-
[root@svr5 ~]# expr substr \"$phone\" 9 3897
3)方式三,使用cut分割工具
格式:echo $变量名 | cut -b 起始位置-结束位置
选项 -b 表示按字节截取字符,其中起始位置、结束位置都可以省略。当省略起始位置时,视为从第1个字符开始(编号也是从1开始,与expr类似),当省略结束位置时,视为截取到最后。
还以前面的Phone变量为例,确认原始值:
-
[root@svr5 ~]# echo $phone13788768897
从左侧截取前6个字符,可执行以下操作:
-
[root@svr5 ~]# echo $phone | cut -b 1-6137887
从第8个字符截取到末尾:
-
[root@svr5 ~]# echo $phone | cut -b 8-8897
只截取单个字符,比如第9个字符:
-
[root@svr5 ~]# echo $phone | cut -b 98
截取不连续的字符,比如第3、5、8个字符:
-
[root@svr5 ~]# echo $phone | cut -b 3,5,8788
4)一个随机密码的案例
版本1:
-
[root@svr5 ~]# vim rand.sh#!/bin/bashx=abcdefghijklmnopqrstuvwxyzABCDEFGHIJKLMNOPQRSTUVWXYZ0123456789//所有密码的可能性是26+26+10=62(0-61是62个数字)num=$[RANDOM%62]pass=${x:num:1}
版本2:
-
[root@svr5 ~]# vim rand.sh#!/bin/bashx=abcdefghijklmnopqrstuvwxyzABCDEFGHIJKLMNOPQRSTUVWXYZ0123456789//所有密码的可能性是26+26+10=62(0-61是62个数字)pass=\'\'for i in {1..8}donum=$[RANDOM%62]tmp=${x:num:1}pass=${pass}$tmpdoneecho $pass
步骤二:字符串的替换
1)只替换第1个子串
格式:${变量名/old/new}
还以前面的phone变量为例,确认原始值:
-
[root@svr5 ~]# echo $phone13788768897
将字符串中的第1个8替换为X:
-
[root@svr5 ~]# echo ${phone/8/X}137X8768897
2)替换全部子串
格式:${变量名//old/new}
将phone字符串中的所有8都替换为X:
-
[root@svr5 ~]# echo ${phone//8/X}137XX76XX97
步骤三:字符串的匹配删除
以处理系统默认的账户信息为例,定义变量A:
-
[root@svr5 ~]# A=`head -1 /etc/passwd`[root@svr5 ~]# echo $Aroot:x:0:0:root:/root:/bin/bash
1)从左向右,最短匹配删除
格式:${变量名#关键词}
删除从左侧第1个字符到最近的关键词“:”的部分, 作通配符理解:
-
[root@svr5 ~]# echo ${A#*:}x:0:0:root:/root:/bin/bash
2)从左向右,最长匹配删除
格式:${变量名##*关键词}
删除从左侧第1个字符到最远的关键词“:”的部分:
-
[root@svr5 ~]# echo $A //确认变量A的值root:x:0:0:root:/root:/bin/bash[root@svr5 ~]# echo ${A##*:}/bin/bash
3)从右向左,最短匹配删除
格式:${变量名%关键词*}
删除从右侧最后1个字符到往左最近的关键词“:”的部分,* 做通配符理解:
-
[root@svr5 ~]# echo ${A%:*}root:x:0:0:root:/root
4)从右向左,最长匹配删除
格式:${变量名%%关键词*}
删除从右侧最后1个字符到往左最远的关键词“:”的部分:
-
[root@svr5 ~]# echo ${A%%:*}root
步骤四:编写renfilex.sh脚本
创建一个测试用的测试文件
-
[root@svr5 ~]# mkdir rendir[root@svr5 ~]# cd rendir[root@svr5 rendir]# touch {a,b,c,d,e,f,g,h,i}.doc[root@svr5 rendir]# lsa.doc b.doc c.doc d.doc e.doc f.doc g.doc h.doc i.doc
1)批量修改文件扩展名的脚本
脚本用途为:批量修改当前目录下的文件扩展名,将.doc改为.txt。
脚本内容参考如下:
-
[root@svr5 rendir]# vim renfile.sh#!/bin/bashfor i in `ls *.doc` #注意这里有反引号domv $i ${i%.*}.txtdone[root@svr5 ~]# chmod +x renfile.sh
测试脚本:
[root@svr5 rendir]# ./renfile.sh
[root@svr5 rendir]# ls
a.txt b.txt c.txt d.txt e.txt f.txt g.txt h.txt i.txt
2)改进版脚本(批量修改扩展名)
通过位置变量 $1、$2提供更灵活的脚本,改进的脚本编写参考如下:
-
[root@svr5 rendir]# vim ./renfile.sh#!/bin/bash#version:2for i in `ls *.$1`domv $i ${i%.*}.$2done
3)验证、测试改进后的脚本
将 *.doc文件的扩展名改为.txt:
-
[root@svr5 rendir]# ./renfile.sh txt doc
将 *.doc文件的扩展名改为.mp4:
-
[root@svr5 rendir]# ./renfile.sh doc mp4
2 案例2:字符串初值的处理
2.1 问题
本案例要求编写一个脚本sumx.sh,求从1-x的和,相关要求如下:
• 从键盘读入x值
• 当用户未输入任何值时,默认按1计算
2.2 方案
通过${var:-word}判断变量是否存在,决定变量的初始值。
2.3 步骤
实现此案例需要按照如下步骤进行。
步骤一:认识字符串初值的最常见处理方法
1)只取值,${var:-word}
若变量var已存在且非Null,则返回 $var 的值;否则返回字串“word”,原变量var的值不受影响。
变量值已存在的情况:
-
[root@svr5 ~]# XX=11[root@svr5 ~]# echo $XX //查看原变量值11[root@svr5 ~]# echo ${XX:-123} //因XX已存在,输出变量XX的值11
变量值不存在的情况:
-
[root@svr5 ~]# echo ${YY:-123} //因YY不存在,输出“123”123
编写一个验证知识点的参考示例脚本如下:
-
[root@svr5 ~]# cat /root/test.sh#!/bin/bashread -p \"请输入用户名:\" user[ -z $user ] && exit //如果无用户名,则脚本退出read -p \"请输入密码:\" passpass=${pass:-123456} //如果用户没有输入密码,则默认密码为123456useradd $userecho \"$pass\" | passwd --stdin $user
步骤二:编写sumx.sh脚本,处理read输入的初值
用来从键盘读入一个正整数x,求从1到x的和;当用户未输入值(直接回车)时,为了避免执行出错,应为x赋初值1 。
1)脚本编写参考如下
-
[root@svr5 ~]# vim sumx.sh#!/bin/bashread -p \"请输入一个正整数:\" xx=${x:-1}i=1; SUM=0while [ $i -le $x ]dolet SUM+=ilet i++doneecho \"从1到$x的总和是:$SUM\"
-
[root@svr5 ~]# chmod +x sumx.sh
2)验证、测试脚本执行效果:
-
[root@svr5 ~]# ./sumx.sh请输入一个正整数:25 //输入25,正常读入并计算、输出结果从1到25的总和是:325[root@svr5 ~]# ./sumx.sh请输入一个正整数:70 //输入70,正常读入并计算、输出结果从1到70的总和是:2485[root@svr5 ~]# ./sumx.sh
请输入一个正整数: //直接回车,设x=1后计算、输出结果
从1到1的总和是:1
3 案例3:expect预期交互
3.1 问题
本案例要求编写一个expect脚本,实现SSH登录的自动交互:
• 提前准备好目标主机,IP地址为192.168.4.5
• 执行脚本后自动登入,并且在目标主机建立测试文件 /tmp/mike.txt
3.2 方案
expect可以为交互式过程(比如FTP、SSH等登录过程)自动输送预先准备的文本或指令,而无需人工干预。触发的依据是预期会出现的特征提示文本。
储备知识(发送邮件的几种方式): -
[root@svr5 ~]# echo \"test mail\" | mail -s test root[root@svr5 ~]# mail -s test root < /etc/passwd[root@svr5 ~]# mail -s test root << EOFtest mailhell worldEOF
3.3 步骤
实现此案例需要按照如下步骤进行。
步骤一:准备expect及SSH测试环境
1)安装expect工具
-
[root@svr5 ~]# yum -y install expect //安装expect.. ..Installed:expect.x86_64 0:5.44.1.15-5.el6_4Dependency Installed:tcl.x86_64 1:8.5.7-6.el6[root@svr5 ~]# which expect //确认expect路径/usr/bin/expect
步骤二:编写脚本,实现免交互登录
1)任务需求及思路分析
在SSH登录过程中,如果是第一次连接到该目标主机,则首先会被要求接受密钥,然后才提示输入密码:
注意:不要照抄这里的IP地址,需要根据自己的实际IP填写!!!
-
[root@svr5 ~]# ssh [email protected] //连接目标主机The authenticity of host \'192.168.4.5 (192.168.4.5)\' can\'t be established.RSA key fingerprint is 58:a0:d6:00:c7:f1:34:5d:6c:6d:70:ce:e0:20:f8:f3.Are you sure you want to continue connecting (yes/no)? yes //接受密钥Warning: Permanently added \'192.168.4.5\' (RSA) to the list of known [email protected]\'s password: //验证密码Last login: Thu May 7 22:05:44 2015 from 192.168.4.5[root@svr5 ~]$ exit //返回客户端logoutConnection to 192.168.4.5 closed.
当然,如果SSH登录并不是第一次,则接受密钥的环节就没有了,而是直接进入验证密码的过程:
注意:不要照抄这里的IP地址,需要根据自己的实际IP填写!!!
-
[root@svr5 ~]# ssh [email protected] //连接目标主机[email protected]\'s password: //验证密码Last login: Mon May 11 12:02:39 2015 from 192.168.4.5[root@svr5 ~]$ exit //返回客户端logoutConnection to 192.168.4.5 closed.
2)根据实现思路编写脚本文件
脚本内容参考如下版本1:
注意:不要照抄脚本里的IP地址与密码,需要根据自己的实际情况填写!!!
-
[root@svr5 ~]# vim expect_ssh.sh#!/bin/bashexpect << EOFspawn ssh 192.168.4.5 #//创建交互式进程expect \"password:\" { send \"123456\\r\" } #//自动发送密码expect \"#\" { send \"touch /tmp.txt\\r\" } #//发送命令expect \"#\" { send \"exit\\r\" }EOF
-
[root@svr5 ~]# chmod +x expect_ssh.sh
通过循环批量操作,版本2:
注意:不要照抄脚本里的IP地址与密码,需要根据自己的实际情况填写!!!
-
[root@svr5 ~]# vim expect_ssh.sh#!/bin/bashfor i in 10 11 #注意IP根据实际情况填写doexpect << EOFspawn ssh 192.168.4.$i #//创建交互式进程expect \"password:\" { send \"123456\\r\" } #//自动发送密码expect \"#\" { send \"touch /tmp.txt\\r\" } #//发送命令expect \"#\" { send \"exit\\r\" }EOFdone
-
[root@svr5 ~]# chmod +x expect_ssh.sh
注意事项:
expect脚本的最后一行默认不执行
如果不希望ssh时出现yes/no的提示,远程时使用如下选项:
# ssh -o StrictHostKeyChecking=no server0