《Shell 编程基础》由会员分享，可在线阅读，更多相关《Shell 编程基础（67页珍藏版）》请在金锄头文库上搜索。
1、Shell 编程基础编程基础在计算机科学中，Shell俗称壳（用来区别于核），是指“提供使用者使用界面”的软件（命令解析器）。它类似于DOS下的。它接收用户命令，然后调用相应的应用程序。同时它又是一种程序设计语言。作为命令语言，它交互式解释和执行用户输入的命令或者自动地解释和执行预先设定好的一连串的命令；作为程序设计语言，它定义了各种变量和参数，并提供了许多在高阶语言中才具有的控制结构，包括循环和分支。图形界面图形界面shell（即即 GUI shell）应用最为广泛的 Windows Explorer （微软的windows系列制作系统），还有也包括广为人知的 Linux shell，其中l
2、inux shell 包括 X windows manger (BlackBox和FluxBox)，以及功能更强大的CDE、GNOME、KD、 XFCE。命令行式命令行式 shell（即即CLI shell）bash / sh / ksh / csh（Unix/linux 系统） COMMAND.COM（MS-DOS 系统） cmd.exe / 命令提示字符（Windows NT 系统） Windows PowerShell（支援 .NET Framework 技术的 Windows NT 系统） 传统意义上的shell指的是命令行式的shell，以后如果不特别注明，shell是指命令行式的s
3、hell。文字操作系统与外部最主要的接口就叫做shell。shell是操作系统最外面的一层。shell管理你与操作系统之间的交互:等待你输入，向操作系统解释你的输入，并且处理各种各样的操作系统的输出结果。 shell提供了你与操作系统之间通讯的方式。这种通讯可以以交互方式（从键盘输入，并且可以立即得到响应），或者以shell script(非交互)方式执行。shell script是放在文件中的一串shell和操作系统命令，它们可以被重复使用。本质上，shell script是命令行命令简单的组合到一个文件里面。 Shell基本上是一个命令解释器，类似于DOS下的。它接收用户命令（如ls等)，
4、然后调用相应的应用程序。较为通用的shell有标准的Bourne shell (sh)和C shell (csh)。交互式shell和非交互式shell 交互式模式就是shell等待你的输入，并且执行你提交的命令。这种模式被称作交互式是因为shell与用户进行交互。这种模式也是大多数用户非常熟悉的：登录、执行一些命令、签退。当你签退后，shell也终止了。 shell也可以运行在另外一种模式：非交互式模式。在这种模式下，shell不与你进行交互，而是读取存放在文件中的命令,并且执行它们。当它读到文件的结尾，shell也就终止了。基本格式我们可以使用任意一种文字编辑器，比如nedit、kedit
5、、emacs、vi等来编写shell脚本，它必须以如下行开始（必须放在文件的第一行）： # !/bin/sh.符号#!用来告诉系统执行该脚本的程序，本例使用/bin/sh。编辑结束并保存后，如果要执行该脚本，必须先使其可执行： chmod +x filename此后在该脚本所在目录下，输入 ./filename 即可执行该脚本。合理使用注释shell 脚本中以# 开始的行表示注释，直到该行的结束。我们强烈建议你在脚本中进行适当/合理的注释，这样一来，即便你在相当长时间内没有使用该脚本，也能在短时间内就明白 它的作用和工作原理。此外，还有一个很重要的原因是，在注释的帮助下，别人可以快速有效的分享
6、你的脚本，并提出自己的意见和改进。变量赋值和引用Shell编程中，使用变量无需事先声明，同时变量名的命名须遵循如下规则： 首个字符必须为字母（a-z，A-Z） 中间不能有空格，可以使用下划线（_） 不能使用标点符号 不能使用bash里的关键字（可用help命令查看保留关键字） 需要给变量赋值时，可以这么写： 变量名=值 要取用一个变量的值，只需在变量名前面加一个$： #!/bin/sh# 对变量赋值：a=hello world# 打印变量a的值：echo A is: $a挑个自己喜欢的编辑器，输入上述内容，并保存为文件first，然后执行 chmod +x first 使其可执行，最后输入 .
7、/first 执行该脚本。其输出结果如下： A is: hello world有时候变量名可能会和其它文字混淆，比如： num=2echo this is the $numnd上述脚本并不会输出this is the 2nd而是this is the ；这是由于shell会去搜索变量numnd的值，而实际上这个变量此时并没有值。这时，我们可以用花括号来告诉shell要打印的是num变量： num=2echo this is the $numnd其输出结果为：this is the 2nd Shell脚本中有许多变量是系统自动设定的，我们将在用到这些变量时再作说明。除了只在脚本内有效的普通she
8、ll变量外，还有环境变量，即那些由export关键字处理过的变量。本文不讨论环境变量，因为它们一般只在登录脚本中用到。 Shell里的命令Unix 命令 在shell脚本中可以使用任意unix命令，不过实际上最为常用的一般都是那些文件和文字操作相关的命令。下面介绍一些常用命令的语法和功能： ls 文件列表 wc l file或 wc -w file 或wc -c file 分别计算文件的行数（line）、单词数（word）和字符数（character），file为待计算的文件名 cp sourcefile destfile 文件拷贝，sourcefile为源文件路径，destfile为目的文件
9、夹路径 mv oldname newname 重命名文件或移动文件 rm file 删除文件 grep pattern file 在文件内搜索字符串或和正则表达式匹配的字符串 cut -b column file 将指定范围内的文件内容输出到标准输出设备（屏幕）上。比如：输出每行第5至9个字符 cut -b5-9 file.txt，注意不要和cat命令混淆，这是两个完全不同的命令 cat file.txt 输出文件内容到标准输出设备（屏幕）上 file somefile 取得文件somefile的文件类型 read var 提示用户输入，并将输入内容赋值给变量var sort file.txt
10、 对file.txt文件所有行进行排序 uniq 只输出文件中内容不一致的行，如： sort file.txt | uniq expr 进行数学运算，如要进行2+3的运算，命令为: expr 2 + 3 find 搜索文件，如根据文件名搜索：find . -name filename -print tee 将数据输出到标准输出设备(屏幕) 和文件，比如：somecommand | tee outfile basename file 返回不包含路径的文件名，如： basename /bin/tux 会返回 tux dirname file 返回文件所在路径，如：dirname /bin/tux
11、会返回 /bin head file 打印文本文件开头几行 tail file 打印文本文件末尾几行 sed 是一个基本的查找替换程序。可以从标准输入（如命令管道）读入文本，并将结果输出到标准输出（屏幕）；该命令采用正则表达式进行搜索。不要和 shell中的通配符相混淆。比如将 ubuntu 替换为 Ubuntu ：cat text.file | sed s/ubuntu/Ubuntu/ newtext.file awk 用来提取文本文件中的字段。缺省的字段分割符是空格，可以使用 -F 指定其它分割符。cat file.txt | awk -F, print $1 , $3 , $5 ，这里我
12、们使用 , 作为字段分割符，同时打印第一和第三个字段。如果该文件内容为 Adam Bor, 34, IndiaKerry Miller, 22, USA，则上述命令的输出为：Adam Bor, IndiaKerry Miller, USA 管道, 重定向和 backtick 尽管这些都不是系统命令，不过它们扮演着相当重要的角色。道 (|) 将一个命令的输出作为另外一个命令的输入 grep hello file.txt | wc -l上述命令会在file.txt中搜索包含有”hello”的行并计算行数，这里grep命令的输出成了wc命令的输入。重定向将命令的结果输出到文件，而不是标准输出（屏幕）
13、 写入文件并复盖旧文件 加到文件的尾部，保留旧文件内容 反短斜线 反短斜线可以将一个命令的输出作为其它命令的命令行参数。 find . -mtime -1 -type f -print上述命令可以查找过去24小时（-mtime 2则表示过去48小时）内修改过的文件。如果你想将上述命令查找到的所有文件打包，则可以使用如下脚本： #!/bin/sh# The ticks are backticks () not normal quotes ():tar -zcvf lastmod.tar.gz find . -mtime -1 -type f -printUbuntuShell里的流程控制if 语
14、句if表达式如果条件为真，则执行then后的部分： if .; then .elif .; then .else .fi大多数情况下，可以使用测试命令来对条件进行测试，比如可以比较字符串、判断文件是否存在及是否可读等等通常用 来表示条件测试，注意这里的空格很重要，要确保方括号前后的空格。 -f somefile ：判断是否是一个文件 -x /bin/ls ：判断/bin/ls是否存在并有可执行权限 -n $var ：判断$var变量是否有值 $a = $b ：判断$a和$b是否相等 执行man test可以查看所有测试表达式可以比较和判断的类型。下面是一个简单的if语句： #!/bin/shi
15、f $SHELL = /bin/bash ; then echo your login shell is the bash (bourne again shell)else echo your login shell is not bash but $SHELLfi变量$SHELL包含有登录shell的名称，我们拿它和/bin/bash进行比较以判断当前使用的shell是否为bash。& 和| 操作符 -f /etc/shadow & echo This computer uses shadow passwords这里的 & 就是一个快捷操作符，如果左边的表达式为真则执行右边的语句，你也可以把
16、它看作逻辑运算里的与操作。上述脚本表示如果/etc/shadow文件存在，则打印”This computer uses shadow passwords”。同样shell编程中还可以用或操作(|)，例如： #!/bin/shmailfolder=/var/spool/mail/james -r $mailfolder | echo Can not read $mailfolder ; exit 1; echo $mailfolder has mail from:grep From $mailfolder该脚本首先判断mailfolder是否可读，如果可读则打印该文件中的From 一行。如果不可
17、读则或操作生效，打印错误信息后脚本退出。需要注意的是，这里我们必须使用如下两个命令： -打印错误信息 -退出程序 我们使用花括号以匿名函数的形式将两个命令放到一起作为一个命令使用；普通函数稍后再作说明。即使不用与和或操作符，我们也可以用if表达式完成任何事情，但是使用与或操作符会更便利很多。 case 语句case表达式可以用来匹配一个给定的字符串，而不是数字（可别和C语言里的switch.case混淆）。 case . in .) do something here ;esac让我们看一个例子，file命令可以辨别出一个给定文件的文件类型，如：file lf.gz，其输出结果为： lf.gz
18、: gzip compressed data, deflated, original filename,last modified: Mon Aug 27 23:09:18 2001, os: Unix我们利用这点写了一个名为smartzip的脚本，该脚本可以自动解压bzip2, gzip和zip 类型的压缩文件： #!/bin/sh ftype=file $1 case $ftype in $1: Zip archive*) unzip $1 ; $1: gzip compressed*) gunzip $1 ; $1: bzip2 compressed*) bunzip2 $1 ; *)
19、error File $1 can not be uncompressed with smartzip; esac你可能注意到上面使用了一个特殊变量$1，该变量包含有传递给该脚本的第一个参数值。也就是说，当我们运行： smartzip articles.zip$1 就是字符串 articles.zip。 select 语句select表达式是bash的一种扩展应用，擅长于交互式场合。用户可以从一组不同的值中进行选择： select var in . ; dobreak;done. now $var can be used .#!/bin/shecho What is your favourit
20、e OS?select var in Linux Gnu Hurd Free BSD Other; dobreak;doneecho You have selected $var如果 以上脚本运行出现 select ：NOT FOUND 将 #!/bin/sh 改为 #!/bin/bash 找了半天才找到的答案 该脚本的运行结果如下： What is your favourite OS?1) Linux2) Gnu Hurd3) Free BSD4) Other#? 1You have selected Linuxwhile/for 循环在shell中，可以使用如下循环： while .; d
21、o .done只要测试表达式条件为真，则while循环将一直运行。关键字break用来跳出循环，而关键字”continue”则可以跳过一个循环的余下部分，直接跳到下一次循环中。 for循环会查看一个字符串行表（字符串用空格分隔），并将其赋给一个变量： for var in .; do .done下面的示例会把A B C分别打印到屏幕上： #!/bin/shfor var in A B C ; do echo var is $vardone下面是一个实用的脚本showrpm，其功能是打印一些RPM包的统计信息： #!/bin/sh# list a content summary of a num
22、ber of RPM packages# USAGE: showrpm rpmfile1 rpmfile2 .# EXAMPLE: showrpm /cdrom/RedHat/RPMS/*.rpmfor rpmpackage in $*; do if -r $rpmpackage ;then echo = $rpmpackage = rpm -qi -p $rpmpackage else echo ERROR: cannot read file $rpmpackage fidone这里出现了第二个特殊变量$*，该变量包含有输入的所有命令行参数值。如果你运行showrpm openssh.rpm
23、 w3m.rpm webgrep.rpm，那么 $* 就包含有 3 个字符串，即openssh.rpm, w3m.rpm和 webgrep.rpm。 Shell里的一些特殊符号引号在向程序传递任何参数之前，程序会扩展通配符和变量。这里所谓的扩展是指程序会把通配符（比如*）替换成适当的文件名，把变量替换成变量值。我们可以使用引号来防止这种扩展，先来看一个例子，假设在当前目录下有两个jpg文件：mail.jpg和tux.jpg。 #!/bin/shecho *.jpg运行结果为： mail.jpg tux.jpg引号（单引号和双引号）可以防止通配符*的扩展： #!/bin/shecho *.jpg
24、echo *.jpg其运行结果为： *.jpg*.jpg其中单引号更严格一些，它可以防止任何变量扩展；而双引号可以防止通配符扩展但允许变量扩展： #!/bin/shecho $SHELLecho $SHELLecho $SHELL运行结果为： /bin/bash/bin/bash$SHELL此外还有一种防止这种扩展的方法，即使用转义字符反斜杆:： echo *.jpgecho $SHELL输出结果为： *.jpg$SHELL Here documents 当要将几行文字传递给一个命令时，用here documents是一种不错的方法。对每个脚本写一段帮助性的文字是很有用的，此时如果使用here
25、 documents就不必用echo函数一行行输出。Here document以 开头，后面接上一个字符串，这个字符串还必须出现在here document的末尾。下面是一个例子，在该例子中，我们对多个文件进行重命名，并且使用here documents打印帮助： #!/bin/sh# we have less than 3 arguments. Print the help text:if $# -lt 3 ; thencat HELPren - renames a number of files using sed regular expressions USAGE: ren regexp
26、 replacement files.EXAMPLE: rename all *.HTM files in *.html: ren HTM$ html *.HTMHELP exit 0fiOLD=$1NEW=$2# The shift command removes one argument from the list of# command line arguments.shiftshift# $* contains now all the files:for file in $*; do if -f $file ; then newfile=echo $file | sed s/$OLD/
27、$NEW/g if -f $newfile ; then echo ERROR: $newfile exists already else echo renaming $file to $newfile . mv $file $newfile fi fidone这个示例有点复杂，我们需要多花点时间来说明一番。第一个if表达式判断输入命令行参数是否小于3个 (特殊变量$# 表示包含参数的个数) 。如果输入参数小于3个，则将帮助文字传递给cat命令，然后由cat命令将其打印在屏幕上。打印帮助文字后程序退出。如果输入参数等于或大于3个，我们就将第一个参数赋值给变量OLD，第二个参数赋值给变量NEW。
28、下一步，我们使用shift命令将第一个和第二个参数从参数列表中删除，这样原来的第三个参数就成为参数列表$*的第一个参数。然后我们开始循环，命令行参数列表被一个接一个地被赋值给变量$file。接着我们判断该文件是否存在，如果存在则通过sed命令搜索和替换来产生新的文件名。然后将反短斜线内命令结果赋值给newfile。这样我们就达到了目的：得到了旧文件名和新文件名。然后使用 mv命令进行重命名。 Shell里的函数如果你写过比较复杂的脚本，就会发现可能在几个地方使用了相同的代码，这时如果用上函数，会方便很多。函数的大致样子如下： functionname()# inside the body $1
29、 is the first argument given to the function# $2 the second .body你需要在每个脚本的开始对函数进行声明。 下面是一个名为xtitlebar的脚本，它可以改变终端窗口的名称。这里使用了一个名为help的函数，该函数在脚本中使用了两次： #!/bin/sh# vim: set sw=4 ts=4 et:help()cat HELPxtitlebar - change the name of an xterm, gnome-terminal or kde konsoleUSAGE: xtitlebar -h string_for_tit
30、elbarOPTIONS: -h help textEXAMPLE: xtitlebar cvsHELPexit 0# in case of error or if -h is given we call the function help: -z $1 & help $1 = -h & help# send the escape sequence to change the xterm titelbar:echo -e 330;$107# 在脚本中提供帮助是一种很好的编程习惯，可以方便其他用户（和自己）使用和理解脚本。 命令行参数我们已经见过$* 和 $1, $2 . $9 等特殊变量，这些
31、特殊变量包含了用户从命令行输入的参数。迄今为止，我们仅仅了解了一些简单的命令行语法（比如一些强制性的参数和查看帮助的-h选项）。但是在编写更复杂的程序时，您可能会发现您需要更多的自定义的选项。通常的惯例是在所有可选的参数之前加一个减号，后面再加上参数值 (比如文件名)。 有好多方法可以实现对输入参数的分析，但是下面的使用case表达式的例子无疑是一个不错的方法。#!/bin/sh help() cat shift by 2 -) shift;break; # end of options -*) echo error: no such option $1. -h for help;exit 1
32、; *) break;esacdone echo opt_f is $opt_fecho opt_l is $opt_lecho first arg is $1echo 2nd arg is $2你可以这样运行该脚本： cmdparser -l hello -f - -somefile1 somefile2返回结果如下： opt_f is 1opt_l is hellofirst arg is -somefile12nd arg is somefile2这个脚本是如何工作的呢？脚本首先在所有输入命令行参数中进行循环，将输入参数与case表达式进行比较，如果匹配则设置一个变量并且移除该参数。根据
33、unix系统的惯例，首先输入的应该是包含减号的参数。 Shell脚本示例现在我们来讨论编写一个脚本的一般步骤。任何优秀的脚本都应该具有帮助和输入参数。写一个框架脚本（framework.sh），该脚本包含了大多数脚本需要的框架结构，是一个非常不错的主意。这样一来，当我们开始编写新脚本时，可以先执行如下命令： cp framework.sh myscript然后再插入自己的函数。 二进制到十进制的转换脚本 b2d 将二进制数 (比如 1101) 转换为相应的十进制数。这也是一个用expr命令进行数学运算的例子：#!/bin/sh# vim: set sw=4 ts=4 et:help() cat
34、 HELP b2h - convert binary to decimal USAGE: b2h -h binarynum OPTIONS: -h help text EXAMPLE: b2h 111010will return 58HELP exit 0error() # print an error and exit echo $1 exit 1 lastchar() # return the last character of a string in $rval if -z $1 ; then # empty string rval= return fi # wc puts some s
35、pace behind the output this is why we need sed: numofchar=echo -n $1 | wc -c | sed s/ /g # now cut out the last char rval=echo -n $1 | cut -b $numofcharchop() # remove the last character in string and return it in $rval if -z $1 ; then # empty string rval= return fi # wc puts some space behind the o
36、utput this is why we need sed: numofchar=echo -n $1 | wc -c | sed s/ /g if $numofchar = 1 ; then # only one char in string rval= return fi numofcharminus1=expr $numofchar - 1 # now cut all but the last char: rval=echo -n $1 | cut -b 0-$numofcharminus1while -n $1 ; docase $1 in -h) help;shift 1; # fu
37、nction help is called -) shift;break; # end of options -*) error error: no such option $1. -h for help; *) break;esacdone# The main programsum=0weight=1# one arg must be given: -z $1 & helpbinnum=$1binnumorig=$1while -n $binnum ; do lastchar $binnum if $rval = 1 ; then sum=expr $weight + $sum fi # r
38、emove the last position in $binnum chop $binnum binnum=$rval weight=expr $weight * 2done echo binary $binnumorig is decimal $sum#该脚本使用的算法是利用十进制和二进制数权值 (1,2,4,8,16,.)，比如二进制10可以这样转换成十进制： 0 * 1 + 1 * 2 = 2为了得到单个的二进制数我们是用了lastchar 函数。该函数使用wc c计算字符个数，然后使用cut命令取出末尾一个字符。Chop函数的功能则是移除最后一个字符。 文件循环拷贝#!/bin/sh
39、# vim: set sw=4 ts=4 et: ver=0.1help() cat HELP rotatefile - rotate the file name USAGE: rotatefile -h filename OPTIONS: -h help text EXAMPLE: rotatefile out This will e.g rename out.2 to out.3, out.1 to out.2, out to out.1BR and create an empty out-file The max number is 10 version $ver HELP exit 0
40、error() echo $1 exit 1 while -n $1 ; do case $1 in -h) help;shift 1; -) break; -*) echo error: no such option $1. -h for help;exit 1; *) break; esacdone # input check:if -z $1 ; then error ERROR: you must specify a file, use -h for helpfi filen=$1# rename any .1 , .2 etc file:for n in 9 8 7 6 5 4 3
41、2 1; do if -f $filen.$n ; then p=expr $n + 1 echo mv $filen.$n $filen.$p mv $filen.$n $filen.$p fidone# rename the original file:if -f $filen ; then echo mv $filen $filen.1 mv $filen $filen.1fi echo touch $filentouch $filen这个脚本是如何工作的呢？在检测到用户提供了一个文件名之后，首先进行一个9到1的循环；文件名.9重命名为文件名.10，文件名.8重命名为文件名. 9等等。循
42、环结束之后，把原始文件命名为文件名.1，同时创建一个和原始文件同名的空文件（touch $filen）。 脚本调试最简单的调试方法当然是使用echo命令。你可以在任何怀疑出错的地方用echo打印变量值，这也是大部分shell程序员花费80%的时间用于调试的原因。Shell脚本的好处在于无需重新编译，而插入一个echo命令也不需要多少时间。 shell也有一个真正的调试模式，如果脚本strangescript出错，可以使用如下命令进行调试： sh -x strangescript上述命令会执行该脚本，同时显示所有变量的值。 shell还有一个不执行脚本只检查语法的模式，命令如下： sh -n your_script这个命令会返回所有语法错误。 我希望你们现在已经可以开始编写自己的shell脚本了，尽情享受这份乐趣吧！
