12.9. 混杂命令
- jot, seq
这些工具用来生成一系列整数, 用户可以指定生成范围.
每个产生出来的整数一般都占一行, 但是可以使用
-s选项来改变这种设置.bash$ seq 5 1 2 3 4 5 bash$ seq -s : 5 1:2:3:4:5
jot和seq命令经常用在for循环中.
例子 12-49. 使用seq命令来产生循环参数
1 #!/bin/bash 2 # 使用"seq" 3 4 echo 5 6 for a in `seq 80` # or for a in $( seq 80 ) 7 # 与 for a in 1 2 3 4 5 ... 80 相同(少敲了好多字!). 8 # 也可以使用'jot'(如果系统上有的话). 9 do 10 echo -n "$a " 11 done # 1 2 3 4 5 ... 80 12 # 这也是一个通过使用命令输出 13 # 来产生"for"循环中[list]列表的例子. 14 15 echo; echo 16 17 18 COUNT=80 # 当然, 'seq'也可以使用一个可替换的参数. 19 20 for a in `seq $COUNT` # 或者 for a in $( seq $COUNT ) 21 do 22 echo -n "$a " 23 done # 1 2 3 4 5 ... 80 24 25 echo; echo 26 27 BEGIN=75 28 END=80 29 30 for a in `seq $BEGIN $END` 31 # 传给"seq"两个参数, 从第一个参数开始增长, 32 #+ 一直增长到第二个参数为止. 33 do 34 echo -n "$a " 35 done # 75 76 77 78 79 80 36 37 echo; echo 38 39 BEGIN=45 40 INTERVAL=5 41 END=80 42 43 for a in `seq $BEGIN $INTERVAL $END` 44 # 传给"seq"三个参数, 从第一个参数开始增长, 45 #+ 并以第二个参数作为增量, 46 #+ 一直增长到第三个参数为止. 47 do 48 echo -n "$a " 49 done # 45 50 55 60 65 70 75 80 50 51 echo; echo 52 53 exit 0
一个简单一些的例子:
1 # 产生10个连续扩展名的文件, 2 #+ 名字分别是 file.1, file.2 . . . file.10. 3 COUNT=10 4 PREFIX=file 5 6 for filename in `seq $COUNT` 7 do 8 touch $PREFIX.$filename 9 # 或者, 你可以做一些其他的操作, 10 #+ 比如rm, grep, 等等. 11 done
例子 12-50. 字母统计
1 #!/bin/bash 2 # letter-count.sh: 统计一个文本文件中某些字母出现的次数. 3 # 由Stefano Palmeri所编写. 4 # 经过授权可以使用在本书中. 5 # 本书作者做了少许修改. 6 7 MINARGS=2 # 本脚本至少需要2个参数. 8 E_BADARGS=65 9 FILE=$1 10 11 let LETTERS=$#-1 # 指定了多少个字母(作为命令行参数). 12 # (从命令行参数的个数中减1.) 13 14 15 show_help(){ 16 echo 17 echo Usage: `basename $0` file letters 18 echo Note: `basename $0` arguments are case sensitive. 19 echo Example: `basename $0` foobar.txt G n U L i N U x. 20 echo 21 } 22 23 # 检查参数个数. 24 if [ $# -lt $MINARGS ]; then 25 echo 26 echo "Not enough arguments." 27 echo 28 show_help 29 exit $E_BADARGS 30 fi 31 32 33 # 检查文件是否存在. 34 if [ ! -f $FILE ]; then 35 echo "File \"$FILE\" does not exist." 36 exit $E_BADARGS 37 fi 38 39 40 41 # 统计字母出现的次数. 42 for n in `seq $LETTERS`; do 43 shift 44 if [[ `echo -n "$1" | wc -c` -eq 1 ]]; then # 检查参数. 45 echo "$1" -\> `cat $FILE | tr -cd "$1" | wc -c` # 统计. 46 else 47 echo "$1 is not a single char." 48 fi 49 done 50 51 exit $? 52 53 # 这个脚本在功能上与letter-count2.sh完全相同, 54 #+ 但是运行得更快. 55 # 为什么?- getopt
getopt命令将会分析以破折号开头的命令行选项. 这个外部命令与Bash的内建命令getopts作用相同. 通过使用
-l标志, getopt可以处理超长(多个字符的)选项, 并且也允许参数重置.例子 12-51. 使用getopt来分析命令行选项
1 #!/bin/bash 2 # 使用getopt. 3 4 # 尝试使用下边的不同的方法来调用这脚本: 5 # sh ex33a.sh -a 6 # sh ex33a.sh -abc 7 # sh ex33a.sh -a -b -c 8 # sh ex33a.sh -d 9 # sh ex33a.sh -dXYZ 10 # sh ex33a.sh -d XYZ 11 # sh ex33a.sh -abcd 12 # sh ex33a.sh -abcdZ 13 # sh ex33a.sh -z 14 # sh ex33a.sh a 15 # 解释上面每一次调用的结果. 16 17 E_OPTERR=65 18 19 if [ "$#" -eq 0 ] 20 then # 脚本需要至少一个命令行参数. 21 echo "Usage $0 -[options a,b,c]" 22 exit $E_OPTERR 23 fi 24 25 set -- `getopt "abcd:" "$@"` 26 # 为命令行参数设置位置参数. 27 # 如果使用"$*"来代替"$@"的话, 会发生什么? 28 29 while [ ! -z "$1" ] 30 do 31 case "$1" in 32 -a) echo "Option \"a\"";; 33 -b) echo "Option \"b\"";; 34 -c) echo "Option \"c\"";; 35 -d) echo "Option \"d\" $2";; 36 *) break;; 37 esac 38 39 shift 40 done 41 42 # 通常来说在脚本中使用内建的'getopts'命令, 43 #+ 会比使用'getopt'好一些. 44 # 参考"ex33.sh". 45 46 exit 0
请参考例子 9-13, 这是对getopt命令的一个简单模拟.
- run-parts
run-parts命令 [1] 将会执行目标目录中所有的脚本, 这些脚本会以ASCII码的循序进行排列. 当然, 这些脚本都需要具有可执行权限.
- yes
yes命令的默认行为是向stdout连续不断的输出字符y, 每个y单独占一行. 可以使用control-c来结束输出. 如果想换一个输出字符的话, 可以使用yes different string, 这样就会连续不断的输出different string到stdout. 那么这样的命令究竟能用来做什么呢? 在命令行或者脚本中, yes的输出可以通过重定向或管道来传递给一些命令, 这些命令的特点是需要用户输入来进行交互. 事实上, 这个命令可以说是expect命令(译者注: 这个命令本书未介绍, 一个自动实现交互的命令)的一个简化版本.
yes | fsck /dev/hda1将会以非交互的形式运行fsck(译者注: 因为需要用户输入的y全由yes命令搞定了)(小心使用!).
yes | rm -r dirname 与 rm -rf dirname 效果相同(小心使用!).
yes命令也可用来分析变量. 比如:
bash$ yes $BASH_VERSION 3.00.16(1)-release 3.00.16(1)-release 3.00.16(1)-release 3.00.16(1)-release 3.00.16(1)-release . . .
这个"特性"估计也不会特别有用.
- banner
将会把传递进来的参数字符串用一个ASCII字符(默认是'#')给画出来(就是将多个'#'拼出一副字符的图形), 然后输出到stdout. 可以作为硬拷贝重定向到打印机上. (译者注: 可以使用-w 选项设置宽度.)
- printenv
显示某个特定用户所有的环境变量.
bash$ printenv | grep HOME HOME=/home/bozo
- lp
lp和lpr命令将会把文件发送到打印队列中, 并且作为硬拷贝来打印. [2] 这些命令会记录它们名字的起点, 直到行打印机的另一个阶段.
bash$ lp file1.txt 或者 bash$ lp <file1.txt
通常情况下都是将pr的格式化输出传递到lp中.
bash$ pr -options file1.txt | lp
格式化的包, 比如groff和Ghostscript就可以将它们的输出直接发送给lp.
bash$ groff -Tascii file.tr | lp
bash$ gs -options | lp file.ps
还有一些相关的命令, 比如lpq, 可以用来查看打印队列, 而lprm, 可以从打印队列中删除作业.
- tee
[这是UNIX从管道行业借来的主意.]
这是一个重定向操作, 但是与之前所看到的有点不同. 就像管道中的"三通"一样, 这个命令可以将命令或者管道命令的输出"抽出"到一个文件中, 而且不影响结果. 当你想将一个运行中进程的输出保存到文件时, 或者为了debug而保存输出记录的时候, 这个命令就显得非常有用了.
(重定向) |----> 到文件 | ==========================|==================== 命令 ---> 命令 ---> |tee ---> 命令 ---> ---> 管道的输出 ===============================================
(在对排序的结果进行uniq(去掉重复行)之前, 文件check.file保存了排过序的"listfiles". )1 cat listfile* | sort | tee check.file | uniq > result.file
- mkfifo
这个不大引人注意的命令可以创建一个命名管道, 并产生一个临时的先进先出的buffer, 用来在两个进程之间传递数据. [3] 典型的应用是一个进程向FIFO中写数据, 另一个进程读出来. 请参考例子 A-15.
- pathchk
这个命令用来检查文件名的有效性. 如果文件名超过了最大允许长度(255个字符), 或者它所在的一个或多个路径搜索不到, 那么就会产生一个错误结果.
不幸的是, pathchk并不能够返回一个可识别的错误码, 因此它在脚本中几乎没有什么用. 可以考虑使用文件测试操作来替代这个命令.
- dd
这也是一个不太出名的工具, 但却是一个令人恐惧的"数据复制"命令. 最开始, 这个命令被用来在UNIX微机和IBM大型机之间通过磁带来交换数据, 这个命令现在仍然有它的用途. dd命令只不过是简单的拷贝一个文件(或者stdin/stdout), 但是它会做一些转换. 下边是一些可能的转换, 比如 ASCII/EBCDIC, [4] 大写/小写, 在输入和输出之间的字节对的交换, 还有对输入文件做一些截头去尾的工作. dd --help列出了所有转换, 还列出了这个强大工具的其他一些选项.
1 # 将一个文件转换为大写: 2 3 dd if=$filename conv=ucase > $filename.uppercase 4 # lcase # 转换为小写
例子 12-52. 一个拷贝自身的脚本
1 #!/bin/bash 2 # self-copy.sh 3 4 # 这个脚本会拷贝自身. 5 6 file_subscript=copy 7 8 dd if=$0 of=$0.$file_subscript 2>/dev/null 9 # 阻止dd产生的消息: ^^^^^^^^^^^ 10 11 exit $?
例子 12-53. 练习dd
1 #!/bin/bash 2 # exercising-dd.sh 3 4 # 由Stephane Chazelas编写. 5 # 本文作者做了少量修改. 6 7 input_file=$0 # 脚本自身. 8 output_file=log.txt 9 n=3 10 p=5 11 12 dd if=$input_file of=$output_file bs=1 skip=$((n-1)) count=$((p-n+1)) 2> /dev/null 13 # 从脚本中把位置n到p的字符提取出来. 14 15 # ------------------------------------------------------- 16 17 echo -n "hello world" | dd cbs=1 conv=unblock 2> /dev/null 18 # 垂直地echo "hello world". 19 20 exit 0
为了展示dd的多种用途, 让我们使用它来记录按键.
例子 12-54. 记录按键
1 #!/bin/bash 2 # dd-keypress.sh: 记录按键, 不需要按回车. 3 4 5 keypresses=4 # 记录按键的个数. 6 7 8 old_tty_setting=$(stty -g) # 保存旧的终端设置. 9 10 echo "Press $keypresses keys." 11 stty -icanon -echo # 禁用标准模式. 12 # 禁用本地echo. 13 keys=$(dd bs=1 count=$keypresses 2> /dev/null) 14 # 如果不指定输入文件的话, 'dd'使用标准输入. 15 16 stty "$old_tty_setting" # 恢复旧的终端设置. 17 18 echo "You pressed the \"$keys\" keys." 19 20 # 感谢Stephane Chazelas, 演示了这种方法. 21 exit 0
dd命令可以在数据流上做随机访问.
1 echo -n . | dd bs=1 seek=4 of=file conv=notrunc 2 # "conv=notrunc"选项意味着输出文件不能被截短. 3 4 # 感谢, S.C.
dd命令可以将数据或磁盘镜像拷贝到设备中, 也可以从设备中拷贝数据或磁盘镜像, 比如说磁盘或磁带设备都可以(例子 A-5). 通常用来创建启动磁盘.
dd if=kernel-image of=/dev/fd0H1440
同样的, dd可以拷贝软盘的整个内容(甚至是"其他"操作系统的磁盘格式), 到硬盘驱动器上(以镜像文件的形式).
dd if=/dev/fd0 of=/home/bozo/projects/floppy.img
dd命令还有一些其他用途, 包括可以初始化临时交换文件(例子 28-2)和ramdisks(内存虚拟硬盘)(例子 28-3). 它甚至可以做一些对整个硬盘分区的底层拷贝, 虽然不建议这么做.
某些(可能是比较无聊的)人总会想一些关于dd命令的有趣应用.
例子 12-55. 安全的删除一个文件
1 #!/bin/bash 2 # blot-out.sh: 删除一个文件"所有"的记录. 3 4 # 这个脚本会使用随机字节交替的覆盖目标文件, 5 #+ 并且在最终删除这个文件之前清零. 6 # 这么做之后, 即使你通过传统手段来检查磁盘扇区 7 #+ 也不能把文件原始数据重新恢复. 8 9 PASSES=7 # 破坏文件的次数. 10 # 提高这个数字会减慢脚本运行的速度, 11 #+ 尤其是对尺寸比较大的目标文件进行操作的时候. 12 BLOCKSIZE=1 # 带有/dev/urandom的I/O需要单位块尺寸, 13 #+ 否则你可能会获得奇怪的结果. 14 E_BADARGS=70 # 不同的错误退出码. 15 E_NOT_FOUND=71 16 E_CHANGED_MIND=72 17 18 if [ -z "$1" ] # 没指定文件名. 19 then 20 echo "Usage: `basename $0` filename" 21 exit $E_BADARGS 22 fi 23 24 file=$1 25 26 if [ ! -e "$file" ] 27 then 28 echo "File \"$file\" not found." 29 exit $E_NOT_FOUND 30 fi 31 32 echo; echo -n "Are you absolutely sure you want to blot out \"$file\" (y/n)? " 33 read answer 34 case "$answer" in 35 [nN]) echo "Changed your mind, huh?" 36 exit $E_CHANGED_MIND 37 ;; 38 *) echo "Blotting out file \"$file\".";; 39 esac 40 41 42 flength=$(ls -l "$file" | awk '{print $5}') # 5是文件长度. 43 pass_count=1 44 45 chmod u+w "$file" # 允许覆盖/删除这个文件. 46 47 echo 48 49 while [ "$pass_count" -le "$PASSES" ] 50 do 51 echo "Pass #$pass_count" 52 sync # 刷新buffers. 53 dd if=/dev/urandom of=$file bs=$BLOCKSIZE count=$flength 54 # 使用随机字节进行填充. 55 sync # 再次刷新buffer. 56 dd if=/dev/zero of=$file bs=$BLOCKSIZE count=$flength 57 # 用0填充. 58 sync # 再次刷新buffer. 59 let "pass_count += 1" 60 echo 61 done 62 63 64 rm -f $file # 最后, 删除这个已经被破坏得不成样子的文件. 65 sync # 最后一次刷新buffer. 66 67 echo "File \"$file\" blotted out and deleted."; echo 68 69 70 exit 0 71 72 # 这是一种真正安全的删除文件的办法, 73 #+ 但是效率比较低, 运行比较慢. 74 # GNU文件工具包中的"shred"命令, 75 #+ 也可以完成相同的工作, 不过更有效率. 76 77 # 使用普通的方法是不可能重新恢复这个文件了. 78 # 然而 . . . 79 #+ 这个简单的例子是不能够抵抗 80 #+ 那些经验丰富并且正规的分析. 81 82 # 这个脚本可能不会很好的运行在日志文件系统上(JFS). 83 # 练习 (很难): 像它做的那样修正这个问题. 84 85 86 87 # Tom Vier的文件删除包可以更加彻底的删除文件, 88 #+ 比这个例子厉害的多. 89 # http://www.ibiblio.org/pub/Linux/utils/file/wipe-2.0.0.tar.bz2 90 91 # 如果想对安全删除文件这一论题进行深入的分析, 92 #+ 可以参见Peter Gutmann的网页, 93 #+ "Secure Deletion of Data From Magnetic and Solid-State Memory". 94 # http://www.cs.auckland.ac.nz/~pgut001/pubs/secure_del.html- od
od, 或者octal dump过滤器, 将会把输入(或文件)转换为8进制或者其他进制. 在你需要查看或处理一些二进制数据文件或者一个不可读的系统设备文件的时候, 这个命令非常有用, 比如/dev/urandom, 或者是一个二进制数据过滤器. 请参考例子 9-29和例子 12-13.
- hexdump
对二进制文件进行 16进制, 8进制, 10进制, 或者ASCII码的查阅动作. 这个命令大体上与上边的od命令的作用相同, 但是远没有od命令有用.
- objdump
显示编译后的二进制文件或二进制可执行文件的信息, 以16进制的形式显示, 或者显示反汇编列表(使用
-d选项).bash$ objdump -d /bin/ls /bin/ls: file format elf32-i386 Disassembly of section .init: 080490bc <.init>: 80490bc: 55 push %ebp 80490bd: 89 e5 mov %esp,%ebp . . .
- mcookie
这个命令会产生一个"magic cookie", 这是一个128-bit(32-字符)的伪随机16进制数字, 这个数字一般都用来作为X server的鉴权"签名". 这个命令还可以用来在脚本中作为一种生成随机数的手段, 当然这是一种"小吃店"(译者注: 虽然不太正统, 但是方便快捷)的风格.
1 random000=$(mcookie)
当然, 要想达到同样的目的还可以使用md5命令.
1 # 产生关于脚本自身的md5 checksum. 2 random001=`md5sum $0 | awk '{print $1}'` 3 # 使用 'awk' 来去掉文件名.mcookie命令还给出了另一种产生"唯一"文件名的方法.
例子 12-56. 文件名产生器
1 #!/bin/bash 2 # tempfile-name.sh: 临时文件名产生器 3 4 BASE_STR=`mcookie` # 32-字符的magic cookie. 5 POS=11 # 字符串中随便的一个位置. 6 LEN=5 # 取得$LEN长度连续的字符串. 7 8 prefix=temp # 最终的一个"临时"文件. 9 # 如果想让这个文件更加"唯一", 10 #+ 可以对这个前缀也采用下边的方法进行生成. 11 12 suffix=${BASE_STR:POS:LEN} 13 # 提取从第11个字符之后的长度为5的字符串. 14 15 temp_filename=$prefix.$suffix 16 # 构造文件名. 17 18 echo "Temp filename = "$temp_filename"" 19 20 # sh tempfile-name.sh 21 # Temp filename = temp.e19ea 22 23 # 与使用'date'命令(参考 ex51.sh)来创建"唯一"文件名 24 #+ 的方法相比较. 25 26 exit 0- units
这个工具用来在不同的计量单位之间互相转换. 当你在交互模式下正常调用时, 会发现在脚本中units命令也是非常有用的.
例子 12-57. 将长度单位-米, 转化为英里
1 #!/bin/bash 2 # unit-conversion.sh 3 4 5 convert_units () # 通过参数取得需要转换的单位. 6 { 7 cf=$(units "$1" "$2" | sed --silent -e '1p' | awk '{print $2}') 8 # 除了真正需要转换的部分保留下来外,其他的部分都去掉. 9 echo "$cf" 10 } 11 12 Unit1=miles 13 Unit2=meters 14 cfactor=`convert_units $Unit1 $Unit2` 15 quantity=3.73 16 17 result=$(echo $quantity*$cfactor | bc) 18 19 echo "There are $result $Unit2 in $quantity $Unit1." 20 21 # 如果你传递了两个不匹配的单位会发生什么? 22 #+ 比如分别传入"英亩"和"英里"? 23 24 exit 0- m4
一个隐藏的财宝, m4是一个强大的宏处理过滤器, [5] 差不多可以说是一种语言了. 虽然最开始这个工具是用来作为RatFor的预处理器而编写的, 但是后来证明m4即使作为独立的工具来使用也是非常有用的. 事实上, m4结合了许多工具的功能, 比如eval, tr, 和awk, 除此之外, 它还使得宏扩展变得更加容易.
在2004年4月的Linux Journal问题列表中有一篇关于m4命令用法的好文章.
- doexec
doexec命令允许将一个随便的参数列表传递到一个 二进制可执行文件中. 比较特殊的, 甚至可以传递
argv[0](相当于脚本中的$0), 这样就可以使用不同的名字来调用这个可执行文件, 并且通过不同的调用名字, 还可以让这个可执行文件执行不同的动作. 这也可以说是一种将参数传递到可执行文件中的比较绕圈子的做法.比如, /usr/local/bin目录可能包含一个"aaa"的二进制文件. 使用doexec /usr/local/bin/aaa list可以列出当前工作目录下所有以"a"开头的文件, 而使用doexec /usr/local/bin/aaa delete 将会删除这些文件.
可执行文件的不同行为必须定义在可执行文件自身的代码中, 可以使用如下的shell脚本来做类比:
1 case `basename $0` in 2 "name1" ) do_something;; 3 "name2" ) do_something_else;; 4 "name3" ) do_yet_another_thing;; 5 * ) bail_out;; 6 esac
- dialog
dialog工具集提供了一种从脚本中调用交互对话框的方法. dialog更好的变种版本是 -- gdialog, Xdialog, 和kdialog -- 事实上是调用X-Windows的界面工具集. 请参考例子 33-19.
- sox
sox命令, 也就是"sound exchange"命令, 可以进行声音文件的转换. 事实上, 可执行文件/usr/bin/play(现在不建议使用)只不过是sox的一个shell包装器而已.
举个例子, sox soundfile.wav soundfile.au将会把一个WAV文件转换成(Sun音频格式)AU声音文件.
Shell脚本非常适合于使用sox的声音操作来批处理声音文件. 比如, Linux Radio Timeshift HOWTO和MP3do Project.
