在 awk 系列的第八节,我们介绍了一些强大的 awk 命令功能,它们是变量、数字表达式和赋值运算符。
本节我们将学习更多的 awk 功能,即 awk 的特殊模式:BEGIN 和 END。
随着我们逐渐展开,并探索出更多构建复杂 awk 操作的方法,将会证明 awk 的这些特殊功能的是多么强大。
开始前,先让我们回顾一下 awk 系列的介绍,记得当我们开始这个系列时,我就指出 awk 指令的通用语法是这样的:
- # awk 'script' filenames
在上述语法中,awk 脚本拥有这样的形式:
- /pattern/ { actions }
你通常会发现脚本中的模式(/pattern/)是一个正则表达式,此外,你也可以在这里用特殊模式 BEGIN 和 END。因此,我们也能按照下面的形式编写一条 awk 命令:
- awk '
- BEGIN { actions }
- /pattern/ { actions }
- /pattern/ { actions }
- ……….
- END { actions }
- ' filenames
假如你在 awk 脚本中使用了特殊模式:BEGIN 和 END,以下则是它们对应的含义:
- BEGIN 模式:是指 awk 将在读取任何输入行之前立即执行 BEGIN 中指定的动作。
- END 模式:是指 awk 将在它正式退出前执行 END 中指定的动作。
含有这些特殊模式的 awk 命令脚本的执行流程如下:
- 当在脚本中使用了 BEGIN 模式,则 BEGIN 中所有的动作都会在读取任何输入行之前执行。
- 然后,读入一个输入行并解析成不同的段。
- 接下来,每一条指定的非特殊模式都会和输入行进行比较匹配,当匹配成功后,就会执行模式对应的动作。对所有你指定的模式重复此执行该步骤。
- 再接下来,对于所有输入行重复执行步骤 2 和 步骤 3。
- 当读取并处理完所有输入行后,假如你指定了 END 模式,那么将会执行相应的动作。
当你使用特殊模式时,想要在 awk 操作中获得***的结果,你应当记住上面的执行顺序。
为了便于理解,让我们使用第八节的例子进行演示,那个例子是关于 Tecmint 拥有的域名列表,并保存在一个叫做 domains.txt 的文件中。
- news.tecmint.com
- tecmint.com
- linuxsay.com
- windows.tecmint.com
- tecmint.com
- news.tecmint.com
- tecmint.com
- linuxsay.com
- tecmint.com
- news.tecmint.com
- tecmint.com
- linuxsay.com
- windows.tecmint.com
- tecmint.com
- $ cat ~/domains.txt
查看文件内容在这个例子中,我们希望统计出 domains.txt 文件中域名 tecmint.com 出现的次数。所以,我们编写了一个简单的 shell 脚本帮助我们完成任务,它使用了变量、数学表达式和赋值运算符的思想,脚本内容如下:
- #!/bin/bash
- for file in $@; do
- if [ -f $file ] ; then
- ### 输出文件名
- echo "File is: $file"
- ### 输出一个递增的数字记录包含 tecmint.com 的行数
- awk '/^tecmint.com/ { counter+=1 ; printf "%s\n", counter ; }' $file
- else
- ### 若输入不是文件,则输出错误信息
- echo "$file 不是一个文件,请指定一个文件。" >&2 && exit 1
- fi
- done
- ### 成功执行后使用退出代码 0 终止脚本
- exit 0
现在让我们像下面这样在上述脚本的 awk 命令中应用这两个特殊模式:BEGIN 和 END:
我们应当把脚本:
- awk '/^tecmint.com/ { counter+=1 ; printf "%s\n", counter ; }' $file
改成:
- awk ' BEGIN { print "文件中出现 tecmint.com 的次数是:" ; }
- /^tecmint.com/ { counter+=1 ; }
- END { printf "%s\n", counter ; }
- ' $file
在修改了 awk 命令之后,现在完整的 shell 脚本就像下面这样:
- #!/bin/bash
- for file in $@; do
- if [ -f $file ] ; then
- ### 输出文件名
- echo "File is: $file"
- ### 输出文件中 tecmint.com 出现的总次数
- awk ' BEGIN { print "文件中出现 tecmint.com 的次数是:" ; }
- /^tecmint.com/ { counter+=1 ; }
- END { printf "%s\n", counter ; }
- ' $file
- else
- ### 若输入不是文件,则输出错误信息
- echo "$file 不是一个文件,请指定一个文件。" >&2 && exit 1
- fi
- done
- ### 成功执行后使用退出代码 0 终止脚本
- exit 0
awk 模式 BEGIN 和 END当我们运行上面的脚本时,它会首先输出 domains.txt 文件的位置,然后执行 awk 命令脚本,该命令脚本中的特殊模式 BEGIN将会在从文件读取任何行之前帮助我们输出这样的消息“文件中出现 tecmint.com 的次数是:”。
接下来,我们的模式 /^tecmint.com/ 会在每个输入行中进行比较,对应的动作 { counter+=1 ; } 会在每个匹配成功的行上执行,它会统计出 tecmint.com 在文件中出现的次数。
最终,END 模式将会输出域名 tecmint.com 在文件中出现的总次数。
- $ ./script.sh ~/domains.txt
用于统计字符串出现次数的脚本***总结一下,我们在本节中演示了更多的 awk 功能,并学习了特殊模式 BEGIN 和 END 的概念。
正如我之前所言,这些 awk 功能将会帮助我们构建出更复杂的文本过滤操作。第十节将会给出更多的 awk 功能,我们将会学习 awk 内置变量的思想,所以,请继续保持关注。