《linuxawk完全手册》由会员分享，可在线阅读，更多相关《linuxawk完全手册（15页珍藏版）》请在金锄头文库上搜索。
1、1.什么是 awk?你可能对UNIX比较熟悉，但你可能对awk很陌生，这一点也不奇怪，的 确，与其优秀的功能相比，awk还远没达到它应有的知名度。awk是什么？与其 它大多数UNIX命令不同的是，从名字上看，我们不可能知道awk的功能：它既不是具有独立意义的英文单词，也不是几个相关单词的缩写。事实上， awk 是三个人名的缩写，他们是：Aho、(Peter) Weinberg 和(Brain)Kernighan。正是这三个人创造了 awk-一个 优秀的样式扫描与处理工具。AWK的功能是什么？与sed和grep很相似，awk是一种样式扫描与处理工 具。但其功能却大大强于sed和grep。awk提
2、供了极其强大的功能：它几乎可以完成grep和sed所能完成的全部工作，同时，它还可以进行样式装入、流控制、数学运算符、进程控制语句甚至于内置的变量和函数。它具备了一个完整的语言所应具有的几乎所有精美特性。实际上， awk 的确拥有自 己的语言：awk 程序设计语言， awk 的三位创建者已将它正式定义为：样式扫描和处理语言。2 .为什么使用awk?即使如此，你也许仍然会问，我为什么要使用 awk?使用 awk 的第一个理由是基于文本的样式扫描和处理是我们经常做的工作， awk 所做的工作有些象数据库，但与数据库不同的是，它处理的是文本文件，这些文件没有专门的存储格式，普通的人们就能编辑、阅读、
3、理解和处理它们。而数据库文件往往具有特殊的存储格式，这使得它们必须用数据库处理程序来处理它们。既然这种类似于数据库的处理工作我们经常会遇到，我们就应当找到处理它们的简便易行的方法，UNIX有很多这方面的工具，例如sed、grep、 sort 以及 find 等等， awk 是其中十分优秀的一种。使用 awk 的第二个理由是awk 是一个简单的工具，当然这是相对于其强大的功能来说的。的确，UNIX有许多优秀的工具，例如UNIX天然的开发工具C 语言及其延续C+琳非常的优秀。但相对于它们来说，awk完成同样的功能要方 便和简捷得多。这首先是因为 awk 提供了适应多种需要的解决方案：从解决简单问题
4、的 awk 命令行到复杂而精巧的 awk 程序设计语言，这样做的好处是，你可以不必用复杂的方法去解决本来很简单的问题。例如，你可以用一个命令行解决简单的问题，而 C不行，即使一个再简单的程序，C语言也必须经过编写、编译的全过程。其次， awk 本身是解释执行的，这就使得 awk程序不必经过编译的过程，同时，这也使得它与shell script 程序能够很好的契合。最后，awk本身较C语言简单，虽然awk吸收了 C语言很多优秀的成分， 熟悉C语言会对学习awk有很大的帮助，但awk本身不须要会使用C语言一一 一种功能强大但需要大量时间学习才能掌握其技巧的开发工具。使用awk的第三个理由是awk是
5、一个容易获得的工具。与 C和C+畸言不 同，awk只有一个文件（/bin/awk）,而且几乎每个版本的UNIX都提供各自版本的 awk,你完全不必费心去想如何获得 awk。但C语言却不是这样，虽然 C语言是UNIX天然的开发工具，但这个开发工 具却是单独发行的，换言之，你必须为你的 UNIX版本的C语言开发工具单独付 费（当然使用 D 版者除外），获得并安装它，然后你才可以使用它。基于以上理由，再加上文本样式扫描相关的工作，awk 强大的功能，我们有理由说，如果你要处理与 awk 应该是你的第一选择。在这里有一个可遵循的般原则:如果你用普通的shell工具或shell script有困难的1试
6、试awk,如果awk仍 不能解决问题，则便用C语言，如果C语言仍然失败，则移至C+。3 .awk 的调用方式前面曾经说过， awk 提供了适应多种需要的不同解决方案，它们是：一、awk命令行，你可以象使用普通 UNIX命令一样使用awk,在命令行中 你也可以使用 awk 程序设计语言，虽然awk 支持多行的录入，但是录入长长的命令行并保证其正确无误却是一件令人头疼的事，因此，这种方法一般只用于解决简单的问题。当然，你也可以在shell script程序中引用awk命令行甚至awk 程序脚本。二、使用 -f 选项调用 awk 程序。 awk 允许将一段awk 程序写入一个文本文件，然后在awk
7、命令行中用 -f 选项调用并执行这段程序。具体的方法我们将在后面的 awk 语法中讲到。三、利用命令解释器调用 awk 程序：利用UNIX支持的命令解释器功能，我们可以将一段awk程序写入文本文件，然后在它的第一行加上:#!/bin/awk -f并赋予这个文本文件以执行的权限。这样做之后，你就可以在命令行中用类似于下面这样的方式调用并执行这段awk 程序了。awk 脚本文本名待处理文件4 .awk 的语法：与其它UNIX命令一样，awk拥有自己的语法：awk -F re parameter. prog -f progfilein_file.参数说明：-F re:允许 awk 更改其字段分隔符。
8、parameter:该参数帮助为不同的变量赋值。prog:awk 的程序语句段。这个语句段必须用单拓号： 和 括起，以防被shell 解释。这个程序语句段的标准形式为：pattern action其中 pattern 参数可以是egrep 正则表达式中的任何一个，它可以使用语法/re/ 再加上一些样式匹配技巧构成。与sed 类似，你也可以使用 ,分开两样式以选择某个范围。关于匹配的细节，你可以参考附录，如果仍不懂的话，找本UNIX书学学grep和sed （本人是在学习ed时掌握匹配技术的）。action参数总 是被大括号包围，它由一系统 awk语句组成，各语句之间用分隔。awk解释 它们，并在
9、pattern 给定的样式匹配的记录上执行其操作。与 shell 类似，你也可以使用“ #作为注释符，它使”“ #到行尾的内容成为注释，在解释执行时，它们”将被忽略。你可以省略 pattern 和 action 之一，但不能两者同时省略，当省略 pattern 时没有样式匹配，表示对所有行（记录）均执行操作，省略action 时执行缺省的操作 在标准输出上显示。-f progfile:允许 awk 调用并执行progfile 指定有程序文件。 progfile 是一个文本文件，他必须符合awk 的语法。in_file:awk 的输入文件， awk 允许对多个输入文件进行处理。值得注意的是awk
10、不修改输入文件。如果未指定输入文件， awk 将接受标准输入，并将结果显示 在标准输出上。 awk 支持输入输出重定向。5 .awk 的记录、字段与内置变量：前面说过， awk 处理的工作与数据库的处理方式有相同之处，其相同处之 一就是awk支持对记录和字段的处理，其中对字段的处理是grep和sed不能实现的，这也是awk 优于二者的原因之一。在awk 中，缺省的情况下总是将文本文件中的一行视为一个记录，而将一行中的某一部分作为记录中的一个字段。 为了操作这些不同的字段， awk 借用 shell 的方法，用 1,2,3这样的方式来顺序地表示行（记录）中的不同字段。特殊地， awk用0 表示整
11、个行（记录）。不同的字段之间是用称作分隔符的字符分隔开的。系统默认的分隔符是空格。 awk 允许在命令行中用 -F re 的形式来改变这个分隔符。事实上，awk用一个内置的变量FS来记忆这个分隔符。awk中有好几个这样的 内置变量，例如，记录分隔符变量 RS当前工作的记录数NR等等，本文后面 的附表列出了全部的内置变量。这些内置的变量可以在awk 程序中引用或修改，例如，你可以利用NR变量在模式匹配中指定工作范围，也可以通过修改记 录分隔符RS让一个特殊字符而不是换行符作为记录的分隔符。例:显示文本文件myfile 中第七行到第十五行中以字符%分隔的第一字段，第三字段和第七字段：awk -F
12、% NR=7,NR=15 printf 1 3 76 .awk 的内置函数awk 之所以成为一种优秀的程序设计语言的原因之一是它吸收了某些优秀的程序设计语言（例如C）语言的许多优点。这些优点之一就是内置函数的使用， awk 定义并支持了一系列的内置函数，由于这些函数的使用，使得awk 提供的功能更为完善和强大，例如， awk 使用了一系列的字符串处理内置函数（这些函数看起来与C语言的字符串处理函数相似，其使用方式与C语言中的函数也相差无几），正是由于这些内置函数的使用，使awk 处理字符串的功能更加强大。本文后面的附录中列有一般的 awk 所提供的内置函数，这些内置函数也许与你的 awk 版本
13、有些出入，因此，在使用之前，最好参考一下你的系统中的联机帮助。作为内置函数的一个例子，我们将在这里介绍 awk 的 printf 函数，这个函数使得 awk 与 c 语言的输出相一致。实际上， awk 中有许多引用形式都是从C语言借用过来的。如果你熟悉 C语言，你也许会记得其中的printf函数，它提供的强大格式输出功能曾经带我们许多的方便。幸运的是，我们在awk 中又和它重逢了。awk中printf几乎与C语言中一模一样，如果你熟悉 C语言的话，你完 全可以照C语言的模式使用awk中的printf。因此在这里，我们只给出一个例 子，如果你不熟悉的话，请随便找一本C语言的入门书翻翻。例:显示文
14、件 myfile 中的行号和第 3 字段：awk printf%03d%sn,NR,1 myfile7 .在命令行使用awk按照顺序，我们应当讲解awk 程序设计的内容了，但在讲解之前，我们将用一些例子来对前面的知识进行回顾，这些例子都是在命令行中使用的，由此我们可以知道在命令行中使用 awk 是多么的方便。这样做的原因一方面是为下面的内容作铺垫，另一方面是介绍一些解决简单问题的方法，我们完全没有必要用复杂的方法来解决简单的问题既然 awk 提供了较为简单的方法的话。例：显示文本文件mydoc 匹配（含有）字符串 sun 的所有行。awk /sun/print mydoc由于显示整个记录（全行
15、）是awk 的缺省动作，因此可以省略action 项。awk /sun/ mydoc例：下面是一个较为复杂的匹配的示例：awk /Ssun/,/Mmoon/ print myfile它将显示第一个匹配 Sun或sun的行与第一个匹配 Moon或moon的行之间 的行，并显示到标准输出上。例：下面的示例显示了内置变量和内置函数length （）的使用：awk length（0）80 print NR myfile该命令行将显示文本myfile 中所有超过80 个字符的行号，在这里，用 0 表示整个记录（行），同时，内置变量NR不使用标志符”。例：作为一个较为实际的例子，我们假设要对UNIX 中的用户进行安全性检查，方法是考察/etc下的passwd文件，检查其中的passwd字段（第二字段）是否 为* ，如不为 * ，则表示该用户没有设置密码，显示出这些用户名（第一字段）。我们可以用如下语句实现：#awk -F:2=
