使用 awk 过滤文本或文件中的字符串

• 什么是正则表达式?03%
• -正则表达式的特色05%
• -如何在 Linux 中使用 awk 过滤工具22%
  • -一个使用 awk 的简单示例：23%
  • -结合模式使用 awk27%
  • -在 awk 模式中使用通配符 (.)32%
  • -在 awk 模式中使用字符 (*)37%
  • -结合集合 [ character(s) ] 使用 awk59%
  • -以范围的方式指定字符67%
  • -结合元字符 (^) 使用 awk75%
  • -结合元字符 ($) 使用 awk79%
  • -结合转义字符 (\) 使用 awk84%
• -总结92%

当咱们在 Unix/Linux 下使用特定的命令从字符串或文件中读取或编辑文本时，咱们常常须要过滤输出以获得感兴趣的部分。这时正则表达式就派上用场了。

什么是正则表达式?

正则表达式能够定义为表明若干个字符序列的字符串。它最重要的功能之一就是它容许你过滤一条命令或一个文件的输出、编辑文本或配置文件的一部分等等。

正则表达式的特色

正则表达式由如下内容组合而成：

• 普通字符，例如空格、下划线、A-Z、a-z、0-9。
• 能够扩展为普通字符的元字符，它们包括：
  • (.) 它匹配除了换行符外的任何单个字符。
  • (*) 它匹配零个或多个在其以前紧挨着的字符。
  • [ character(s) ] 它匹配任何由其中的字符/字符集指定的字符，你可使用连字符(-)表明字符区间，例如 [a-f]、[1-5]等。
  • ^ 它匹配文件中一行的开头。
  • $ 它匹配文件中一行的结尾。
  • \ 这是一个转义字符。

你必须使用相似 awk 这样的文本过滤工具来过滤文本。你还能够把 awk 自身看成一个编程语言。但因为这个指南的适用范围是关于使用 awk 的，我会按照一个简单的命令行过滤工具来介绍它。

awk 的通常语法以下：

1. # awk 'script' filename

此处 'script' 是一个由 awk 能够理解并应用于 filename 的命令集合。

它经过读取文件中的给定行，复制该行的内容并在该行上执行脚本的方式工做。这个过程会在该文件中的全部行上重复。

该脚本 'script' 中内容的格式是 '/pattern/ action'，其中 pattern 是一个正则表达式，而 action是当 awk 在该行中找到此模式时应当执行的动做。

如何在 Linux 中使用 awk 过滤工具

在下面的例子中，咱们将聚焦于以前讨论过的元字符。

一个使用 awk 的简单示例：

下面的例子打印文件 /etc/hosts 中的全部行，由于没有指定任何的模式。

1. # awk '//{print}' /etc/hosts

awk 打印文件中的全部行

结合模式使用 awk

在下面的示例中，指定了模式 localhost，所以 awk 将匹配文件 /etc/hosts 中有 localhost 的那些行。

1. # awk '/localhost/{print}' /etc/hosts

awk 打印文件中匹配模式的行

在 awk 模式中使用通配符 (.)

在下面的例子中，符号 (.) 将匹配包含 loc、localhost、localnet 的字符串。

这里的正则表达式的意思是匹配 l一个字符c。

1. # awk '/l.c/{print}' /etc/hosts

使用 awk 打印文件中匹配模式的字符串

在 awk 模式中使用字符 (*)

（LCTT 译者注：此处原文做者理解有误，感谢微信读者“止此而已”的提醒，* 在此处表示其前一个字符重复零次或屡次，因此实际上至关于 * 及前面的字符是无用的。）

在下面的例子中，将匹配包含 localhost、localnet、lines, capable 的字符串。将匹配带有 c 字符的字符串。

1. # awk '/l*c/{print}' /etc/localhost

使用 awk 匹配文件中的字符串

你可能也意识到 (*) 将会尝试匹配它可能检测到的最长的匹配。

让咱们看一看能够证实这一点的例子，正则表达式 t*t 的意思是在下面的行中匹配以 t 开始和 t 结束的字符串：将匹配带有 t 字符的字符串：

1. this is tecmint, where you get the best good tutorials, how to's, guides, tecmint.

当你使用模式 /t*t/ 时，会获得以下可能的结果：如下字符串只是有 t 字符而已：

1. this is t
2. this is tecmint
3. this is tecmint, where you get t
4. this is tecmint, where you get the best good t
5. this is tecmint, where you get the best good tutorials, how t
6. this is tecmint, where you get the best good tutorials, how tos, guides, t
7. this is tecmint, where you get the best good tutorials, how tos, guides, tecmint

在 /t*t/ 中的通配符 (*) 将使得 awk 选择匹配的最后一项：如下字符串只是有 t 字符而已：

1. this is tecmint, where you get the best good tutorials, how to's, guides, tecmint

结合集合 [ character(s) ] 使用 awk

以集合 [al1] 为例，awk 将匹配文件 /etc/hosts 中全部包含字符 a 或 l 或 1 的字符串。

1. # awk '/[al1]/{print}' /etc/hosts

使用 awk 打印文件中匹配的字符

下一个例子匹配以 K 或 k 开始（非指行首是该字母），后面跟着一个 T 的字符串：

1. # awk '/[Kk]T/{print}' /etc/hosts

使用 awk 打印文件中匹配的字符

以范围的方式指定字符

awk 所能理解的字符：

• [0-9] 表明一个单独的数字
• [a-z] 表明一个单独的小写字母
• [A-Z] 表明一个单独的大写字母
• [a-zA-Z] 表明一个单独的字母
• [a-zA-Z 0-9] 表明一个单独的字母或数字

让咱们看看下面的例子：

1. # awk '/[0-9]/{print}' /etc/hosts

使用 awk 打印文件中匹配的数字

在上面的例子中，文件 /etc/hosts 中的全部行都至少包含一个单独的数字 [0-9]。

结合元字符 (^) 使用 awk

在下面的例子中，它匹配全部以给定模式开头的行：

1. # awk '/^fe/{print}' /etc/hosts
2. # awk '/^ff/{print}' /etc/hosts

使用 awk 打印与模式匹配的行

结合元字符 ($) 使用 awk

它将匹配全部以给定模式结尾的行：

1. # awk '/ab$/{print}' /etc/hosts
2. # awk '/ost$/{print}' /etc/hosts
3. # awk '/rs$/{print}' /etc/hosts

使用 awk 打印与模式匹配的字符串

结合转义字符 (\) 使用 awk

它容许你将该转义字符后面的字符做为文字，即理解为其字面的意思。

在下面的例子中，第一个命令打印出文件中的全部行，第二个命令中我想匹配具备 $25.00 的一行，但我并未使用转义字符，于是没有打印出任何内容。

第三个命令是正确的，由于一个这里使用了一个转义字符以转义 $，以将其识别为 '$'（而非元字符）。

1. # awk '//{print}' deals.txt
2. # awk '/$25.00/{print}' deals.txt
3. # awk '/\$25.00/{print}' deals.txt

结合转义字符使用 awk

总结

以上内容并非 awk 命令用作过滤工具的所有，上述的示例均是 awk 的基础操做。