Linux--shell的awk--10

1、awk介绍

全称：由Aho Weinberger Kernaighan三我的的首字母组合而成

1970年第一次出如今Unix机器上，后来在开源领域使用它

awk是一种单独的编程语言解释器

awk报告生成器：经过模式匹配以及本身自己的语言格式，来获取并输出客户所须要的内容

示例：获取系统上面用户id大于1小于等于500的用户的用户名和用户ID

awk -F: '{if($3>=1&&<=500){print $1,$3}}' /etc/passwd

2、awk工做原理

一、依次把匹配到的行，使用awk工具进行编辑

二、$0表示整行，$1表明第一个…，$NF表明最后一个

三、pattern；经过模式匹配对应的字段过滤行；

四、经过对应的命令 printf 作格式化输出

3、awk用法

awk [option] … 'program' FILE

注意：

一、program 必须使用单引号

二、多条program语句使用大括号包含起来，能够并列、嵌套    

awk '{print}' /etc/passwd   #默认打印$0

4、awk常见选项（option）

-F  指定分隔符，默认是空格

　　-F[:\] 指定多个分隔符

例： awk -F[:\] '{print $3,$5,$7}' /etc/passwd   指定 : 和 / 为分隔符

-v  手动指定变量参数

awk -v a="a/b" 'print a' a.txt

　　一、a是自定义变量

　　二、在awk中调用变量不用加$符号

cut与awk的区别

　　awk 以空格为分割域时，是以单个或多个连续的空格为分隔符的；

cut则是以单个空格做为分隔符。

5、awk的语法格式----program

一、print

默认输出（在屏幕上）

在awk中没有保存命令，咱们能够关联其余命令（tee）来保存

二、printf  实现格式化输出

输出格式：printf  "xxx %-10s xxx %-10d ",name,num

格式符：

　　%s   显示字符串

　　%d %i  显示数值

　　%c   显示ASCII

　　%e %E 科学计算方式

　　%f    显示浮点数

　　%u  无符号整数

　　%%   逃逸符，只显示%本身

修饰符：

　　默认为右对齐

　　-        表明左对齐

　　　　%5.4f  表明占位数为5，小数位有4位  

三、变量

内置变量----环境变量（bash）

　　awk语言所默认支持的变量

　　FS   定义输入分隔符的变量

　　OFS  定义输出分隔符的变量

　　NF($NF) 分割之后的最后一列的变量，变量引用的时候不用加$

　　NR  定义文件的行数，定义多个文件的时候，行号叠加

　　FNR 定义文件行数时，只计算本身的行号

　　FILENAME  存储文件名字

　　BEGIN  只执行一次后面的命令

awk 'BEGIN{print "xxx"}{print$3}' /etc/passwd

　　ARGC  整个 命令参数 的段数  不包含ARGC命令自己

　　ARGV  用来调取命令中指定的段

awk '{print ARGC}' /etc/passwd       ==  2
awk '{print ARGV[2]}' /etc/passwd    == /etc/passwd

　　RS  指定换行符，默认为\n，能够指定新的换行符，不影响默认符号

　　ORS  输出时替换默认换行符

awk -v ORS="@" '{print}' /etc/passwd

　　自定义变量

　　　　-v 变量=值

在后面’program’中去调用自定义变量时，直接使用便可或者将”变量=值”语句写到program便可

四、模式匹配（地址定界）

a) 空值，没有定义，默认就将文件中全部行放入awk中进行循环

b) 对m~n行进行操做

awk 'NR>=1&&NR<=3{print}' /etc/passwd     打印1到3行

c) pattern匹配的行 /pattern/

awk '/r..t/{print}' /etc/passwd

d) /pattern1/,/pattern2/ 第一次pattern1到第一次匹配pattern2的行

awk '/root/,/user1/{print}' /etc/passwd

练习：判断/patern1/,/pattern2/之间行的用户是bash用户，并显示用户名

awk -F: '/^root/,/user1/{if($NF=="/bin/bash");print $1,$3}' /etc/passwd

e) 模式匹配能够直接使用判断语句

awk -F: '$NF=="/bin/bash"{print $1 $3}' /etc/passwd

f) BEGIN定义在默认循环进行操做前所要执行的语句

awk -F: 'BEGIN{printf "shell程序为bash:\n"}$NF=="/bin/bash"{print $1,$3}' /etc/passwd

g) END 定义在循环结束后执行

awk -F: $NF=="/bin/bash"{print $1,$3} 'END{printf "end\n"}' /etc/passwd

五、操做符

运算操做符

　　+  -  *  /  %  ^(乘方)  //

比较运算符

　　>  <  ==  !=  >=  <=  ~(等于)  !~

awk -F: '-FS~"/bin/bash" {print $1，$3}' /etc/passwd

逻辑操做符

　　&&  ||  !

赋值操做符

　　=  +=  -=  /=  *=  %=  ^=  //=

条件表达式

　　条件语句? 条件成立语句;条件不成立语句

awk '/^title/{NF<=2? print; print "参数过少"}' /boot/grub/grub.conf

六、常见action

　　print printf 以及它任何命令的操做都是action

a) expressions

b) input statements输入语句

c) 组合语句 compound statements /pat1/{{ }{ }}

d) control statements 控制语句 例如 if  while等

e) output statements 输出语句

七、常见语言

a) if语句

　　语法格式：if(条件表达式){执行语句} else {执行语句}

awk '/^title/{if(NF<=2){print} else {print "error"}}' /boot/grub/grub.conf

b) while语句

　　只有对行参数进行遍历的时候才使用while语句

　　语法格式：初始值 while(条件表达式){循环体;初始控制语句}

c) for语句

　　语法格式：for(初始值;条件判断;初始值控制语句){循环体}

d) do-while语句

　　语法格式：do {循环体} while (循环条件)

e) 跳出循环语句

　　break [n]  跳出n次循环

　　continue  跳出本次循环

　　next      跳出默认的当前循环  NR%2==1 next 跳过奇数行

awk '{if(NR%2==1){next}else{print}}' /etc/passwd

f) switch语句（相似case）

　　语法格式：switch(表达式){case 模式匹配值:执行语句;case …,default:执行语句}

八、数组

在awk中，数组和shell中的数组特性相同

注意：awk中数组不用定义，只要使用，就有值为空的默认数组

行遍历：整个文件进行遍历

列遍历：取对象的某一列进行遍历

注意：数组经过for语句，再给其余变量进行赋值时，赋的是索引信息

练习：统计/etc/fstab中每一个单词（以空格隔开的词）的次数

awk -v RS=" " '{print}' /etc/fstab | awk '{a[$1]++}END{for(i in a){printf "%-50s = %-2d\n",i,a[i]}}'

九、函数

内置函数：

　　length()  统计字符串长度

　　　　数学上使用的函数 sin() cos() tan() …

　　sub(x,x,x)  替换第一个匹配到的值

awk -F: '{print sub(o,O,$1) }' /etc/passw第一列第一个o替换为O

　　gsub(x,x,x)  替换该行全部匹配到的全部值

awk -F: '{print gsub(o,O,$1) }' /etc/passwd第一列全部o替换为O

　　split(x,x,x)  指定分隔符去切割文件

netstat -tan | awk '/^tcp\>/{split($5,ip,":");print ip[1]}'

原文出处：https://www.cnblogs.com/gxnihao/p/11419882.html