目录

AWK概述

awk工作原理

他和sed的区别

AWK命令的格式

例：

awk常用内置变量：$1、$2、NF、NR、$0

案例

 BEGIN和END的用法与区别

​编辑 awk高级用法

​编辑 awk中使用if语句 

总结 

AWK概述

awk是一种处理文本文件的语言，是一个强大的文本分析工具。awk是一种处理文本文件的语言，是一个强大的文本分析工具。
它是专门为文本处理设计的编程语言，也是行处理软件，通常用于扫描、过滤、统计汇总工作数据可以来白标准输入也可以是管道或文件
20世纪70年代诞生于贝尔实验室，现在centos7用的是gawk

可以在无交互的模式下实现复杂的文本操作；数据可以来自标准输入也可以是管道或文件

相较于sed常作用于一整个行的处理，awk则比较倾向于一行当中分成数个字段来处理，因为awk相当适合小型的文本数据。

awk工作原理

他和sed的区别

前面提到sed命令常用于一整行的处理,而awk比较倾向于将一行分成多个"字段"然后再进行处理，且默认情况下字段的分隔符为空格或tab键。awk 执行结果可以通过print的功能将字段数据打印显示。

在使用awk命令的过程中，可以使用逻辑操作符"&&“表示"与”、"||“表示"或”、"!“表示"非”;还可以进行简单的数学运算，如+、-、*、/、%、^分别表示加、减、乘、除、取余和乘方。

awk后面接两个单引号并加上大括号{ }来设置想要对数据进行的处理操作，awk可以处理后续接的文件，也可以读取来自前个命令的标准输。

当读到第一行时，匹配条件，然后执行指定动作，再接着读取第二行数据处理，不会默认输出

如果没有定义匹配条件默认是匹配所有数据行，awk隐含循环，条件匹配多少次动作就会执行多少次

逐行读取文木，默认以空格或tab键为分隔符进行分隔，将分隔所得的各个字段保存到内建变量中，并按模式或者条件执行编辑命令

AWK命令的格式

awk  选项   ‘模式或条件{编辑命令}’   文件1   文件2…. //过滤并输出文件中符合条件的内容

awk  -f  脚本文件   文件1  文件2… //从脚本中调用的编辑指令，过滤并输出内容 

  格式： awk关键字 选项 命令部分 '{xxxxxx}' 文件名

 awk包含几个常见的内建变量（可直接用）

例：

以冒号做分隔符显示分隔后的第五列

 以冒号做分隔符显示分隔后的第一列和第二列

 效果一样子

 用制表符作为分隔符输出

 定义多个分隔符，只要看到其中一个都算作分隔符

awk常用内置变量：$1、$2、NF、NR、$0

$1：代表第一列

$2：代表第二列   以此类推

$0：代表整行

NF：一行的列数

NR：行数

案例

打印包含root的整行内容

 打印每一行的列数，显示行号

 显示处理行的行号和整行内容

 打印第二行，不加print也一样，默认就是打印

 打印第二行的第一列

 打印最后一行

打印总行数以及打印文件的最后一行，END是汇总的意思 

 可以输入中文

 扩展案例：网卡的ip、流量

 扩展案例：根分区的可用量

 BEGIN和END的用法与区别

逐行执行开始之前执行什么任务，结束之后再执行什么任务，用BEGIN、END

BEGIN：一般用来做初始化操作，仅在读取数据记录之前执行一次 

END：一般用来做汇总操作，仅在读取完数据记录之后再执行一次

  awk的运算案例：

 模糊匹配，用~表示包含；！~表示不包含

 关于数值与字符串的比较

比较符号：==     !=     <=     >=     <     >

打印行号为第5行的内容

 打印行号小于5行的内容；以冒号做分隔第三列的值为0的行

精确匹配 

 数字与字符串比较和逻辑运算结合

筛选列子

 其他内置变量的用法FS（输入）、OFS、NR、FNR、RS、ORS

 加上前面三个

NF    字段个数（读取的列数）
NR    记录数（行号）从1开始，新的文件延续上面的技术，新文件不从1开始
FNR    读取文件的记录数（行号），从1开始，新的文件重新从1开始计数
FS    输入字段分隔符，默认是空格
OFS    输出字段分隔符，默认是空格
RS    输入行分隔符，默认为换行符
ORS    输出行分隔符，默认为换行符

在打印之前定义字段分隔符为冒号

FNR和NR的区别 

 RS和ORS的区别

 awk高级用法

定义引用变量

 案例：

 调用函数getline：读取一行数据的时候并不是得到当前行而是当前行的下一行

 显示偶数行；显示奇数行

 awk中使用if语句 

awk的if语句也分为单分支、双分支和多分支

单分支为if () {}

双分支为if() {}else{} 

多分支为if() {}else if () {}else{}

总结 

正则表达式中基础正则表达式和扩展正则表达式元字符的用法，以及网上三剑客grep、sed、awk的使用方法和结合正则表达式的用法案例以及文本小工具cut、sort、uniq、tr的使用方法案例，掌握其用法，可以使我们在生产环境中更方便的进行工作。