Linux常用命令之awk

Linux Linux命令 2015年9月11日

awk是一种编程语言，可以自定义变量、运算符、条件语句、循环、数组、正则、函数等，主要用于在linux/unix下对文本和数据进行处理。awk脚本是由模式和操作组成的，处理数据可以来自标准输入(stdin)、文件、命令的输出。awk支持自定义函数和动态正则表达式等先进功能，awk是linux下的一个强大编程工具。

1、awk内置变量
$n 当前记录的第n个字段，比如n为1表示第一个字段，n为2表示第二个字段。
$0 这个变量包含执行过程中当前行的文本内容。
[N] ARGC 命令行参数的数目。
[G] ARGIND 命令行中当前文件的位置（从0开始算）。
[N] ARGV 包含命令行参数的数组。
[G] CONVFMT 数字转换格式（默认值为%.6g）。
[P] ENVIRON 环境变量关联数组。
[N] ERRNO 最后一个系统错误的描述。
[G] FIELDWIDTHS 字段宽度列表（用空格键分隔）。
[A] FILENAME 当前输入文件的名。
[P] FNR 同NR，但相对于当前文件。
[A] FS 字段分隔符（默认是任何空格）。
[G] IGNORECASE 如果为真，则进行忽略大小写的匹配。
[A] NF 表示字段数，在执行过程中对应于当前的字段数。
[A] NR 表示记录数，在执行过程中对应于当前的行号。
[A] OFMT 数字的输出格式（默认值是%.6g）。
[A] OFS 输出字段分隔符（默认值是一个空格）。
[A] ORS 输出记录分隔符（默认值是一个换行符）。
[A] RS 记录分隔符（默认是一个换行符）。
[N] RSTART 由match函数所匹配的字符串的第一个位置。
[N] RLENGTH 由match函数所匹配的字符串的长度。
[N] SUBSEP 数组下标分隔符（默认值是34）。

2、awk运算符
= += -= *= /= %= ^= **= 赋值
?: C条件表达式
|| 逻辑或
&& 逻辑与
~ ~! 匹 配正则表达式和不匹配正则表达式
< <= > >= != == 关 系运算符
空格 连接
+ – 加，减
* / & 乘，除与求余
+ – ! 一元加，减和逻辑非
^ *** 求幂
++ — 增加或减少，作为前缀或后缀
$ 字 段引用
in 数组成员

3、awk正则
匹配符 描述
\Y 匹配一个单词开头或者末尾的空字符串
\B 匹配单词内的空字符串
\< 匹配一个单词的开头的空字符串，锚定开始
\> 匹配一个单词的末尾的空字符串，锚定末尾
\W 匹配一个非字母数字组成的单词
\w 匹配一个字母数字组成的单词
\’ 匹配字符串末尾的一个空字符串
\‘ 匹配字符串开头的一个空字符串

4、awk字符串函数
sub 匹配记录中最大、最靠左边的子字符串的正则表达式，并用替换字符串替换这些字符串。如果没有指定目标字符串就默认使用整个记录。替换只发生在第一次匹配的 时候
gsub 整个文档中进行匹配
index 返回子字符串第一次被匹配的位置，偏移量从位置1开始
substr 返回从位置1开始的子字符串，如果指定长度超过实际长度，就返回整个字符串
split 可按给定的分隔符把字符串分割为一个数组。如果分隔符没提供，则按当前FS值进行分割
length 返回记录的字符数
match 返回在字符串中正则表达式位置的索引，如果找不到指定的正则表达式则返回0。match函数会设置内建变量RSTART为字符串中子字符串的开始位 置，RLENGTH为到子字符串末尾的字符个数。substr可利于这些变量来截取字符串
toupper和tolower 可用于字符串大小间的转换，该功能只在gawk中有效

5、awk数学函数
atan2(x,y) y,x 范围内的余切
cos(x) 余弦函数
exp(x) 求 幂
int(x) 取整
log(x) 自然对 数
rand() 随机数
sin(x) 正弦
sqrt(x) 平 方根
srand(x) x是rand()函数的种子
int(x) 取 整，过程没有舍入
rand() 产生一个大于等于0而小于1的随机数

6、awk时间函数
mktime( YYYY MM dd HH MM ss[ DST]) 生成时间格式
strftime([format [, timestamp]]) 格式化时间输出，将时间戳转为时间字符串
systime() 得到时间戳,返回从1970年1月1日开始到当前时间(不计闰年)的整秒数

awk例子：
[root@linux ~]# awk ‘BEGIN{ total=0; for(i=0;i<=50;i++){ total+=i; } print total; }’ #使用for计算从1累加到50的和
1275
[root@linux ~]# awk ‘BEGIN{ total=0; i=0; do {total+=i;i++;} while(i<=50) print total; }’ #使用do whiler计算从1累加到50的和
1275
[root@linux ~]# awk ‘BEGIN{name=”leixuesong”;print name==”leixuesong”?”yes”:”no”;}’
yes
[root@linux ~]# date #显示当前时间
2015年 09月 11日 星期五 11:06:00 CST
[root@linux ~]# awk ‘BEGIN{ “date” | getline out; split(out,mon); print mon[2] }’#处理命令返回的结果，切割成数组，获取数组的值的到当前月份为九月
09月

来源：Linux常用命令之awk