美文网首页
shell awk命令

shell awk命令

作者: 墨线宝 | 来源:发表于2023-09-23 17:32 被阅读0次

awk命令

awk是shell进阶的重要命令,可以用来编排字段

awk把输入流看做一串记录的集合,每条记录都可以进一步细分为字段,一个awk程序是一对以模式和大括号框起来的操作组合而成的,awk每次从文件中读取一条记录

 awk [选项] '条件{动作} 条件{动作}' 文件
 
 -v 设置变量值
pattern {action} 如模式匹配,则执行操作
pattern {action}
# 打印第一个字段
awk 'print $1'
# 打印整行
awk 'print $0'
# 打印第2与第5个字段
awk 'print $2,$5'
# 打印非空行
awk 'NF  > 0 {print $0}'

在读取数据时,默认的分隔符是空格,可以使用-F来指定分隔符

#awk [-F 分隔符] '命令' input-file
# 分隔符默认是空格
# 例: 打印出root用户记录
awk -F: '$1=="root"{print $0}' /etc/passwd

在输出数据时,默认的分隔符是空格,可以使用-v来设置输出字段分隔符

# 默认情况下,-v 改变输出字段的分隔字符,这里必须设置OFS变量来改变输出字段分隔符
awk -F: -v 'OFS=**' '{print $1,$5}' /etc/passwd

标量变量

保存单一值的变量叫做标量变量,常用的有

  • FILENAME 当前输入文件的名称

  • FNR 当前输入文件的当前行号,当有多个输入文档时相当有用

    FNR == 3   选定第三条记录
    
  • FS 字段分隔符,默认为空格

  • NF 当前记录的字段数

    NF == 0    选定空记录
    NF > 3     选定拥有三个字段以上的记录
    NF < 5     选定第1到第4条记录
    
  • NR 输入数据流的当前行号

  • OFS 输出字段分隔字符,默认为空格

  • ORS 输出记录分隔字符,默认为\n

  • RS 输入记录分隔字符

  • $0 当前行的全部内容

  • $n 当前行的第n的字段的内容

自定义变量

可以使用-v来设置自定义变量

free | awk -v age="10" -v name="lily" '{print name,age}'

lily 10
lily 10
lily 10

BEGIN和END

BEIGIN

BEGIN导致动作指令仅在读取任何数据记录之前执行一次

awk 'BEGIN {print "OK"}'
OK

END

END导致动作指令仅在读取完所有数据记录后执行一次

free | awk 'END {print "共有"NR"行"}'
共有3行

条件判断

awk还支持if判断语句

if(判断条件){
动作指令1;
} else if(判断条件2){
动作指令2;
} else {
动作指令N;
}
free | awk '{if(NR==1){print $1}else if(NR==2){print $2}}'
total
8008932

循环语句

awk还支持循环,如for循环、while循环,且支持使用continue、break、exit来进行中断

for循环

for(表达式1;表达式2;表达式3) {
动作指令序列
}
awk 'BEGIN{ for (i=1;i<=4;i++) {print i}}'
1
2
3
4

while循环

while(条件判断){
动作指令序列;
}
awk 'BEGIN{ i=1; while(i<=4) {print i;i++}}'
1
2
3
4

命令行参数

awk通过内建变量ARGC(参数计数)和ARGV(参数值)让命令行参数可用

awk 'BEGIN {print ARGV[0]}'
输出 awk
awk 'BEGIN {for (k=0;k<ARGC;k++) print "ARGV["k"]=["ARGV[k]"]"}' a b c
ARGV[0]=[awk]
ARGV[1]=[a]
ARGV[2]=[b]
ARGV[3]=[c]

举例

统计磁盘可用空间

df | grep -v tmpfs | awk '{sum+=$4} END{print "磁盘可用容量:"sum/1024/1024"G"}''
磁盘可用容量:1.01912G

统计nginx各ip访问次数

awk ' \
> {IP[$3]++} \
> END { \
> for (i in IP) {print i,IP[i]} \
> }' /var/log/nginx/access.log

https://zhhll.icu/2022/linux/shell/awk命令/

本文由mdnice多平台发布

相关文章

  • Linux Shell中使用awk完成两个文件的关联Join

    awk 处理两个公共字段 关键字:shell、awk、join Shell中的awk命令是非常强大的,有很多书籍专...

  • Linux命令之awk

    awk中使用shell命令awk '{cmd="rm "$0;system(cmd)}' filename.txt...

  • 1. shell入门练习(awk + sed命令)

    1.shell入门练习(awk + sed命令) awk: 批量关闭线程 ps aux |grep nginx |...

  • 自动化脚本实践(Shell + Expect)

    Linux Shell脚本入门: Linux awk 命令 | 菜鸟教程 Shell 教程 | 菜鸟教程 lin...

  • [Linux-Shell] 基础知识

    搬运 一、主要内容 shell编程 sed命令 awk命令 crontab定时器 二、简介 Shell是用户与内核...

  • shell awk 命令

    awk的最基本功能是在文件或者字符串抽取信息。通常awk是以文件的一行为处理单位的。awk每接收文件的一行,然后执...

  • 过滤Docker是否存在网络名称

    1、过滤命令操作 通过docker network ls 和grep、awk管道命令进行结合使用 2、shell脚本

  • BigData~01:Shell

    Shell编程基础 内容大纲 一、Shell编程二、高级文本处理命令:sed、awk、cut三、crontab定时...

  • shell-awk命令

    awk比sed更加强大,能对行中的段进行操作。 语法 常见用法 指定分隔符过滤文件(不指定时默认为空格或空白字符)...

  • shell命令之awk

    一、awk简介 awk 是一种编程语言,用于在linux/unix下对文本和数据进行处理。数据可以来自标准输入、一...

网友评论

      本文标题:shell awk命令

      本文链接:https://www.haomeiwen.com/subject/liwxbdtx.html