Linuxのawkコマンドの使い方

Linux では、awk コマンドはテキスト データ処理ツールであり、テキスト ファイルの書式設定や、テキスト ファイルのより複雑な処理と分析の実行に適しています。構文は「awk [オプション] 'パターン[アクション]' ファイル」です。 ..」 Awk には強力なテキスト フォーマット機能があり、たとえば、一見不規則に見える大量のログ ファイルやテキスト ファイルなどの場合、awk コマンドを実行すると、フォーマットされた出力はアプリケーション レベルのデータ分析に使用できるプロフェッショナルなスタイルになります。

#このチュートリアルの動作環境: linux7.3 システム、Dell G3 コンピューター。

Linux システムには、awk というより強力なテキスト データ処理ツールがあります。 1970 年代後半に誕生し、それが多くの Linux ユーザーに影響を与えた理由の 1 つである可能性があります。

awk コマンドの名前は、「厄介な」という言葉から来ているのではないかと推測する人もいます。実際にはそうではありません。このコマンドの設計者は 3 人います。彼らの姓は、Aho、Weingberger、Kernighan です。awk は、マスターの姓の頭文字であるこの 3 人から取られています。

awk には強力なテキスト フォーマット機能があります。たとえば、一見不規則に見える大量のログ ファイルやテキスト ファイルなどの場合、awk コマンドを実行した後、フォーマットされた出力をプロフェッショナル アプリケーションとして使用できます。 . レベルデータ分析スタイル;

awk はプログラミング言語のようなもので、条件判断、配列、ループ、その他多くの機能をサポートしています;

linux 三銃士

• grep は、単純にテキスト コンテンツの検索または一致を得意とします。

• sed は、テキストの編集と一致したテキスト コンテンツの処理を得意とします。

• awk、テキスト ファイルの書式設定、およびテキスト ファイルのより複雑な処理と分析の実行に適しています。

#awk 理論的基礎

1. awk 構文

awk [option] 'pattern[action]' file ... awk 参数 条件动作 文件

• awk はファイルを 1 行ずつ処理します。1 行が処理された後、次の行が処理されます。
• awk はユーザー指定の文字に従って区切ることができます指定しない場合、デフォルトはスペースです;

awk '{print $2}' alx.txt

awk '{print $2,$3}' alx.txt

awk 'NR==3{print $0}' alx.txt

awk 'NR==5,NR==6{print $0}' alx.txt

awk 'NR==3,NR==5 {print NR,$0}' alx.txt

awk '{print "第一列: "$1,"第二列: "$2}' alx.txt

上文谈到，awk默认的字段分隔符为空格，但是像下面这样的文本，以 # 为分隔符，就需要用到自定义分隔符；

1、显示第一列和第二列内容

awk -F "#" '{print $1,$2}' zcy2.txt

2、显示文件第一列，倒是第一列，和倒数第二列的内容

awk '{print $1,$(NF-1),$(NF-2)}' alx.txt

3、取出本机的IP地址

使用awk的方式获取的话，如果以空格为分隔符，我们发现目标字段在第二行的第二列，使用下面的命令即可，看起来，比起sed和grep命令似乎更简单；

ifconfig eth0 | awk 'NR==2{print $2}'

4、取出密码文件中的第一列和最后一列

考察对自定义输入分隔符的使用，可以看到，下面的文本文件中，可以考虑使用 ： 进行分割；

awk -F ':' '{print $1,$NF}' pwd2.txt

三、OFS输出分隔符

通过上文的学习，我们知道awk命令执行后，默认采用空格分割字段，而这个空格就是默认的输出分割符，

单在某些情况下，为了将数据展示的效果更加醒目一些，就可以使用OFS的自定义输出分隔符；

仍然以上面的密码文本为例，输出第一列和最后一列的字段；

awk -F ':' -v OFS=' *** ' '{print $1,$NF}' pwd2.txt

该表默认输出分隔符，直接在awk后面使用: -v OFS=‘自定义输出分隔符’

四、awk变量

awk参数

对于awk来讲，变量分为：内置变量和自定义变量

awk内置变量

比较常用的内置变量包括： NR,NF，FNR

FILENAME 使用

FILENAME 为awk的内置变量，通过下面这个命令，可以看到在每行记录之前，输出了当前文件名称；

awk 'NR==1,NR==3{print FILENAME,$0}' alx.txt

ARGV使用

先来看下面这条命令的执行结果

awk 'NR==1,NR==3{print ARGV[0],ARGV[1],$0}' alx.txt

可以发现，在输出的每一行记录前面，拼上了 awk 和 alx.txt这两个字段，这两个字段就是这行命令整体解析出来的2个内置参数；

自定义变量

看下面这条命令输出效果，通过-v参数，可以自定义变量进行参数传递；

awk -v myname="zcy" 'BEGIN{print "我的名字是?" ,myname}'

五、awk格式化输出

在上文，我们接触的是awk的输出功能，主要使用了 print 这个进行输出，它只能对文本进行简单的输出，但是并不能美化或者修改输出格式；

printf 格式化输出

如果对C语言有过了解的同学，对printf 并不陌生，使用这个命令（函数）可以对文本进行格式化输出；

printf与print的几点区别

• printf 需要指定format；
• format 用于指定后面的每个 item输出格式；
• printf 语句不会自动打印换行符； \n ； print 默认添加换行符；

如下，假如我们直接使用 printf 这样操作，看下效果

awk '{printf $0}' alx.txt

明显来说，把所有内容都输出到同一行了，这时候，就需要使用 printf的格式化输出来控制；

awk '{printf "%s\n", $0}' alx.txt

再看一个案例，使用 printf 将文本中的每一列添加前置输出

awk '{printf "第一列：%s 第二列：%s 第三列：%s\n" ,$1,$2,$3}' alx.txt

六、awk模式pattern

上文了解到，awk的语法如下 ：

awk [option] ‘pattern[action]’ file …

而且我们了解到,awk是按行处理文本，以上都是关于 print 相关，接下来，聊聊pattern相关的内容；

在pattern中，有个比较常见的pattern，BEGIN和END；

• BEGIN 模式是处理文本之前需要执行的动作；
• END模式是处理完成所有的行之后执行的操作；

awk 'BEGIN{print "小明在学linux"}'

或者下面这样

awk 'BEGIN{print "小明在学linux"} {print $0}END{print "处理结束"}' alx.txt

注意：BEGIN 和 END分别放到处理文本内容前后即可

awk如果不指定模式是按行处理，如果指定了模式，只有符合模式的才会被处理

awk常用模式

1、打印前三行的文本内容

awk 'NR<=3{print $0}' alx.txt

2、匹配密码文本中含有 zcy 的行

awk '/^zcy/{print $0}' pwd.txt

3、格式化输出 /etc/passwd 的部分字段

awk -F ":" 'BEGIN{print"用户名\t\t\t字段1\t\t 字段2\t\t 权限"} {printf "user:%-20s%-20s%-20s%-20s\n", $1,$4,$5,$7}' pwd.txt

4、找出pwd文件中nologin的用户

awk '/\/sbin\/nologin$/{print NR,$0}' pwd.txt

5、找出 下面这个区间的文本行

awk '/^daemon/,/^operator/{print NR,$0}' pwd.txt

相关推荐：《Linux视频教程》

以上がLinuxのawkコマンドの使い方の詳細内容です。詳細については、PHP 中国語 Web サイトの他の関連記事を参照してください。