收集整理的awk用法小结

本文详细介绍AWK命令的各种使用场景及技巧,包括基本语法、变量、条件判断、循环控制等核心内容,并通过实例演示如何处理文本文件。

提示:其实 man awk 提供的文档也很详细,不过整理加上中文估计还是可以对初学者有一定帮助的。

awk 用法:awk ‘ pattern {action} ‘

变量名 含义
ARGC 命令行变元个数
ARGV 命令行变元数组
FILENAME 当前输入文件名
FNR 当前文件中的记录号
FS 输入域分隔符,默认为一个空格
RS 输入记录分隔符
NF 当前记录里域个数
NR 到目前为止记录数
OFS 输出域分隔符
ORS 输出记录分隔符

1、
awk ‘/101/’ file 显示文件file中包含101的匹配行。
awk ‘/101/,/105/’ file
awk ‘$1 == 5′ file
awk ‘$1 == “CT”‘ file 注意必须带双引号
awk ‘$1 * $2 >100 ‘ file
awk ‘$2 >5 && $2<=15' file

2、
awk '{print NR,NF,$1,$NF,}' file 显示文件file的当前记录号、域数和每一行的第一个和最后一个域。
awk '/101/ {print $1,$2 + 10}' file 显示文件file的匹配行的第一、二个域加10。
awk '/101/ {print $1$2}' file
awk '/101/ {print $1 $2}' file 显示文件file的匹配行的第一、二个域,但显示时域中间没有分隔符。

3、
df | awk '$4>1000000 ‘ 通过管道符获得输入,如:显示第4个域满足条件的行。

4、
awk -F “|” ‘{print $1}’ file 按照新的分隔符“|”进行操作。
awk ‘BEGIN { FS=”[: /t|]” } {print $1,$2,$3}’ file 通过设置输入分隔符(FS=”[: /t|]”)修改输入分隔符。

Sep=”|”
awk -F $Sep ‘{print $1}’ file 按照环境变量Sep的值做为分隔符。
awk -F ‘[ :/t|]’ ‘{print $1}’ file 按照正则表达式的值做为分隔符,这里代表空格、:、TAB、|同时做为分隔符。
awk -F ‘[][]’ ‘{print $1}’ file 按照正则表达式的值做为分隔符,这里代表[、]

5、
awk -f awkfile file 通过文件awkfile的内容依次进行控制。
cat awkfile /101/{print “/047 Hello! /047″} –遇到匹配行以后打印 ‘ Hello! ‘./047代表单引号。
{print $1,$2} –因为没有模式控制,打印每一行的前两个域。

6、
awk ‘$1 ~ /101/ {print $1}’ file 显示文件中第一个域匹配101的行(记录)。

7、
awk ‘BEGIN { OFS=”%”} {print $1,$2}’ file 通过设置输出分隔符(OFS=”%”)修改输出格式。

8、
awk ‘BEGIN { max=100 ;print “max=” max} BEGIN 表示在处理任意行之前进行的操作。{max=($1 >max ?$1:max); print $1,”Now max is “max}’ file 取得文件第一个域的最大值。
(表达式1?表达式2:表达式3 相当于:
if (表达式1)
表达式2
else
表达式3
awk ‘{print ($1>4 ? “high “$1: “low “$1)}’ file

9、
awk ‘$1 * $2 >100 {print $1}’ file 显示文件中第一个域匹配101的行(记录)。

10、
awk ‘{$1 == ‘Chi’ {$3 = ‘China’; print}’ file 找到匹配行后先将第3个域替换后再显示该行(记录)。
awk ‘{$7 %= 3; print $7}’ file 将第7域被3除,并将余数赋给第7域再打印。

11、
awk ‘/tom/ {wage=$2+$3; printf wage}’ file 找到匹配行后为变量wage赋值并打印该变量。

12、
awk ‘/tom/ {count++;}
END {print “tom was found “count” times”}’ file END表示在所有输入行处理完后进行处理。

13、
awk ‘gsub(//$/,”");gsub(/,/,”"); cost+=$4; END {print “The total is $” cost>”filename”}’ file gsub函数用空串替换$和,再将结果输出到filename中。
1 2 3 $1,200.00
1 2 3 $2,300.00
1 2 3 $4,000.00

awk ‘{gsub(//$/,”");gsub(/,/,”");
if ($4>1000&&$4<2000) c1+=$4;
else if ($4>2000&&$4<3000) c2+=$4;
else if ($4>3000&&$4<4000) c3+=$4;
else c4+=$4; }
END {printf "c1=[%d];c2=[%d];c3=[%d];c4=[%d]/n",c1,c2,c3,c4}"' file
通过if和else if完成条件语句

awk '{gsub(//$/,"");gsub(/,/,"");
if ($4>3000&&$4<4000) exit;
else c4+=$4; }
END {printf "c1=[%d];c2=[%d];c3=[%d];c4=[%d]/n",c1,c2,c3,c4}"' file
通过exit在某条件时退出,但是仍执行END操作。
awk '{gsub(//$/,"");gsub(/,/,"");
if ($4>3000) next;
else c4+=$4; }
END {printf “c4=[%d]/n”,c4}”‘ file
通过next在某条件时跳过该行,对下一行执行操作。

14、
awk ‘{ print FILENAME,$0 }’ file1 file2 file3>fileall 把file1、file2、file3的文件内容全部写到fileall中,格式为
打印文件并前置文件名。

15、
awk ‘ $1!=previous { close(previous); previous=$1 }
{print substr($0,index($0,” “) +1)>$1}’ fileall 把合并后的文件重新分拆为3个文件。并与原文件一致。

16、
awk ‘BEGIN {”date”|getline d; print d}’ 通过管道把date的执行结果送给getline,并赋给变量d,然后打印。

17、
awk ‘BEGIN {system(”echo /”Input your name://c/”"); getline d;print “/nYour name is”,d,”/b!/n”}’
通过getline命令交互输入name,并显示出来。
awk ‘BEGIN {FS=”:”; while(getline< "/etc/passwd" >0) { if($1~”050[0-9]_”) print $1}}’
打印/etc/passwd文件中用户名包含050x_的用户名。

18、
awk ‘{ i=1;while(i awk '{ for(i=1;i type file|awk -F "/" '
{ for(i=1;i { if(i==NF-1) { printf "%s",$i }
else { printf "%s/",$i } }}' 显示一个文件的全路径。
用for和if显示日期
awk 'BEGIN {
for(j=1;j<=12;j++)
{
flag=0;
printf "/n%d月份/n",j;
for(i=1;i<=31;i++)
{
if (j==2&&i>28) flag=1;
if ((j==4||j==6||j==9||j==11)&&i>30) flag=1;
if (flag==0) {printf “%02d%02d “,j,i}
}
}
}’

19、
在awk中调用系统变量必须用单引号,如果是双引号,则表示字符串
Flag=abcd
awk ‘{print ‘$Flag’}’ 结果为abcd
awk ‘{print “$Flag”}’ 结果为$Flag

<think>首先,用户的问题是:“我想查找awk的使用方法或语法请问awk用法示例语法”。这是一个关于awk命令的查询。系统指令:-用户不可见的指令中,要求行内数学表达式使用$...$格式,独立公式用$$...$$。-使用中文回答。-生成相关问题。-回答中引用的段落末尾自然地添加引用标识。-结构清晰,帮助用户逐步解决问题,尽量保证回答真实可靠。用户提供了三个引用:-[^1]:awk常用语法。打印所有列示例:awk'{i=1};{while(i<=NF){print$i;i++}}'file4...-[^2]:linux命令awk详细用法!。test2.awk"hhhh!helloworld!"~/hello/{print1}echo|awk-ftest2.awk#输出1...-[^3]:awk是一种优良的文本处理器...它扫描文件中的每一行...参考这些引用来回答用户的问题。引用不是用户的需求,而是提供的信息,我需要基于这些和用户的查询来回答。用户的查询是关于awk用法、示例和语法。所以,我应该提供:-AWK的基本介绍(基于引用)。-主要语法和用法。-具体示例。-参考引用,自然地添加标识符如[^1]。从系统指令,我需要:-用中文回答。-生成相关问题。-回答结构清晰。可能的回答结构:1.**介绍AWK**:从引用[^3]中,AWK是文本处理工具,扫描文件行,处理模式匹配。2.**基本语法**:AWK的基本格式如引用[^1]和[^2]所示。3.**关键组件**:模式匹配、动作、字段处理等。4.**示例**:提供简单的用法示例。5.**引用标识**:在相关部分末尾添加引用标识。最后,生成相关问题。从用户的上一次问题或回答历史:在消息中,它是首次交互,用户直接问了这个。所以,没有历史参考。系统说“参考用户上一次的问题和你的回答”,但这里是第一个问题。系统指令说:“尽可能多的参考用户上一次的问题和你的回答”,但由于是新对话,我可以忽略这个部分。现在,AWK用法示例:-基于引用[^1]:打印所有列的例子:`awk'{i=1;while(i<=NF){print$i;i++}}'file4`这打印每行的所有字段。-基于引用[^2]:模式匹配示例:`test2.awk"hhhh!helloworld!"~/hello/{print1}`和`echo|awk-ftest2.awk`输出1。-一般语法:AWK命令通常为`awk'pattern{action}'file`。我应该扩展内容:-**模式(Pattern)**:指定条件,如正则表达式或关系表达式。-**动作(Action)**:指定当模式匹配时执行的操作,如print或赋值。-**内置变量**:NF(NumberofFields)、NR(NumberofRecords)、$0(整个记录)、$1,$2,...(字段)。-**运算符**:如~(匹配),!~(不匹配),从引用[^2]。为结构清晰:1.**什么是AWK?**简要介绍。2.**基本语法结构**:解释格式。3.**常用用法和示例**:-打印特定字段。-模式匹配。-处理整行。4.**参考引用**:如[^3]用于介绍。生成相关问题:-相关于awk的高级用法、错误处理等。-例如:如何使用AWK处理CSV文件?AWK如何用于数据汇总?确保语言中文。回答开头:先介绍AWK。然后逐步解释。最后添加相关问题。</think> ### AWK 简介 AWK 是一种强大的文本处理工具和编程语言,常用于扫描文件的每一行、基于给定模式执行操作(如提取数据或进行计算)。它广泛应用于日志分析、数据转换和报表生成等场景[^3]。AWK 的语法基于“模式-动作”(pattern-action)结构:当输入行匹配指定模式时,执行对应的动作(如打印或修改行)。下面我将逐步介绍 AWK 的基本用法、语法和示例,内容参考了提供的引用信息,确保真实可靠。 ### 基本语法结构 AWK 命令的基本格式为: ```bash awk 'pattern { action }' input_file ``` - **模式 (pattern)**:指定过滤条件,可使用正则表达式(如 `/regex/`)、关系操作符(如 `~` 匹配、`!~` 不匹配)或布尔表达式。如果模式省略,动作将应用于每一行[^2]。 - **动作 (action)**:用大括号 `{}` 包裹的命令序列,如 `print`、赋值或循环语句。动作是可选的,如果没有动作,则默认打印匹配行。 - **内置变量**:常用于处理文本行: - `$0`:表示整个当前行。 - `$1, $2, ..., $n`:表示行中第 n 个字段(列)。 - `NF`:行中的字段数。 - `NR`:当前记录的行号。 AWK 命令可以直接在命令行中使用,或写在脚本文件中(如使用 `-f script.awk` 选项调用)[^3]。 ### 常见用法与示例 下面是一些常见 AWK 用法和实际示例,帮助您快速上手。示例基于引用中的信息,并根据通用用法进行了扩展。 #### 示例 1: 打印所有字段(列) AWK 能扫描文件并打印每行的所有字段。使用 `while` 循环遍历字段: ```bash awk '{ i=1; while (i <= NF) { print $i; i++ } }' file4 ``` - **解释**: - `{ i=1; ... }`:初始化计数器 `i`。 - `while (i <= NF)`:循环到行尾(`NF` 为字段数)。 - `print $i`:打印第 `i` 个字段。 - 例如,输入行 `sdb sdc sde`,输出为每个字段一行:`sdb`, `sdc`, `sde`。 - **参考**:此语法适用于简单字段处理[^1]。 #### 示例 2: 基于模式匹配执行动作 使用正则表达式(如 `/hello/`)匹配行,并执行动作: ```bash # 创建一个测试文件 test2.awk,内容为: # ~ /hello/ { print 1 } # 命令行测试: echo "hhhh! hello world!" | awk -f test2.awk # 输出: 1 ``` - **解释**: - `~ /hello/`:模式部分,检查行中是否包含 "hello"。 - `{ print 1 }`:动作部分,如果匹配,打印 1。 - 如果不匹配,无输出。运算符 `~` 表示匹配正则表达式,`!~` 表示不匹配[^2]。 - **变体**:直接在命令行使用:`awk '~/hello/ {print 1}'`,会检查输入流。 #### 示例 3: 字段处理和简单计算 提取特定字段或进行计算,如计算文件总行数或特定列的总和: ```bash # 打印文件的第一列 awk '{ print $1 }' input.txt # 计算文件行数 awk 'END { print NR }' input.txt # 计算第二列之和 awk '{ sum += $2 } END { print sum }' input.txt ``` - **解释**: - `{ print $1 }`:只打印每行第一列。 - `END { ... }`:特殊模式,在输入结束后执行。 - `sum += $2`:累加第2列的值。 - 示例输入:行 `1 10` 和 `2 20`,输出为 `30`。 #### 示例 4: 使用循环和条件语句 在动作中结合循环或条件,实现复杂逻辑: ```bash # 为每一行打印行号和有多个字段的行 awk '{ if (NF > 1) { print NR, $0 } else { print "Single field" } }' data.txt ``` - **解释**: - `if (NF > 1)`:条件语句检查字段数是否大于1。 - `print NR, $0`:打印行号和整行。 - `else ...`:否则打印消息。 ### 最佳实践和提示 - **处理文件**:直接在命令行运行 AWK(如 `awk '...' file.txt`),或写脚本调用(如 `awk -f script.awk`)。 - **注意事项**: - AWK 默认使用空格作为字段分隔符(可通过 `-F` 选项更改,如 `awk -F',' '{...}'` 用于 CSV)。 - 模式可以是固定字符串、正则表达式,或条件语句。 - **性能**:AWK 处理文本高效,但大文件时避免复杂循环以提升速度[^3]。 如果您需要更多帮助,请提供具体文件或需求(如“如何用 AWK 处理日志文件?”),我可以定制解答。 ### 相关问题 1. AWK 如何修改字段值或添加新字段? 2. AWK 在处理 CSV 文件时有哪些技巧? 3. AWK 如何与 sed 或 grep 命令结合使用? [^1]: AWK 的基本语法示例和字段遍历功能。 [^2]: AWK 的模式匹配和运算符详细说明。 [^3]: AWK 的扫描机制和处理逻辑介绍。
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值