awk的基本用法

本文详细介绍AWK命令的基础用法,包括域和记录处理、条件操作符的应用、内置变量的使用、操作符及其应用场景等。通过具体示例展示了如何利用AWK进行数据筛选、格式化输出及简单的数学运算。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

awk

1.域和记录:

取第一域,并在开头和结尾加字符begin和end

通常使用BEGIN来显示变量和预置变量,使用END来输出最终结果。

awk  ' BEGIN  {print "being"}  {print $1}  END  {print "end"}'   file

 

2.条件操作符:

第一字域,包含expect,就打印整行

awk '{if($1~/expect/) print $0}' c.sh 或者 awk '$1~/expect/{print $0}' file

 

精确匹配:,只打印第3 域等于"48"的记录

awk '$3=="48" {print $0}' file 

不等于: awk '$1 != "asima"' temp

 

不匹配: 打印整条不包含ASIMA 的记录

awk '$0 !~ /ASIMA/' temp 

 

小于: awk '{if ($1<$2) print $1 "is smaller"}' temp

 

设置大小写: awk '/[Gg]reen/' temp 打印整条包含Green,或者green 的记录

 

任意字符: awk '$1 ~/^...a/' temp 打印第1 域中第四个字符是a 的记录,符号’^’

代表行首,符合’.’代表任意字符

 

 

AND 与关系: awk '{if ( $1=="a" && $2=="b" ) print $0}' temp

OR 或关系: awk '{if ($1=="a" || $1=="b") print $0}' temp

 

for循环

awk -F "," '{for (i=1;i<=NF;i++) if($i~/a=/) {print $i}}'

 

3.awk内置变量:

例: awk 'END {print NR}' temp                                          在最后打印已读记录条数

      awk '{print NF,NR,$0} END {print FILENAME}' temp

     awk '{if (NR>0 && $4~/Brown/) print $0}' temp          至少存在一条记录且包含Brown

     NF 的另一用法: echo $PWD | awk -F/ '{print $NF}'      显示当前目录名

 

4. awk操作符:

在awk 中使用操作符,基本表达式可以划分成数字型、字符串型、变量型、域及数组元素

 

设置输入域到变量名:

awk '{name=$1;six=$3; if (six=="man") print name " is " six}' temp

 

域值比较操作:

awk 'BEGIN {BASE="27"} {if ($4<BASE) print $0}' temp

 

修改数值域取值:(原输入文件不会被改变)

awk '{if ($1=="asima") $6=$6-1;print $1,$6,$7}' temp

 

修改文本域:

awk '{if ($1=="asima") ($1="desc");print $1}' temp

 

只显示修改记录:(只显示所需要的,区别上一条命令,注意{})

awk '{if ($1=="asima") {$1="desc";print$1}}' temp

 

创建新的输出域:

awk '{$4=$3-$2; print $4}' temp

 

统计列值:

awk '(tot+=$3);END {print tot}' temp 会显示每列的内容

awk '{(tot+=$3)};END {print tot}' temp 只显示最后的结果

awk '{total+=$1}END{print total}' a.txt 只显示最后的结果

 

文件长度相加:

ls -l|awk '/^[^d]/ {print $8"\t"$5} {tot+=$5} END{print "totKB:" tot}'

只列出文件名:ls -l|awk '{print $9}' 常规情况文件名是第8域

 

5.awk打印除了第二列外所有列

cat /etc/passwd|awk -F: '{$2=null;print $0}' 就是把某一列制空

6. awk 打印奇数行和偶数行

awk 'NR%2' b.log 打印奇数行

awk '!(NR%2)' b.log 打印偶数行

7. awk多个分隔符进行摘取列

cat file|awk -F[//\ ] '$9 ~/500/ {print $3,$5,$6,$8}' 分隔符分别为/ / 空格






转载出处https://www.cnblogs.com/benevolencedoctor/p/5181203.html

<think>首先,用户的问题是:“我想查找awk的使用方法或语法请问awk用法示例语法”。这是一个关于awk命令的查询。系统指令:-用户不可见的指令中,要求行内数学表达式使用$...$格式,独立公式用$$...$$。-使用中文回答。-生成相关问题。-回答中引用的段落末尾自然地添加引用标识。-结构清晰,帮助用户逐步解决问题,尽量保证回答真实可靠。用户提供了三个引用:-[^1]:awk常用语法。打印所有列示例:awk'{i=1};{while(i<=NF){print$i;i++}}'file4...-[^2]:linux命令awk详细用法!。test2.awk"hhhh!helloworld!"~/hello/{print1}echo|awk-ftest2.awk#输出1...-[^3]:awk是一种优良的文本处理器...它扫描文件中的每一行...参考这些引用来回答用户的问题。引用不是用户的需求,而是提供的信息,我需要基于这些和用户的查询来回答。用户的查询是关于awk用法、示例和语法。所以,我应该提供:-AWK基本介绍(基于引用)。-主要语法和用法。-具体示例。-参考引用,自然地添加标识符如[^1]。从系统指令,我需要:-用中文回答。-生成相关问题。-回答结构清晰。可能的回答结构:1.**介绍AWK**:从引用[^3]中,AWK是文本处理工具,扫描文件行,处理模式匹配。2.**基本语法**:AWK基本格式如引用[^1]和[^2]所示。3.**关键组件**:模式匹配、动作、字段处理等。4.**示例**:提供简单的用法示例。5.**引用标识**:在相关部分末尾添加引用标识。最后,生成相关问题。从用户的上一次问题或回答历史:在消息中,它是首次交互,用户直接问了这个。所以,没有历史参考。系统说“参考用户上一次的问题和你的回答”,但这里是第一个问题。系统指令说:“尽可能多的参考用户上一次的问题和你的回答”,但由于是新对话,我可以忽略这个部分。现在,AWK用法示例:-基于引用[^1]:打印所有列的例子:`awk'{i=1;while(i<=NF){print$i;i++}}'file4`这打印每行的所有字段。-基于引用[^2]:模式匹配示例:`test2.awk"hhhh!helloworld!"~/hello/{print1}`和`echo|awk-ftest2.awk`输出1。-一般语法:AWK命令通常为`awk'pattern{action}'file`。我应该扩展内容:-**模式(Pattern)**:指定条件,如正则表达式或关系表达式。-**动作(Action)**:指定当模式匹配时执行的操作,如print或赋值。-**内置变量**:NF(NumberofFields)、NR(NumberofRecords)、$0(整个记录)、$1,$2,...(字段)。-**运算符**:如~(匹配),!~(不匹配),从引用[^2]。为结构清晰:1.**什么是AWK?**简要介绍。2.**基本语法结构**:解释格式。3.**常用用法和示例**:-打印特定字段。-模式匹配。-处理整行。4.**参考引用**:如[^3]用于介绍。生成相关问题:-相关于awk的高级用法、错误处理等。-例如:如何使用AWK处理CSV文件?AWK如何用于数据汇总?确保语言中文。回答开头:先介绍AWK。然后逐步解释。最后添加相关问题。</think> ### AWK 简介 AWK 是一种强大的文本处理工具和编程语言,常用于扫描文件的每一行、基于给定模式执行操作(如提取数据或进行计算)。它广泛应用于日志分析、数据转换和报表生成等场景[^3]。AWK 的语法基于“模式-动作”(pattern-action)结构:当输入行匹配指定模式时,执行对应的动作(如打印或修改行)。下面我将逐步介绍 AWK基本用法、语法和示例,内容参考了提供的引用信息,确保真实可靠。 ### 基本语法结构 AWK 命令的基本格式为: ```bash awk 'pattern { action }' input_file ``` - **模式 (pattern)**:指定过滤条件,可使用正则表达式(如 `/regex/`)、关系操作符(如 `~` 匹配、`!~` 不匹配)或布尔表达式。如果模式省略,动作将应用于每一行[^2]。 - **动作 (action)**:用大括号 `{}` 包裹的命令序列,如 `print`、赋值或循环语句。动作是可选的,如果没有动作,则默认打印匹配行。 - **内置变量**:常用于处理文本行: - `$0`:表示整个当前行。 - `$1, $2, ..., $n`:表示行中第 n 个字段(列)。 - `NF`:行中的字段数。 - `NR`:当前记录的行号。 AWK 命令可以直接在命令行中使用,或写在脚本文件中(如使用 `-f script.awk` 选项调用)[^3]。 ### 常见用法与示例 下面是一些常见 AWK 用法和实际示例,帮助您快速上手。示例基于引用中的信息,并根据通用用法进行了扩展。 #### 示例 1: 打印所有字段(列) AWK 能扫描文件并打印每行的所有字段。使用 `while` 循环遍历字段: ```bash awk '{ i=1; while (i <= NF) { print $i; i++ } }' file4 ``` - **解释**: - `{ i=1; ... }`:初始化计数器 `i`。 - `while (i <= NF)`:循环到行尾(`NF` 为字段数)。 - `print $i`:打印第 `i` 个字段。 - 例如,输入行 `sdb sdc sde`,输出为每个字段一行:`sdb`, `sdc`, `sde`。 - **参考**:此语法适用于简单字段处理[^1]。 #### 示例 2: 基于模式匹配执行动作 使用正则表达式(如 `/hello/`)匹配行,并执行动作: ```bash # 创建一个测试文件 test2.awk,内容为: # ~ /hello/ { print 1 } # 命令行测试: echo "hhhh! hello world!" | awk -f test2.awk # 输出: 1 ``` - **解释**: - `~ /hello/`:模式部分,检查行中是否包含 "hello"。 - `{ print 1 }`:动作部分,如果匹配,打印 1。 - 如果不匹配,无输出。运算符 `~` 表示匹配正则表达式,`!~` 表示不匹配[^2]。 - **变体**:直接在命令行使用:`awk '~/hello/ {print 1}'`,会检查输入流。 #### 示例 3: 字段处理和简单计算 提取特定字段或进行计算,如计算文件总行数或特定列的总和: ```bash # 打印文件的第一列 awk '{ print $1 }' input.txt # 计算文件行数 awk 'END { print NR }' input.txt # 计算第二列之和 awk '{ sum += $2 } END { print sum }' input.txt ``` - **解释**: - `{ print $1 }`:只打印每行第一列。 - `END { ... }`:特殊模式,在输入结束后执行。 - `sum += $2`:累加第2列的值。 - 示例输入:行 `1 10` 和 `2 20`,输出为 `30`。 #### 示例 4: 使用循环和条件语句 在动作中结合循环或条件,实现复杂逻辑: ```bash # 为每一行打印行号和有多个字段的行 awk '{ if (NF > 1) { print NR, $0 } else { print "Single field" } }' data.txt ``` - **解释**: - `if (NF > 1)`:条件语句检查字段数是否大于1。 - `print NR, $0`:打印行号和整行。 - `else ...`:否则打印消息。 ### 最佳实践和提示 - **处理文件**:直接在命令行运行 AWK(如 `awk '...' file.txt`),或写脚本调用(如 `awk -f script.awk`)。 - **注意事项**: - AWK 默认使用空格作为字段分隔符(可通过 `-F` 选项更改,如 `awk -F',' '{...}'` 用于 CSV)。 - 模式可以是固定字符串、正则表达式,或条件语句。 - **性能**:AWK 处理文本高效,但大文件时避免复杂循环以提升速度[^3]。 如果您需要更多帮助,请提供具体文件或需求(如“如何用 AWK 处理日志文件?”),我可以定制解答。 ### 相关问题 1. AWK 如何修改字段值或添加新字段? 2. AWK 在处理 CSV 文件时有哪些技巧? 3. AWK 如何与 sed 或 grep 命令结合使用? [^1]: AWK基本语法示例和字段遍历功能。 [^2]: AWK 的模式匹配和运算符详细说明。 [^3]: AWK 的扫描机制和处理逻辑介绍。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值