linux命令a---awk

本文详细介绍了awk的基本概念,包括BEGIN和END、正则表达式、关系和布尔运算符、内置变量和运算符。此外,还探讨了awk的高级技巧,如传递参数、自定义分隔符、逻辑表达式、数组使用,以及如何在awk中调用shell脚本。通过丰富的示例,展示了awk在处理文本、比较时间、数组操作、文件合并和小数计算等场景的强大能力。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

大牛博客

http://blog.chinaunix.net/uid/10540984/cid-21450-list-1.html

一、一些基本概念

1、awk有两个特殊的字段,BEGIN用于在循环之前执行,END用于在循环之后执行
2、awk支持所有基础和扩展正则表达式
3、awk可以使用-F指定分隔符,或者使用FS指定
4、awk关系运算符:
<,>,<=,>=,==,!=,(模糊匹配),!(模糊不匹配)
5、awk 布尔运算符:
||,&&,!
6、awk算数运算符
+,-,*,/,%,^,**,++x,x++
7、常用awk环境变量
FS:字段的分隔符,默认是空格键
NF:当前行的域数量
NR:当前记录的行数
OFS:输出时的域分隔符
ORS:输出记录分隔符
IGNORECASE:置1则忽略大小写
8、awk 支持printf,printf有三个修饰符 -,width,.prec 还有一些常用格式符,这里只须记住可以以任意格式输出内容即可
9、awk常用的几种内置字符串要学会使用
gsub(r,s):输入文件中用s替换r
gsub(r,s,t):在t中用s替换r
index(s,t):返回s中字符串第一个t的位置
length(t):返回t的长度
match(s,t):测试s中是否包含匹配t的字符串
split(r,s,t):以t为分隔符,将r分解后放入s中。
sub(r,s,t):将t中第一次出现r的地方换为s
substr(r,s):返回字符串,从s开始的后缀部分
substr(r,s,t):返回字符串r中从s开始长度为t的后缀部分
10、条件语句和循环语句
支持if,ifxxelsexx,while,do xx while xx,for (条件判断可以使用~做模糊匹配)
11、数组的使用
1、shell脚本中的数组标记可以带小数点
2、
可以用这种方式遍历数组:for (variable in array)
可以使用这种方式做条件判断if (“10.15” in data)

二、常用技巧

1、匹配关键词(可用关系运算符或布尔运算符)
awk '/^$/{print "This is a blank line."}' test.sh(匹配空行)
awk '/^$/{print x++}' test.sh (匹配空行并打印出数量)
awk '$1~/root/'xxx(匹配第一个域中包含root项)
awk '$0~/root/'xxx(匹配全域中包含root项)
awk '$0!~/root/'xxx(匹配全域中不包含root项)
awk '{if($3>$4) print $0}' xxx(使用条件语句匹配)
awk '{if($3\==10||$4==10) print $0}'(多条件精确匹配)
awk '{if($3~10||$4
Linux 中,`sed` 命令是一个非常强大的流编辑器,可以用来对文件内容进行高效的查找、替换、插入、删除等操作。其中,`-i` 选项允许直接对文件内容进行修改,而无需手动打开文件进行编辑。这种特性在处理大文件时尤其有用,例如处理包含上百万行的文件时,使用 `sed -i` 可以避免因文件过大而导致编辑器响应迟缓或崩溃的问题[^1]。 ### 替换文件内容的基本用法 要使用 `sed -i` 命令替换文件内容,基本语法如下: ```bash sed -i 's/旧内容/新内容/g' 文件名 ``` - `s` 表示替换操作。 - `/旧内容/新内容/` 是替换的格式,`g` 表示全局替换(即替换所有匹配项)。 - 如果只想替换每一行中第一个匹配的内容,可以省略 `g`。 #### 示例 假设有一个文件 `example.txt`,其内容如下: ``` hello world hello linux hello sed ``` 执行以下命令: ```bash sed -i 's/hello/hi/g' example.txt ``` 执行后,文件内容将变为: ``` hi world hi linux hi sed ``` ### 使用其他分隔符 默认情况下,`sed` 使用斜杠 `/` 作为分隔符。然而,如果你需要在替换文本中使用斜杠,可以选择其他字符作为分隔符,例如 `|` 或 `#`: ```bash sed -i 's|/usr/local|/opt|g' example.txt ``` 该命令会将文件中所有出现的 `/usr/local` 替换为 `/opt`,避免了因路径中包含斜杠而需要转义的问题[^3]。 ### 替换特定行的内容 `sed` 还支持对文件中特定行的内容进行替换。例如,仅替换第 2 行的内容: ```bash sed -i '2s/old/new/' example.txt ``` 也可以替换从第 A 行到第 B 行的内容: ```bash sed -i 'A,Bs/old/new/g' example.txt ``` ### 替换包含特殊字符的内容 如果要替换的内容中包含特殊字符(如 `/`、`.`、`*` 等),建议使用反斜杠 `\` 对这些字符进行转义,或者选择其他分隔符以简化操作。例如,替换包含 `/` 的字符串: ```bash sed -i 's|http://example.com|https://example.com|g' example.txt ``` ### 注意事项 - **备份文件**:使用 `sed -i` 会直接修改原文件。为了避免误操作导致的数据丢失,可以在使用 `-i` 选项时加上一个后缀,这样 `sed` 会自动创建一个备份文件: ```bash sed -i.bak 's/old/new/g' example.txt ``` 上述命令会在修改 `example.txt` 的同时,生成一个名为 `example.txt.bak` 的备份文件。 - **变量替换问题**:如果你尝试在 `sed` 命令中使用 Shell 变量,需要注意变量的作用域和引用方式。例如: ```bash old="hello" new="hi" sed -i "s/$old/$new/g" example.txt ``` 在这种情况下,确保使用双引号 `"..."` 来包裹 `sed` 命令,以便变量能够被正确展开。否则,如果使用单引号,变量将被视为字面字符串[^5]。 - **替换未知字符串**:对于某些复杂场景,如替换文件中未知的随机字符串(例如密码),`sed` 的能力是有限的。此时需要结合正则表达式或其他工具(如 `awk` 或 `perl`)来实现更复杂的模式匹配和替换操作[^4]。 --- ###
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值