shell--awk（文本三剑客之一）

最新推荐文章于 2024-08-27 12:29:30 发布
原创 最新推荐文章于 2024-08-27 12:29:30 发布 · 200 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

awk

在这里插入图片描述

awk编程模型

在这里插入图片描述

正则表达式的扩展

awk Perl等还支持正则表达式扩展出来的一些元字符

符号意义
?匹配0个或1个在其之前的字符
+匹配一个或多个在其之前的字符
( )表示一个字符集合或用在expr中
竖线表示或，匹配一组可选的字符

awk模式匹配

在这里插入图片描述

1.将模式和动作写在terminal里面 后面接一个文件

在这里插入图片描述

2.-f 将awk写在一个文件里

在这里插入图片描述

3.以awk脚本的形式来执行awk命令

在这里插入图片描述

记录和域

在这里插入图片描述

1.域 $ +数字

在这里插入图片描述

2.$0所有域

在这里插入图片描述

3.$后跟表达式

在这里插入图片描述

4.tab被默认为连续的空格

在这里插入图片描述

5.-F 改变分隔符 以tab键为例

在这里插入图片描述
在这里插入图片描述

6.用+号，不管有多少个tab ，都看成一个tab键

在这里插入图片描述

在这里插入图片描述

7.环境变量FS和BEGIN改变分隔符

在这里插入图片描述

关系和布尔运算

在这里插入图片描述

1.匹配正则表达式

在这里插入图片描述

2.awk与条件语句(if if-else)

在这里插入图片描述
多条件精确匹配
在这里插入图片描述

表达式

在这里插入图片描述

1.统计input文件中的空白行

在这里插入图片描述
在这里插入图片描述

2.平均值的计算

在这里插入图片描述

在这里插入图片描述

系统变量

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

格式化输出

在这里插入图片描述

1.分隔换行输出

  • $2,$8表字符串 第二个域 第八个域
  • \t 代表tab键
    -\n 每输出两个域换行

在这里插入图片描述

2.awk的ascii字符与字符型字符的转换

在这里插入图片描述

3.printf 修饰符

-15表示字符串长度控制为为15位，左对齐，若字符串不足15位，则用空格补充。
在这里插入图片描述

内置字符串函数

在这里插入图片描述

1.OFS表示替换完成之后默认的输出的分隔域是什么，默认是空格

在这里插入图片描述
在这里插入图片描述

2.index:首位值 length:长度

在这里插入图片描述

练习

在这里插入图片描述1.
在这里插入图片描述
2.
在这里插入图片描述
3.

在这里插入图片描述
4.

在这里插入图片描述
5.

在这里插入图片描述
7.

在这里插入图片描述
8.

在这里插入图片描述

在这里插入图片描述

shell-sed、awk、grep三剑客常用场景
qq_42861526的博客
07-16 549
作用：返回src_dir下包含字符串func main()的所有go文件的文件名，返回结果支持for循环遍历-r:表示递归-l：表示只返回文件名，不返回匹配行。
文本三剑客------awk 文本处理语言
weixin_45697293的博客
11-19 755
文章目录awk简介awk工作原理print格式awk变量1.内置变量2. 自定义变量printf命令操作符常用的action分类awk控制语句1.if--else语法：2.while循环3.do-while循环4.for循环5.switch语句6.break和continue性能比较 awk简介 awk：报告生成器，格式化文本输出 版本：New awk（nawk），GNU awk（ gawk） gawk：模式扫描和处理语言 基本用法： awk [options] ‘program’ var=value fi
awk--文本分析的ak47
wanzaixiaoxin的专栏
10-07 729
简介 当你使用grep时，你想过滤查找，当你使用sed时，你想对原有文本处理，当你同时想做这两件事时（甚至对文本做一些统计分析工作时），你有想过用什么工具吗？不错，awk正是你想要的。 awk是一个强大的文本分析工具，相对于grep的查找，sed的编辑，awk在其对数据分析并生成报告时，显得尤为强大。简单来说awk就是把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行各种
Linux|文本处理三剑客之awk命令详解
wh的博客
07-10 2455
awk命令详解
awk编辑器
Katie_ff的博客
06-07 1865
awk 是一个功能强大的编辑工具，逐行读取输入文本，默认以空格或tab键作为分隔符作为分隔，并按模式或者条件执行编辑命令。以空格做为分隔符，多个空格他会自动压缩成一个a[1]=20;a[2]=30;20。
awk实现以tab分割
dadaoke的专栏
07-08 2万+
最近碰到一个日志文件格式，跟参数内容已tab作为分割服 为了统计按某些参数的量，需要提取 可以使用 awk -F'\t' '{print $1}' a.log 如果是shell中使用awk，使用下面这种方式 awk 'BEGIN{IFS='\t'}{print $1}' a.log 否则会出错，原因 ‘\t’ 是 shell默认分割符之一 ...
kafka计算机专业读法_kafka初学者必须知道的常用命令分享
weixin_39731456的博客
12-19 216
重新分配partition ，可以采用下面的命令：bin/kafka-reassign-partitions.sh--zookeeper指定zookeeper的连接地址，格式host:port--broker-list指定partition需要重新分配到哪些节点，格式为”0,1,2”--topics-to-move-json-file 指定JSON文件的地址，文件内容是需要重新分配的to...
精选资源
shell编程-文本文件处理（grep sed awk文本三剑客）
01-07
以一串字符作为表达式向系统传达意思（过滤匹配数据），元字符是描述字符的字符，正则表达式是有一串字符和元字符构成的字符串，主要功能为文本查询和字符串操作，匹配文本 大部分linux只支持基本的正则表达式。 hel...
shell–awk（文本三剑客之一）
01-07
awk awk编程模型 ...2.-f 将awk写在一个文件里 3.以awk脚本的形式来执行awk命令 记录和域 1.域 $ +数字 2.$0所有域 3.$后跟表达式 4.tab被默认为连续的空格 5.-F 改变分隔符 以tab键为例 6.用+
shell文本三剑客（grep、awk、sed）
最新发布
weixin_43612842的博客
08-27 1047
grepsed和awk被称为Linux三剑客，是因为它们在文本处理和数据操作方面极其强大且常用。：文本搜索工具，在文件中搜索符合正则表达式的文本内容，并打印匹配的行。：文本处理工具，主要用于对结构化数据进行格式化和拆分处理，进行数据统计和报告生成；：流编辑器，对文本进行插入、删除、替换、提取等操作；
awk高级应用
weixin_45969538的博客
01-09 425
awk流程控制 分支结构 单分支: if(条件){编辑指令} 双分支: if(条件){编辑指令}else{编辑指令2} 多分支: if(条件){编辑指令}else if(条件){编辑指令2}... else{编辑指令N} if(条件1){编辑指令1}else if (条件2){编辑指令2}else{编辑指令N} 单分支练习 [roo...
java IO总结 一篇很不错的
u011494298的博客
09-11 524
分类一：按操作方式（类结构） 字节流和字符流： 字节流：以字节为单位，每次次读入或读出是8位数据。可以读任何类型数据。 字符流：以字符为单位，每次次读入或读出是16位数据。其只能读取字符类型数据。 输出流和输入流： 输出流：从内存读出到文件。只能进行写操作。 输入流：从文件读入到内存。只能进行读操作。 注意：这里的出和入，都是相对于系统内存而言的。 节点流和处理流： 节点流：直接与数据源相连，读入或读出。 处理流：与节点流一块使用，在节点流的基础上，再套接一层，套接在节
[awk] 用-F指定多分隔符及正则表达式
热门推荐
MA Xi 的专栏
04-12 13万+
命令行选项 -F"[@ /t]" 告诉awk @, 空格和Tab都是字段分隔符，例如：awk -F"[@ /t]" '{print $2,$3}' test以@，空格，Tab键分割test文件的每一行，并输出第二、第三列。
linux用tab分割字符串,[awk] 用-F指定多分隔符及正则表达式
weixin_34024811的博客
04-29 2897
命令行选项 -F"[@ /t]" 告诉awk @, 空格和Tab都是字段分隔符，例如：awk -F"[@ /t]" '{print $2,$3}' test以@，空格，Tab键分割test文件的每一行，并输出第二、第三列。awk '$2~/^(126|yahoo)/{print $2, $3}' test如果改行的第二个字段以"123"或"yahoo"开始，则输出改行的第二、第三列。awk '$1...
awk 用法详解
博主是个懒蛋
11-16 5268
awk 用法：awk ' pattern {action} '   变量名    含义  ARGC   命令行变元个数  ARGV   命令行变元数组  FILENAME   当前输入文件名  FNR   当前文件中的记录号  FS   输入域分隔符，默认为一个空格  RS   输入记录分隔符  NF   当前记录里域个数  NR   到目前为止记录数  OFS   输出域
awk命令详解+示例
jsut_rick的博客
08-08 4万+
WK数据过滤工具(类似于grep，比grep强大) Awk编程语言/数据处理引擎 创造者：Aho、Weinberger、Kernighan 基于模式匹配检查输入文本，逐行处理并输出 通常用在Shell脚本中，获取指定的数据，单独使用时，可对文本数据做统计 #whichawk #rpm-qf/bin/awk 语法格式： 格式1：前置命令|awk[选项]‘条...
linux之awk命令
weixin_41831919的博客
10-15 213
awk、sed、grep更适合的方向： grep 更适合单纯的查找或匹配文本 sed 更适合编辑匹配到的文本 awk 更适合格式化文本，对文本进行较复杂格式处理 变量：分为内置变量和自定义变量;输入分隔符FS和输出分隔符OFS都属于内置变量。 内置变量就是awk预定义好的、内置在awk内部的变量，而自定义变量就是用户定义的变量。 FS(Field Separator)：输入字段分隔符， ...
awk命令总结
cnluxiansheng的博客
05-13 1035
这里就是使用NF便用变量（NF代表这一行的字段数量），查找以/bash结尾的行~ 表示包含!~ 表示不包含。
Linux awk命令详解
huangyimo的专栏
01-22 3117
一.  AWK 说明   awk是一种编程语言，用于在linux/unix下对文本和数据进行处理。数据可以来自标准输入、一个或多个文件，或其它命令的输出。它支持用户自定义函数和动态正则表达式等先进功能，是linux/unix下的一个强大编程工具。它在命令行中使用，但更多是作为脚本来使用。    awk的处理文本和数据的方式：它逐行扫描文件，从第一行到最后一行，寻找匹配的特定模式的行，并在这些行
shell的文本三剑客
08-24
Shell 的文本三剑客是指 grep、sed 和 awk。 1. grep (Global Regular Expression Print) 是一个强大的文本搜索工具，它可以搜索文件中符合指定模式的行，并将其打印出来。grep 支持正则表达式，可以用来快速过滤和查找特定的文本内容。 2. sed (Stream Editor) 是一个流式文本编辑器，它可以实现对文本的插入、删除、替换、追加等操作。sed 通常与正则表达式结合使用，对文本进行灵活的处理，常用于文本的批量处理和转换。 3. awk 是一种功能强大的文本分析工具，它可以从文本文件中提取数据，并按照指定规则进行处理和统计。awk 支持自定义变量、条件判断、循环和函数等特性，可以用于快速解析结构化的文本数据。 这三个工具在 Shell 脚本编程和命令行操作中非常常用，可以帮助用户高效地处理和操作文本内容。
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值