sed、awk

最新推荐文章于 2025-11-07 18:30:16 发布
原创 最新推荐文章于 2025-11-07 18:30:16 发布 · 310 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文介绍如何使用awk和sed命令从文本文件中删除包含特定字符串的所有行。通过两个实用的命令行示例，展示了如何高效地过滤文本数据。

删除文本文件t0.txt 中所有包含有“我是”的行

awk '!/我是/ {print $0}' t0.txt  > t1.txt


sed '/我是/d' t0.txt > t1.txt


shell 中的grep sed awk命令
Tpw12qaz的博客
09-05 1496
处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。在 Linux/UNIX 系统中，awk 是一个功能强大的编辑工具，逐行读取输入文本，默认以空格或tab键作为分隔符作为分隔，并按模式或者条件执行编辑命令。3.编写一个管道命令序列，首先使用grep查找包含特定模式的行，然后使用tr进行大小写转换，接着使用sort进行排序，最后使用uniq去除重复行。
grep sed awk 结合使用
HSJ0170的博客
05-11 1994
文件准备： 查找文件： test_file_00.txt里面 lsb 的行， 然后删除找到的第一行， 最后截取以;分割的行的最后一列（第四列） 方式一、 nl test_file_00.txt | grep lsb | sed '1d' | awk -F ";" '{print $4}' 方式二、 nl test_file_00.txt | grep lsb | sed '1d' | awk 'BEGIN{FS=";"} {print $4} END{}' sed 参数： sed '1a 第一行添
linux三剑客：sed awk grep
とうーうぐん
01-04 681
linux三剑客，sed awk grep的基本使用 为了日后工作方便处理和查看日志
sed awk基础使用
qq_22159699的博客
08-02 519
sed 一般用于对文本内容做替换 awk 一般用于对文本内容进行统计，按需要格式输出 sed sed的工作方式 1、将文件以行为标准读入到内（模式空间） 2、使用sed的每个脚本对该行进行操作 3、处理完后输出该行 替换命令 s -e 执行多个替换命令 -i 保存替换 -r 支持拓展正则表达式 sed's/old/new/'filename sed's/old/new/'filename1 filename2 sed -e 's/old/new/' -e 's/old/new/' filename sed
linux awk sed经典题,grep sed awk 练习题
weixin_36068015的博客
05-25 1558
sed 练习题把/etc/passwd 复制到/root/test.txt，用sed打印所有行打印test.txt的3到10行打印test.txt 中包含 ‘root’ 的行删除test.txt 的15行以及以后所有行删除test.txt中包含 ‘bash’ 的行替换test.txt 中 ‘root’ 为 ‘toor’替换test.txt中 ‘/sbin/nologin’ 为 ‘/bin/logi...
2.grep sed awk
JCWang的博客
05-15 634
三剑客grep sed awkgrepsedsed查看信息用法:sed添加信息用法:sed删除信息用法:sed替换信息用法: grep grep -i --- 忽略大小写过滤信息 grep -A --- 将指定信息后几行进行过滤 grep -B --- 将指定信息前几行进行过滤 grep -C --- 将指定信息为中心,附近几行信息做过滤 grep -o --- 只显示过滤筛选的信息 grep -E --- 识别扩展正则符号 grep -c --- 统计筛选出现行数 grep -
sed和awk命令
2401_83784774的博客
05-17 1302
读取：读取文件每一行的数据并依次加入缓存当中（默认的从第一行开始读取）执行：使用定义的增删查改命令处理缓存中的数据显示：将处理过后的命令输出显示到屏幕上 sed -e '操作命令' 目标文件 sed -f 脚本文件 目标文件 sed -i 注：sed 多条操作命令有两种表现方式根据行号区间在该行号区间下面插入整个文件内容将n到m行内容复制粘贴到末行将n到m行内容剪切粘贴到末行
awk和sed
m0_65865977的博客
05-21 1014
sed 是一种流编译器 流编译器会在编译器处理数据之前基于预先提供的一组规则来编辑数据流sed编译器可以根据命令来成功优酷数据流中的数据 这些命令要么命令行 要么存储一个命令文本文件中sed处理命令方式是从上往下处理。
系统命令三剑客grep sed awk
eating的博客
01-06 1117
grep 过滤筛选命令补充 语法格式： grep 参数 "筛选信息 符号做信息匹配 " 文件名 -E --- 可以识别特殊正则符号 | --- 正则符号 或者 -v --- 进行匹配信息取反过滤操作 -o --- 只显示过滤匹配的信息 -c --- 匹配的信息出现了多少次 sed命令使用方法 作用：可以直接编辑修改文件内容 语法格式： sed 参数 '条件 指令（改/添加/删除）' 文件信息 可以对文件进行：增 删 改 查 （1）查操作： 根据内容筛查文件信息： sed -n '/.
Linux文本三剑客：grep sed awk实战指南
最新发布
青蛙之家
11-07 1204
Linux文本处理三剑客（grep/sed/awk）及辅助命令全面解析。grep用于文本搜索，支持正则匹配和多种过滤选项；sed是流编辑器，可实现增删改查等文本操作；awk则是强大的编程语言，擅长结构化文本处理与字段分析。辅助命令包括：sort（排序）、uniq（去重）、tr（字符转换）和cut（字段截取）。文章详细介绍了各命令的语法、核心选项及典型应用场景，如grep过滤注释行、sed替换文本、awk计算字段总和等，帮助用户高效处理Linux系统中的文本数据。
精选资源
文本三剑客：grep sed awk
01-07
grep和正则表达式 什么是正则表达式： 正则表达式用于描述字符排列和匹配模式的一种语法规则。它主要用于字符串的模式分隔、匹配、查找及替换操作 元字符 * 重复匹配前一个字符0到多次 ...匹配除了换行符外任意一个...
sed awk学习
06-26
sed awk 学习笔记 SED 是一个“非交互式”的面向字符流的编辑器，它可以在一个地方指定所有的编辑指令，然后通过文件传递一次来执行他们。但是它在每次多于一行的处理能力方面有限制。SED 的优点是可以批量处理文件...
sed awk高级编程案例
08-09
在本文中，我们主要探讨了sed和awk两种工具在Linux环境下进行文本处理的各种高级用法，涉及从文件读取数据、字符串处理、字符编码转换和特殊字符替换等多个实用案例。接下来，我们将对各个案例进行详细解析。 首先...
Shell、awk、sed面试题汇总（无答案）.doc
07-07
Shell、awk、sed 面试题汇总 以下是从给定的文件中生成的相关知识点： Shell 1. 变量赋值：在 Shell 中，可以使用多种方法来赋值变量，包括直接赋值、使用 `read` 命令、使用命令行参数和使用命令的输出。 2. ...
精选资源
shell编程-文本文件处理（grep sed awk文本三剑客）
01-07
一、grep和正则表达式 1、正则表达式 以一串字符作为表达式向系统传达意思（过滤匹配数据），元字符是描述字符的字符，正则表达式是有一串字符和元字符构成的字符串，主要功能为文本查询和字符串操作，匹配文本 ...
Caused by: java.lang.NoSuchMethodError: org.gradle.api.artifacts.ProjectDependency.getConfiguration(
litoujkl的专栏
01-21 9212
可能性的一种： 如果 build.gradle  文件包含 spring-boot-gradle-plugin，升级其版本 例如  '1.5.2.RELEASE'
windows主机与虚拟机linux互通
litoujkl的专栏
08-05 2543
1、建立windows loopback adapter:      Computer--->Manage--->Device Manager--->CNXXXXX--->Add legacy hardware      计算机--->（右键）管理--->设备管理----->计算机名称（右键）---->添加过时硬件 单击next：选择Search for and instal
gradle springboot项目打Jar包
litoujkl的专栏
01-21 1708
build.gradle：spring-boot-gradle插件、指定主类类名 classpath("org.springframework.boot:spring-boot-gradle-plugin:$springBootVersion") jar { manifest { attributes 'Main-Class': 主类类名 } } 运行 gra
CentOS中gerrit + jenkins整合
litoujkl的专栏
07-31 1401
jenkins中gerrit server的配置： Hostname: gerrit服务器的主机名或者IP地址 Frontend URL: gerrit web页面的地址 SSH Port: 29418 Username: 登陆gerrit的用户名 email:同上用户名的email SSH Keyfile: /var/lib/jenkins/.ssh/id_rsa （
sed awk区别
05-11
<think>好的，用户想了解sed和awk之间的区别及使用场景。首先，我需要回忆一下这两个工具的基本功能和他们各自的特点。根据之前提供的引用资料，比如引用[3]提到grep擅长查找，sed擅长修改，而awk擅长数据切片和格式化，这应该是一个好的切入点。 首先，我应该明确sed和awk的不同设计目标。sed主要是流编辑器，用于对文本进行逐行处理，执行替换、删除、插入等操作。而awk更偏向于编程语言，能够处理结构化的文本数据，比如按列处理。用户可能需要具体的例子来理解两者的差异，比如替换文本中的字符串，用sed可能更直接，而处理表格数据用awk更方便。 然后，我需要考虑用户可能的实际使用场景。例如，用户可能需要进行批量文本替换，这时候sed更合适；或者需要处理日志文件，提取特定列的数据，这时候awk会更高效。引用[4]中提到的提取文件指定行之间的代码的例子，结合了awk和sed，说明两者可以互补使用。 接下来，用户可能想知道性能方面的差异，但根据已有的资料，没有直接提到性能比较，可能需要避免猜测。不过可以提到sed在处理简单替换时更高效，而awk在处理复杂数据时更灵活。 另外，语法结构的不同也很重要。引用[2]中提到了awk的结构，包括BEGIN和END块，而sed通常是一行命令。这可以作为两者的另一个区别点。 还要注意用户可能混淆两者的功能，比如用awk做替换或用sed处理列数据，这时候需要指出各自的强项。例如，虽然sed可以处理行内的模式，但awk的字段分割功能更适合列处理。 最后，总结两者的主要区别，强调sed适合行级文本编辑，而awk适合结构化数据处理，并给出典型的使用场景，帮助用户根据需求选择合适的工具。同时，可能需要生成相关问题，比如如何选择工具，或者两者结合使用的例子，但根据用户的问题，可能只需要专注于区别和场景。</think>### sed和awk的区别及使用场景分析 --- #### **核心区别对比表** | 特性 | sed (流编辑器) | awk (文本分析器) | |-----------|--------------|----------------| | 设计定位 | 文本流编辑 | 结构化数据处理 | | 处理单位 | 按行处理 | 按列/字段处理 | | 编程能力 | 简单命令模式 | 完整编程语言支持 | | 典型场景 | 替换/删除/插入 | 数据提取/格式转换/统计 | | 正则表达式复杂度 | 基础正则语法 | 支持扩展正则表达式 | | 字段处理能力 | 弱（需手动分割） | 强（自动字段分割） | --- #### **详细区别说明** 1. **设计目标差异** - **sed**：专注于*流式文本编辑*，设计用于执行`过滤-处理-输出`的线性工作流。例如批量替换文本中的字符串： ```bash sed 's/old/new/g' file.txt # 全局替换old为new[^3] ``` - **awk**：构建为*数据报表生成工具*，支持`字段分割+条件判断+数学运算`。例如计算CSV文件第二列总和： ```bash awk -F',' '{sum+=$2} END{print sum}' data.csv ``` 2. **数据处理维度** - **sed** 以*行*为处理单位，适合处理连续文本流。如删除空行： ```bash sed '/^$/d' input.log ``` - **awk** 以*字段*为处理单位，默认按空格/TAB分割列。如提取进程CPU占用： ```bash ps aux | awk '{print $3,$11}' # 显示CPU%和命令名[^5] ``` 3. **编程能力对比** - **sed** 使用受限的`命令模式`，支持基础逻辑操作： ```bash sed '/error/p; /debug/d' app.log # 打印含error的行，删除含debug的行 ``` - **awk** 提供完整的编程结构（变量/数组/函数），如统计不同状态码出现次数： ```bash awk '{status[$9]++} END{for(s in status) print s,status[s]}' access.log ``` --- #### **典型使用场景** 1. **优先使用sed的情况** - ✅ 批量替换文件内容（如版本号更新） - ✅ 删除/保留特定模式的行 - ✅ 简单文本格式调整（如行号添加） *示例*：转换Windows换行符为Unix格式 ```bash sed -i 's/\r$//' script.sh ``` 2. **优先使用awk的情况** - ✅ 表格数据提取（如日志分析） - ✅ 数据统计计算（如求平均值/总和） - ✅ 复杂格式转换（如CSV转Markdown表格） *示例*：生成Apache日志状态码分布报告 ```bash awk '{print $9}' access.log | sort | uniq -c | awk '{print "状态码",$2,"出现次数",$1}' ``` --- #### **协同工作模式** 两者常通过管道组合使用，例如提取Nginx日志中响应时间大于1秒的请求： ```bash awk '$NF > 1 {print $7}' access.log | sed 's/\?.*//' | sort | uniq -c ``` ▸ `awk`筛选慢请求并提取URL路径 ▸ `sed`去除URL参数 ▸ 最终统计高频慢接口[^4] ---
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值