使用sed过滤提取文本中的信息

最新推荐文章于 2025-05-11 20:44:17 发布
原创 最新推荐文章于 2025-05-11 20:44:17 发布 · 1.9k 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文介绍如何利用SED命令从日志文件中提取特定错误信息，并通过一系列文本处理指令，最终获取到去重后的关键文件名列表。 

sed -r -n -e '/ERROR/p' mntenu_check.log | sed -r -e '/\[.{8}\.mlf\]/!d' | sed -r -e 's/.*\[(.{8})\.mlf\].*/\1/g' | uniq > filenamesTobeRemoved.log

NOTE：显示的不正确，请用plain text来看和拷贝。

1. 第一步，在文件中将含有"ERROR"字符串的行输出。-n 与p的配合使用

2. 第二步，仅输出含有[XXXXXXXX.mlf]的行。

3. 第三步，提取出XXXXXXXX的信息，用的是s,g配合的替换操作

4. 第四步，使用uniq命令输出去重后的XXXXXXXX。注意，使用uniq之前要先排序，我这里第三步的输出必然是排好序的，所以就不用专门排序了。

sed -n过滤指定内容
weixin_53389944的博客
06-11 1029
Linux中，有时我们会分析较大的log文件，如果每个文件都手动进去查看的话效率会比较低，但每个文件的输出位置也不是固定的，可以结合sed命令来过滤关键字，使得过滤出我们想要看到的内容。下面我想使用sed命令过滤出文件中，含有shyn关键字那行以下，done关键字那行以上的内容。这条命令先使用sed查找并输出包含 “shyn” 关键字以下的内容，然后再使用另一个sed命令找到包含 “done” 关键字的行，并退出输出，这样就可以输出 “shyn” 关键字以下，“done” 关键字以上的内容。
文本查找和筛选工具(grep,find,sed)
12-21
文本查找和筛选工具(grep,find,sed)，介绍这三个命令的参数用法和大量实例
Linux 文本处理工具 - sed(用于过滤和转换文本)
毕加索的忧伤
12-13 3661
Linux 文本处理工具 - sed(用于过滤和转换文本) 文章目录Linux 文本处理工具 - sed(用于过滤和转换文本)简介常用参数动作说明实例 简介 sed 工作方式是按行处理的。 Linux sed 命令是利用脚本来处理文本文件。 sed 可依照脚本的指令来处理、编辑文本文件。 sed 主要用来自动编辑一个或多个文件、简化对文件的反复操作、编写转换程序等。 参考文章：https://www.runoob.com/linux/linux-comm-sed.html 官方文档：https://ww
Linux Shell 脚本编程（9）—文本过滤（sed命令）
lingfengliujian的博客
10-18 1546
Linux Shell 脚本编程（9）—文本过滤（sed命令）文本过滤 正则表达式 —Linux Shell 脚本编程（5）—文本过滤（正则表达式） grep 命令 —Linux Shell 脚本编程（6）—文本过滤（grep命令） find命令 —Linux Shell 脚本编程（7）—文本过滤（find命令） awk命令 —Linux Shell 脚本编程（8）—文本过滤
Linux中sed如何处理文本
07-27
通过理解sed的工作机制，如模式空间、保持空间、寻址以及正则表达式的使用，用户可以高效地对文本文件进行编辑、转换以及数据提取等工作。无论是日志分析、数据清洗还是自动化脚本的编写，sed都是一个不可或缺的工具...
使用sed grep工具过滤实例
11-07
1. **去除特殊符号**：首先，需要去除文本中的所有特殊符号，这些符号包括但不限于波浪线、引号、括号、星号等。 2. **按规则分割字符串**：接着，使用指定的分割符号对文本进行分割，并移除分割后的多余空格。同时...
【Linux文本处理】sed命令详解与实战：掌握基本语法、常用命令及cut工具使用方法
最新发布
08-27
通过大量实例演示sed在实际场景中的应用，如行号打印、文件内容修改、过滤注释与空行、提取配置信息等，帮助用户掌握自动化文本编辑技巧。; 适合人群：具备Linux基础操作经验，熟悉Shell命令行环境，从事系统管理、...
如何在Linux系统中综合运用grep、awk和sed进行复杂文本数据的批量提取和格式化？
10-28
例如，假设我们需要从一个包含访问日志的文本文件中提取特定字段并进行格式化，可以采用以下步骤：\n\n首先，使用grep命令来过滤出包含特定关键字的日志行。假设关键字为'ERROR'，可以使用如下命令：\n\n```\ngrep '...
shell sed过滤器详解
张勤一
07-05 7495
1. Sed简介sed 是一种在线编辑器，它一次处理一行内容。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有 改变，除非你使用重定向存储输出。Sed主要用来自动编辑一个或多个文件；简化对文件的反复操作；编写转换程序等。以下介绍
过滤某个时间段的关键字【linux 命令 sed】
脚踏实地，仰望星空
07-05 1450
过滤某个时间段的关键字： sed -n '/2021-07-01 09/,/2021-07-01 11/p' 文件名 | grep "关键字” 以上命令解释： -n抑制输出, p打印特定行的命令； 逗号 ( ,)分隔的两个地址指定地址范围。地址范围匹配从第一个地址匹配的行开始，一直持续到第二个地址匹配； grep: 查找文件里符合条件的字符串 扩展 sed(stream editor) 数据流编辑器, 流编辑器用于对输入流（文件或来自管道的输入）执行基本的文本转换。 虽然在某些方面类似于允许脚本化
grep sed awk命令学习过滤文件内容
liangmoren的博客
03-24 776
grepgrep [options] pattern [files]Search one or more files for lines that match a regular expression pattern. Exit status is 0 if any lines match, 1 if none match, and 2 for errors. See also egrep and
linux sed读取文件内容,linux sed
weixin_39910043的博客
05-10 1094
sed -n "/query/p" 2017-04-07.log |awk -F "," '{print $2}'| awk -F " " '{ if($1==8){print $9}}'sed命令的语法格式：sed的命令格式： sed [option] 'sed command'filenamesed的脚本格式：sed [option] -f 'sed script'filenamesed命令的...
Sed 命令实战：高效实现文本过滤与替换
weixin_64603931的博客
05-11 1439
在 Linux 系统的文本处理领域，Sed（Stream Editor，流编辑器）是一款功能强大且高效的工具。它能够对文本进行过滤和替换操作，无论是处理配置文件、日志数据，还是进行数据清洗，Sed 都能大显身手。接下来，我们就深入学习 Sed 命令的各种用法。
sed 过滤字符文本
chenbingchenbing的专栏
11-06 530
sed     's/$/chenbing/'  my.c   >my.c.temp  sed     's/chenbing$//'  my.c.temp   >my.c  这两行代码的作用是分别将字符串添加到行尾和从行尾去掉。
Linux命令之sed
wenxiaoba的博客
03-03 1249
Linux三剑客之sed命令，主要讲解了sed命令的使用
【Linux】常见截取命令sed、cut、awk
weixin_43990455的博客
03-16 2872
简单了解linux中sed、cut、awk的含义及使用
shell脚本查找、抽取指定字符串的方法(sed,grep,awk,cut)
weixin_41552582的博客
09-23 9905
最近使用：iwconfig wlan0 | sed 's/ /\n/g' | grep -i mode //查看wlan0模式 原理：先以空格为通配符，并将其替换成换行符“\n”；每一段字符串单独成行，再grep查找 在linux中经常要对一些动态的文本文件抽取指定的字符串，比如执行ps命令后想要获取指定的运行进程（如ps自己）的PID号(同一个进程每次启动的时候pid号是随机分配的)。该怎么办呢？当然，可以用一些截取字符串的方法，这里介绍一下用2种方法来解决这类问题。 一、sed+grep方法...
Linux命令_sed & 快速修改、删除、增加、过滤文件内容
m0_61066945的博客
07-31 5234
Linux 命令sed、文本操作三剑客之 sed 修改文件
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值