sed截取日志的各种用法

最新推荐文章于 2025-06-28 00:30:00 发布

原创最新推荐文章于 2025-06-28 00:30:00 发布 · 1.1k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#sed

linux 专栏收录该内容

48 篇文章

订阅专栏

本文回顾了如何使用sed命令快速定位并打印16-08-13后的日志，以及精确截取特定时间段和处理大文件的方法。还介绍了在vim中进行日志筛选的操作，适合IT人员日常维护和分析工作。

好久没用sed，这里记下来回忆一下

1.打印 16-08-13 到结尾的行

sed -n '/16-08-13/,$p' weixin/logs/catalina.out > /tmp/wx.log

2.截选时间段日志
“2021-02-04 09:25:55,606 后面跟日志内容 ”这样的
目标是需要将02-04的09:25:55 和09:28:08 之间的日志截取出来：
命令如下：

sed -n ‘/2015-05-04 09:25:55/,/2015-05-04 09:28:55/p’  logfile

这样可以精确地截取出来某个时间段的日志。

3.如果需要截取的日志太大，达到几个G的话，不能去vi打开文件:
根据之前的日志格式，使用正则表达式:

sed -n ‘/2020-11-17 09:[0-9][0-9]:[0-9][0-9]/,/2020-11-17 16:[0-9][0-9]:[0-9][0-9]/p’  logfile

4.vim编辑器内进行截取
截取七号九点到十点的内容保存为新的文件

:/20-09-07 09:00:00/,/20-09-07 10:00:00/ w 2

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

健康马m

关注关注

1
点赞
踩
0

收藏

觉得还不错? 一键收藏
2
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

万字长文搞懂Linux 字符截取命令：cut、awk、sed

吻等离子的博客

04-16

1145

Linux 系统中，日志文件、配置文件和命令输出通常包含大量文本数据。提取特定字段或列（如从日志中提取时间戳）。转换文本格式（如替换、分隔）。过滤和整理数据（如按条件筛选行）。cut是一个简单高效的工具，用于从文本行中提取特定部分。它支持按字符、字节或字段（以分隔符分割）进行截取，常用于处理结构化的文本数据（如 CSV 文件或命令输出）。awk是一个功能强大的文本处理工具，支持模式匹配、字段处理、计算和编程逻辑。

linux实战(一)----日志的截取-----文本过滤器grep、文本流式编辑器sed、报表生成器awk的运用

直到世界的尽头

12-25

8328

我们前面已经学习过 linux的性能监控,以及网络端口查询命令等等。怎么让我们查询到的信息按我们需要的格式显示生成。就是我们本章需要学习练习的。主要是grep,sed,awk3个命令的运用。 grep 作用 grep命令可以指定文件中搜索特定的内容，并将含有这些内容的行标准输出。 grep全称是Global Reg

2 条评论您还未登录，请先登录后发表或查看评论

linux系统下sed切割日志

JavaEE技术进阶之路

12-19

1570

linux系统下sed切割日志linux系统tomcat的日志文件catalina.out切割日志文件提取命令日志格式 linux系统tomcat的日志文件catalina.out切割日志文件过大导致不好分析日志,所以需要把我们需要的日志文件单独提取到另外一个文件日志文件提取命令 sed -n '/开始内容/,/结束内容/'p 日志文件>新文件 sed -n '/2019-12-10...

Linux Sed与日志截取

程序员青菜学厨记

08-20

700

sed是流编辑器，一次处理一行数据，它先把当前一行数据存储在临时缓存区，然后用sed命令处理缓存区内容，处理完成后把缓存区内容输出到屏幕，接着再处理下一行，一直到文件末尾，与awk处理方式是一样的，并且原文件不会被改动。grep、sed、awk号称Linux文本处理三剑客，grep用于文本过滤，sed适合行处理，awk适合列处理，awk以前有两篇文章介绍过，今天介绍一下sed的使用。当需要排查以前某一个时间段的日志，日志文件比较大没有办法直接用vi打开，这时可以用sed将当时的日志截取出来进行分析。

sed 截取日志内容

qq_33362684的博客

04-08

1070

我们常常会直接上服务器使用 cat ,head , tail 等命令来查看. 但是，当文件内容比较多的、比较大的时候，这些命令显然不太适用。用grep不太方便直接过滤出来，可以使用sed根据时间去查找。比如前几天查看tomcat log，发现catalina.out 文件已经11G，这个时候，定位问题比较困难了。这时可以按照时间，缩小范围，来定位问题。比如日志格式如下： 2021-04-07 22:04:00.002 [INFO] [realsystem.timer.TrimerManager] Tri

使用sed截取日志

qq_34362409的博客

07-30

3671

使用sed截取日志 1、截取weblogic日志： sed -n ‘/2020-07-21 14:05/, /2020-07-21 14:15/p’ node1.out > weblogic1.out 2、截取tomcat日志(日期格式根据文件变化)： sed -n ‘/2020-07-10 09:00/, /2020-07-10 09:05/p’ catalina.out > tomcat1.out 3、截取nginx日志： sed -n '/14/Jul/2020:15:00/,

Linux - Sed 命令（按时间截取日志）

11-14

1933

Linux - Sed 命令（按时间截取日志）

grep 命令全解析：从日志中高效提取关键信息

最新发布

测试者家园

06-28

1726

grep不仅是Linux/Unix系统下的经典命令，更是一种高效的文本处理思想的代表。本文将全面解析grep命令的强大功能，深入剖析其在日志分析中的实战应用，帮助你从“盲目翻日志”迈向“精准取证”。

非结构化日志破解术：awk与sed在嵌入式场景下的高阶实战（99%人不知道的技巧）

在嵌入式系统中，日志往往以非结构化文本形式输出，缺乏统一的字段分隔与时间戳规范，给故障排查带来巨大挑战。这类日志通常由内核、驱动或裸机程序直接打印，受限于资源无法引入ELK等重型分析工具。更严峻的是，...

sed 切割nginx日志文件问题

diyouda5540的博客

08-16

328

问题：使用 sed -n "/04\/Apr\/2016/,/05\/Apr\/2016/"p access.log > test.log 这句话无论如何也没办法成功，但是 sed -n "/05\/Apr\/2016/ ,$"p access.log > test.log 就能成功截取。最后发现sed的参数其实是查找已经存在的...

日志分割带有完整的说明，对linux上面产生的日志进行分割

04-04

日志分割带有完整的说明，对linux上面产生的日志进行分割日志分割带有完整的说明，对linux上面产生的日志进行分割

强大的 sed 和 gawk 处理日志文件

nhj074的专栏

04-26

520

Linux 中，我们经常会遇到对文件进行处理的需要，例如从大量日志文件中抽取目标信息进行分析等。这时就需要一款有力的工具，能够轻松实现文件信息的提取，修改。幸运的是 Linux 为我们提供了两个这样的工具。sed 和 gawk 几乎可以满足我们日常工作中99%以上的日志处理要求。 sed 编辑器 (stream editor) 从名字看出，sed 是针对文件流做处理的命令。它有如下特点：一...

sed截取时间段内的日志

weixin_45112997的博客

09-02

4893

sed、grep截取日志

@如何截取需要的日志？--sed@

小菜鸟的天地

07-26

3935

小知识，大用处今天在帮同事拉日志的时候，突然发现需要的日志太大了，然后就想着sed，然后按照要求拉取2011.07.25的日志，命令如下： sed -n '/2011.07.25/,$p' FO_GROUP~APP_OC4J~FO_GROUP~1.log > FO_GROUP~APP_OC4J~FO_GROUP~1-as31.log sed -i '/memcache/i\\= '

Linux 截取日志

是个吃不饱的人

04-15

1070

Linux 关于日志的截取

sed、awk截取日志

bob_tthp的博客

09-22

2037

awk ‘/字符串1/{a=1}a{b=b?b"\n"$0:$0;if(b~/字符串2/){print b;b=""}}’ file sed -n ‘/字符串1/{p;:1;n;:2;/字符串2/{p;b1};N;b2}’ file awk ‘/字符串1/{a=1}a{b=b?b"\n"$0:$0;if(b~/字符串2/){print b;b=""}}’ file sed -n ‘/字符串1...

Linux 通过 sed 命令过滤指定日期的日志文件并输出到新文件

a1513049385的博客

10-25

1210

【代码】Linux 通过 sed 命令过滤指定日期的日志文件并输出到新文件。

Linux日志文件切割的6种方法

IT屌丝

02-23

8771

介绍linux环境下日志文件切割处理6种命令和方法

sed 命令中的.*

06-04

<think>首先，用户的问题是：“我想了解sed命令中.*的用法或含义请问sed命令.*用法解释示例”。所以，核心是关于sed命令中的“.*”的。系统级指令：-所有行内数学表达式必须使用$...$格式。由于这不是数学主题，我应该尽量遵守。但sed是文本处理，可能不涉及数学表达式。如果有变量等，我会用$...$。-独立公式用$$...$$。-LaTeX语法正确：使用它来包装任何数学或相关内容。-使用中文回答。-生成相关问题：在回答后，添加相关问题部分。-回答中引用的段落末尾自然地添加引用标识：用户提供了引用[1]到[4]，所以我需要在回答中引用它们。引用标识如[^1]，需要对应提供的引用。用户可见层：-结构清晰，逐步解决问题，保证真实可靠。引用内容：-用户提供了引用：-[^1]:sed简介-[^2]:示例命令（插入空行）-[^3]:统计单词出现次数的示例-[^4]:sed命令详解，包括子串匹配示例用户的问题具体是“sed命令中.*的用法或含义”。在sed的正则表达式中，“.*”通常表示“零个或多个任意字符”，因为“.”匹配任意单个字符，“*”表示零个或多个前一个字符。关键点：-.：点表示匹配任何单个字符（除了换行符，除非指定）。-*：星号表示匹配前一个字符零次或多次。-.*：所以“.*”表示匹配零个或多个任意字符。用法：-在sed的替换命令中，如s/pattern/replacement/，“.*”用于匹配任意长度的字符串。-它常用于贪婪匹配，因为“*”是贪婪的，默认匹配尽可能长的序列。示例：-用户引用[4]中提到了子串匹配：echoaaaBBB|sed's/$[a-z]\+$$[A-Z]\+$/\2\1/'，但没直接用到“.*”。但我可以用这个解释。-我需要基于引用创建自己的示例，同时参考真实场景。步骤：1.**解释含义**：用简单中文解释“.*”是什么。2.**用法**：描述在sed中如何使用“.*”，如在查找替换、删除行等。3.**示例**：提供具体示例，基于sed命令。4.**引用**：在回答中引用相关部分。例如，如果在解释时提到子串匹配，就引用[^4]等。5.**结构**：-先简要介绍。-详细解释含义。-讲解用法。-给出多个示例。-结尾总结。-添加相关问题。相关问题：生成相关的问题部分。保证真实可靠：-我知道在正则表达式中，“.*”是基本概念，我能自信解释。-基于Linuxsed文档或经验。回答大纲：1.引言：介绍sed和“.*”的作用。2.含义解释：用中文解释“.*”表示零个或多个任意字符。3.用法：-在正则表达式中使用。-常见场景如替换命令s///。-贪婪性解释。4.示例：-示例1：简单替换（匹配任意字符）。-示例2：基于引用[4]的子串匹配扩展。-示例3：用户引用[2]或[3]，但用户引用[2]是关于插入空行的。-引用[2]:sed'/regex/{x;p;x;G;}'，其中/regex/可能用到“.*”。-我可以创建自定义示例。5.引用整合：在解释或示例后，自然地添加[^n]。6.相关问题：例如：-1.如何限制“.*”的贪婪性？-2.sed中其他常用正则表达式字符？-3.“.*”在非贪婪模式下如何使用？用中文回答。具体内容：-**引言**：sed是强大的文本处理工具，“.*”是其正则表达式中的常见模式[^1]。-**含义**：在sed的正则表达式中，“.”代表匹配任何单个字符（不包含换行符，除非指定），而“*”表示匹配前一个元素零次或多次。因此，“.*”组合起来表示匹配零个或多个任意字符序列[^4]。它是贪婪匹配，即匹配尽可能长的字符串。-**用法**：-常用在替换命令中，如s/pattern/replacement/。-例如，在删除行、替换内容等操作中匹配文本。-也可以用于行选择，如/regex/d其中regex可能包含“.*”。-**示例**：-示例1：简单替换。输入：echo"helloworld"|sed's/.*/replaced/'，输出："replaced"。这里“.*”匹配整个行。-示例2：基于子串匹配。如引用[4]中：echo"aaaBBB"|sed's/$[a-z]\+$$[A-Z]\+$/\2\1/'输出"BBBaaa"，但如果改为echo"sometext"|sed's/.*/(&)/'，会将整个行包裹在括号中[^4]。-示例3：插入空行。参考引用[2]，使用“.*”在特定行前后插入空行。如sed'/.*pattern.*/{x;p;x;G;}'文件，但简化。实际：sed'/regex/p;//!G'文件等。创建一个新示例。-新示例：删除包含特定词的行的内容：echo"startend"|sed's/.*start//'输出"end"，移除匹配“start”及之前的内容。-**总结**：".*"是强大但需小心使用的模式，常用于广泛匹配。-**相关问题**：-1.在sed中如何使“.*”非贪婪？-2.sed支持哪些其他正则表达式量词？-3.在使用“.*”时如何避免意外匹配？在回答中，每当提到引用内容时添加引用标识。</think> ### sed 命令中 `.*` 的用法和含义解释在 Linux sed 命令中，`.*` 是正则表达式中的一个基本模式，用于表示“零个或多个任意字符”（不包含换行符，除非指定了特定选项）[^4]。这种模式是 sed 正则表达式的核心组成部分，常用于文本的匹配、替换、删除等操作。下面我将从基础含义、具体用法和真实示例三个方面逐步解释，确保内容真实可靠（基于标准 sed 文档和参考引用）。 #### 1. `.*` 的含义 - **基本概念**：在 sed 的正则表达式中： - `.`（点）代表匹配任意单个字符（如字母、数字或符号），但它不会匹配换行符（在 sed 的默认行为中）。 - `*`（星号）是一个量词，表示匹配前一个字符（这里是点）零次或多次。 - 组合起来，`.*` 表示匹配零个或多个任意字符序列。这是一个“贪婪匹配”（greedy match），会尝试匹配尽可能长的字符串[^4]。 - **关键特性**： - **贪婪性**：默认情况下，`.*` 会匹配输入行中的最大可能序列。例如，在行 "hello world" 中，`.*` 会匹配整个字符串 "hello world"。 - **灵活性**：它常用于简化模式，避免指定确切字符数，特别适合在复杂文本中快速捕获未知内容。 - **边界**：如果要匹配包含换行符的文本，需要使用 sed 的 `-z` 选项（例如 `sed -z 's/.*/replacement/'`）或指定行范围。 #### 2. `.*` 的用法在 sed 命令中，`.*` 主要用于替换命令 `s/pattern/replacement/`，但它也可以用于其他命令如删除 (`d`)、打印 (`p`) 或插入 (`i`)。以下是常见场景： - **查找和替换**：`s/.*/replacement/` 将整个行替换为指定内容。 - **删除内容**：`s/pattern.*//` 删除从匹配点开始的后续文本。 - **捕获子串**：配合分组（如 `$...$`），`.*` 可以与反向引用（如 `\1`）结合使用，提取或修改特定部分[^4]。 - **行选择**：在地址范围中，如 `/start.*end/` 用于匹配包含 "start" 和 "end" 的行。使用要点： - **贪婪匹配控制**：sed 默认不支持非贪婪匹配（如 `.*?`），但可以通过技巧限制贪婪性（例如，使用更精确的模式替代 `.*`）。 - **语法格式**：必须在正则表达式中正确放置 `.*`，避免意外匹配（如以锚点 `^` 或 `$` 限制范围）。 - **高效性**：在大型文件处理中，过度使用 `.*` 可能导致性能问题，因为它是广泛匹配模式。 #### 3. 实际示例基于您提供的引用和我扩展的真实 sed 用法，下面提供多个示例。示例假设输入文本为简单字符串或文件操作，并使用终端命令展示。参考引用中的内容已整合其中。 ##### 示例 1：简单匹配和替换整个行 - **解释**：`.*` 匹配任意内容（包括空行），然后替换为指定文本。 - **命令**： ```bash echo "hello world" | sed 's/.*/replaced text/' # 输出: replaced text ``` - **输出**：`replaced text` - 这里，`.*` 匹配 "hello world"，并用 "replaced text" 替换它。 - **参考**：这种通用匹配常用于快速覆盖行内容[^1]。 ##### 示例 2：在匹配模式中捕获子串 - **解释**：使用分组 `$...$` 和反向引用 `\1`，结合 `.*` 提取文本片段。这在 sed 中用于修改或重新排列字符串。 - **命令**（基于引用[^4]扩展）： ```bash echo "start text end" | sed 's/start$.*$end/replacement\1/' # 输出: replacement text echo "aaa BBB" | sed 's/$.*$ $.*$/\2 \1/' # 输出: BBB aaa （修改了字符串顺序） ``` - **输出**： - 第一命令输出：`replacement text`（这里，`.*` 捕获 " text "，并用 `\1` 保留它）。 - 第二命令输出：`BBB aaa`，展示 `.*` 用于匹配任意字符序列以交换位置[^4]。 - **用法提示**：在子串操作中，`.*` 的强大之处在于它能动态适应输入长度。 ##### 示例 3：在特定行附近插入空行 - **解释**：使用 `.*` 匹配行内容，并配合 sed 命令插入空行。 - **命令**（参考引用[^2]简化）：假设文件 `test.txt` 包含： ``` line1 regex line2 line3 ``` 运行： ```bash sed '/regex.*/ { p; s/.*/new line/; }' test.txt ``` - **输出**： ``` line1 regex line2 new line line3 ``` - 这里，`regex.*` 匹配 "regex line2"，`p` 打印行，`s/.*/new line/` 替换为新文本。`.*` 确保匹配完整行。 - **参考**：sed 常用于脚本自动化中的文本调整[^2]。 ##### 示例 4：删除或截取部分文本 - **解释**：`.*` 可用于移除匹配点后的所有内容。 - **命令**： ```bash echo "prefix content suffix" | sed 's/prefix.*suffix//' # 输出空行 echo "begin middle end" | sed 's/begin.*//' # 输出: 空行（移除匹配点后文本） echo "123 start data" | sed 's/.*start //' # 输出: data（移除匹配点前文本） ``` - **输出**： - 第一命令输出空行（整个行被删除）。 - 第三命令输出：`data`（`.*` 匹配到 "start " 之前的内容并移除）。 - **用法提示**：在日志处理中，这种模式适用于清洗数据。 #### 总结 `.*` 是 sed 中最常用和灵活的正则模式之一，适用于各种文本处理任务[^1]。关键要记住其贪婪特性：它会匹配最长可能序列，这在替换操作中可能导致意外结果（如意外覆盖整行）。使用时，建议结合锚点（如 `^` 开头或 `$` 结尾）或更精确模式来约束范围。实践中，在脚本和命令行中使用 `.*` 能显著提高效率。 ### 相关问题 1. 在 sed 中如何使 `.*` 的匹配变为非贪婪（匹配最短序列）？ 2. sed 支持哪些其他正则表达式量词（如 `+`, `?`, `{ }`），它们如何与 `.*` 配合使用？ 3. 如何在 sed 中使用 `.*` 匹配包含换行符的文本？