【Linux】文本处理命令grep

grep 是一个在 Unix 和类 Unix 操作系统中广泛使用的命令行工具，用于搜索文本。grep 命令非常强大，因为它可以快速地在大量文本中搜索特定的模式（patterns）。

以下是 grep 的一些主要特性：

1. 模式匹配：grep 允许用户指定一个模式（可以是简单的字符串或复杂的正则表达式），然后在输入的文件中搜索匹配该模式的文本行。

2. 递归搜索：grep 可以递归地在目录结构中搜索文件，查找包含指定模式的文件。

3. 多种选项：grep 提供了多种命令行选项，允许用户控制搜索的行为，比如忽略大小写、只打印匹配行的行号、排除某些文件类型等。

4. 管道和过滤器：grep 可以与其他命令结合使用，通过管道（|）传递数据给 grep 或从 grep 接收数据，使其成为文本处理管道中的重要工具。

5. 高效：grep 是用 C 语言编写的，执行速度非常快，特别适合于处理大型文件。

6. 跨平台：虽然 grep 最初是为 Unix 系统设计的，但它也被移植到了其他操作系统，包括 Linux、macOS、Windows（通过 Cygwin 或 WSL）等。

7. 正则表达式支持：grep 支持基本的正则表达式（BRE）和扩展的正则表达式（ERE），这使得它在文本搜索时非常灵活。

8. 文件处理：grep 可以读取来自文件的内容，也可以直接从标准输入（stdin）读取数据。

grep 命令的基本语法如下：

grep [options] pattern [file...]

其中 [options] 是可选的命令行参数，pattern 是要搜索的模式，[file...] 是要搜索的文件列表。如果未指定文件，grep 会从标准输入读取数据。

基础练习： grep 命令的练习

1：显示 /var/log/syslog 文件中包含 “error” 字符串的所有行。

命令：

grep "error" /var/log/syslog

2：显示 /var/log/syslog 文件中包含 “Error”（不区分大小写）的所有行。

命令：

grep -i "Error" /var/log/syslog

3：显示 /var/log/syslog 文件中包含 “warning” 字符串的所有行，以及这些行的行号。

命令：

grep -n "warning" /var/log/syslog

4：在 /var/log 目录及其所有子目录中搜索包含 “user” 字符串的文件，并显示这些文件的路径和匹配的行。

命令：

grep -r "user" /var/log

5：显示 /var/log/apache2/access.log 文件中包含 IPv4 地址的所有行。

命令：

grep -E "([0-9]{1,3}\.){3}[0-9]{1,3}" /var/log/apache2/access.log

6：显示 /var/log/apache2/access.log 文件中不包含 “localhost” 字符串的所有行。

命令：

grep -v "localhost" /var/log/apache2/access.log

7：显示 /var/log/user.log 文件中所有匹配 “user[0-9]” 模式的文本，例如 “user1”、“user2” 等。

命令：

grep -o "user[0-9]" /var/log/user.log

8：显示 /var/log/cron.log 文件中不包含 “success” 字符串的所有行。

命令：

grep -v "success" /var/log/cron.log

9：统计 /var/log/auth.log 文件中包含 “failed” 字符串的行数，并显示这个数字。

命令：

grep -c "failed" /var/log/auth.log

10：在 /var/log 目录及其所有子目录中搜索包含 “update” 字符串的文件，但会排除所有 .gz 文件。

命令：

grep -r --exclude="*.gz" "update" /var/log

进阶练习：结合 grep 和管道符 | 的练习

1：在 /etc/passwd 文件中查找所有以 “n” 开头的行，并显示这些行的第1个字段。

命令：

grep "^n" /etc/passwd | cut -d":" -f1

2：从 /etc/hosts 文件中找出包含 “localhost” 的行，并统计这些行的数量。

命令：

grep "localhost" /etc/hosts | wc -l

3：在 /var/log/syslog 文件中搜索包含 “error” 的行，并将这些行的内容复制到名为 “error.log” 的新文件中。

命令：

grep "error" /var/log/syslog > error.log

4：在 /etc/services 文件中搜索所有与 “http” 相关的行，然后使用 awk 提取这些行的第2个字段（通常是端口号）。

命令：

grep "http" /etc/services | awk '{print $2}'

5：在 /etc/passwd 文件中搜索所有包含数字的行，然后使用 sort 命令对这些行进行排序。

命令：

grep "[0-9]" /etc/passwd | sort

6：在 /var/log/syslog 文件中搜索包含 “error” 的行，然后使用 tail 命令显示最后10行包含 “error” 的行。

命令：

grep "error" /var/log/syslog | tail -n 10

7：在 /etc/passwd 文件中搜索所有行，然后使用 uniq 命令去除重复行。

命令：

grep "" /etc/passwd | sort | uniq

8：在 /var/log/syslog 文件中搜索包含 “error” 的行，然后使用 sed 命令替换 “error” 为 “issue”。

命令：

grep "error" /var/log/syslog | sed 's/error/issue/g'