shell常用工具与脚本

一、Shell 常用工具

1. grep

• 功能：用于在文本文件中搜索指定的模式。可以是简单的字符串，也可以是复杂的正则表达式。
• 示例：
  • 假设我们有一个名为example.txt的文件，内容如下：

  apple
  banana
  cherry
  

   
  • 要查找包含an的行，可以使用命令grep an example.txt，输出结果为

  banana
  

• 常用选项：
  • -i：忽略大小写进行匹配。例如grep -i an example.txt会同时匹配An、AN等情况。
  • -v：反向匹配，输出不包含指定模式的行。如grep -v an example.txt会输出apple和cherry所在的行。
  • -n：显示匹配行的行号。例如grep -n an example.txt会输出类似2:banana的结果，表示banana在文件的第 2 行。

2. awk

• 功能：一种强大的文本处理工具，主要用于从文本文件或者标准输入中按行读取内容，并进行分割、处理和输出。
• 示例：
  • 同样对于example.txt文件，我们可以使用awk来打印每一行的第一个字段（默认以空格或制表符分隔）。命令为awk '{print $1}' example.txt，输出结果为：
   

  apple
  banana
  cherry
  

• 常用选项和操作：
  • -F：指定分隔符。例如，如果文件是以逗号分隔的，我们可以使用awk -F, '{print $1}' file.csv来处理。
  • 条件判断：可以在awk中使用条件语句。比如awk '{if ($1 ~ /^a/) print $1}' example.txt，这个命令会打印以a开头的行的第一个字段，输出为apple。

3. sed

• 功能：用于对文本文件进行编辑操作，如替换、删除、插入等。
• 示例：
  • 对于example.txt文件，要将所有的banana替换为orange，可以使用命令sed 's/banana/orange/g' example.txt，输出结果为：

  apple
  orange
  cherry
  

• 常用选项：
  • -i：直接在原文件中进行修改。注意使用这个选项时要谨慎，因为会直接改变文件内容。例如sed -i 's/banana/orange/g' example.txt会直接修改example.txt的内容。
  • -n：取消默认的输出，只输出经过p（打印）命令处理的行。例如sed -n 'p' example.txt等同于cat example.txt，但可以结合其他命令使用来实现更复杂的输出控制。

二、Shell 脚本

1. 脚本基础

• 定义：Shell 脚本是包含一系列命令的文本文件，这些命令按照一定的顺序执行，用于自动化完成系统管理、文本处理等任务。
• 示例脚本（简单备份脚本）：
  • 创建一个名为backup.sh的文件，内容如下：

  #!/bin/bash
  # 定义源文件和目标文件路径
  source_file="/home/user/data.txt"
  backup_file="/home/user/backup/data.txt.bak"
  # 检查源文件是否存在
  if [ -e $source_file ]; then
      cp $source_file $backup_file
      echo "备份完成。"
  else
      echo "源文件不存在。"
  fi
  

   
  • 这个脚本首先定义了源文件和目标文件的路径，然后检查源文件是否存在。如果存在，就将其复制到备份文件位置，并输出备份完成的消息；如果不存在，则输出源文件不存在的消息。
• 脚本执行：
  • 需要给脚本添加可执行权限，使用命令chmod +x backup.sh。
  • 然后可以通过./backup.sh（在脚本所在目录下执行）或者指定完整路径来运行脚本。

2. 变量和参数

• 变量定义：在 Shell 脚本中，变量可以使用变量名=变量值的方式定义，例如name="John"。
• 参数传递：Shell 脚本可以接收外部传递的参数。在脚本中，$1代表第一个参数，$2代表第二个参数，以此类推。例如，有一个脚本param.sh，内容如下：
   

  #!/bin/bash
  echo "第一个参数是：$1"
  echo "第二个参数是：$2"
  

   
  • 当我们使用./param.sh value1 value2来运行脚本时，会输出
   

  第一个参数是：value1
  第二个参数是：value2
  

• 环境变量：系统环境变量在脚本中也可以使用。例如PATH变量用于指定命令的搜索路径。可以在脚本中使用echo $PATH来查看当前的PATH设置。

3. 流程控制

• 条件判断（if - else）：
  • 示例脚本用于判断一个数字是否大于 10：

  #!/bin/bash
  number=15
  if [ $number -gt 10 ]; then
      echo "$number大于10"
  else
      echo "$number小于等于10"
  fi
  

   
  • 其中-gt是用于比较数字大小的操作符，-eq用于判断是否相等，-lt用于判断是否小于等。
• 循环（for 循环和 while 循环）：
  • for 循环示例：
    • 脚本用于打印 1 到 5 的数字：

    #!/bin/bash
    for i in {1..5}
    do
        echo $i
    done
    

  • while 循环示例：
    • 脚本用于计算 1 到 10 的数字之和：

    #!/bin/bash
    sum=0
    i=1
    while [ $i -le 10 ]
    do
        sum=$((sum + i))
        i=$((i + 1))
    done
    echo "1到10的和为：$sum"