Shell教程

第1章 Shell概述

为什么要学习Shell脚本?

1.需要看懂 运维人员编写的Shell脚本

2.会编写一些简单Shell程序来管理集群、提高开发销量

概述

Shell是一个命令行解释器，它接收客户端的命令，然后调用操作系统内核。

第2章 解析器

查看Linux系统提供的解析器有哪些

cd /bin
ll | grep bash

查看系统默认的解析器

echo $SHELL

第3章 Shell脚本入门

1. 脚本格式
脚本以 #!/bin/bash 开头

2.第一个Shell脚本:helloworld

vi helloworld.sh
#!/bin/bash
echo "helloworld"

脚本的常用执行方式：
第一种：采用bash或sh+脚本的相对路径或绝对路径（不用赋予脚本+x权限）

sh helloworld.sh

第二种：采用脚本的相对路径或绝对路径执行脚本（必须具有可执行权限+x）

chmod 777 helloworld.sh
./helloworld.sh

注：第一种方式本质上是bash解析器帮你执行脚本，所以不需要执行权限。第二种方式是脚本需要自己执行，所以需要执行权限。

3.第二个Shell脚本：多命令处理
（1）需求：创建一个test.txt文件，给文件中增加hello world内容

#!/bin/bash
cd ~
touch test.txt
echo "hello world" >> test.txt

第4章 Shell中的变量

1. 常用系统变量
$HOME 、$PWD 、$SHELL 、$USER

2. 自定义变量
2.1：基本语法

• 定义变量：变量=值
• 撤销变量：unset 变量
• 声明静态变量：readonly变量，注意：不能unset

2.2：变量定义规则

• 变量名称可以由字母、数字和下划线组成，但是不能以数字开头，环境变量名建议大写。
• 等号两侧不能有等号。
• 在bash中，变量默认类型都是字符串类型，无法进行数值运算。
• 变量的值如果有空格，需要用单引号或双引号括起来。

2.3 ：变量可提升为全局变量，供其他Shell程序使用
export 变量名

3. 特殊变量：$n

基本语法

$n(功能描述：n代表数字，$0代表该脚本名称，$1-$9代表第一到第九个参数，10以上的参数需要用大括号包含，如${10})

4. 特殊变量：$#

基本语法

$#(获取所有输入参数的个数，常用于循环)

5.特殊变量：$*、$@

基本语法：

$* (代表命令行中所有的参数，把所有参数看成一个整体)

$@ (代表命令行中所有的参数，把每个参数区别对单，打印出来的结果和$*一样)

5. 特殊变量：$?

基本语法

$?(最后一次执行命令的返回状态，0代表执行成功，非0(具体数字有命令自己决定)代表执行失败)

第5章 运算符

1. 基本语法
（1）"$((运算式))“或”$[运算式]"
（2）expr +,-,*,/,% 代表加，减，乘，除，取余
注意：expr和运算符以及运算符相互之间要有空格

第6章 条件判断

1. 基本语法
[ condition ]
注意：前后要有空格

2. 常用判断条件
（1）两个整数之间比较

• = 字符串比较
• -lt 小于(less than)
• -le 小于等于(less equal)
• -eq 等于（equal）
• -gt 大于（greater than）
• -ge 大于等于（greater equal）
• -ne不等于（not equal）

（2）按照文件权限进行判断

• -r 有读的权限
• -w有写的权限
• -x 有执行的权限

（3）按照文件类型进行判断

• -f 文件存在并且是一个常规文件（file）
• -e文件存在（existence）
• -d文件存在并且是一个目录（directory）

（4）多条件判断
&& 表示前一条命令执行成功时，才执行后一条命令。
|| 表示前一条命令执行失败后，才执行下一条命令。

第7章 流程控制（重点）

7.1 if 语句

1.基本语法
if [ 条件表达式 ];then
程序
fi
或者
if [ 条件表达式 ]
then
程序
if

注意中括号前后都有空格,if后也要有空格

7.2 case 语句

1. 基本语法
case $变量名 in
“值1”)
程序
;;
“值2”)
程序
;;
…省略其他判断
*)
默认程序
;;
esac

7.3 for 循环

1. 基本语法
1.1 语法一

for((i=0;i<=100;i++))
	do
		执行程序
	done

1.2 语法二

for 变量 in 值1 值2 值3...
	do
		执行程序
	done

如下：

#!/bin/bash
for i in $*
	do
		echo "$i"
	done

7.4 while 循环

1. 基本语法

while [ 条件判断 ]
	do
		执行程序
	done

如下：

#!/bin/bash
s=0
i=1
while [ $i -le 100 ]
	do
		s=$[$s + $i]
		i=$[$i + 1]
	done
echo $s

第8章 read读取控制台输入

1. 基本语法
read (选项) (参数)

选项

-p：指定读取值时的提示符

-t：指定读取值时等待的时间（秒）

参数

变量：指定读取值的变量名

例如：提示7秒内，读取控制台输入的名称

#!/bin/bash
read -t 7 -p "Enter your name in 7 seconds" NAME
echo $NAME

第9章 函数

9.1 系统函数

（1） basename 基本语法
basename[string / pathname] [suffix]
功能描述：basename会删掉所有的前缀包括最后一个（’/’）字符，然后将字符串显示出来

注意：suffix为后缀，如果指定了suffix，basename会将pathname或string中的suffix去掉。

例如：截取/home/mydata/test.txt路径的文件名称

basename /home/mydata/test.txt
test.txt
basename /home/mydata/test.txt .txt
test

（2）dirname 基本语法
dirname 文件绝对路径
功能描述：返回文件的路径，不包含文件本身

9.2 自定义函数

1 基本语法

[ function ] funname[()]
{
	Action;
	[return int;]
}
funname;

注意：
1.必须先声明函数再调用，shell是逐行运行
2.函数返回值只能通过$?系统变量获得，如果不加return将以最后一条命令的执行结果作为返回值。return后跟数值n(0-255)

#!/bin/bash
function sum()
{
	s=0;
	s=$[$1+$2]
	echo $s
}
read -p "input paratemer1:" P1
read -p "input paratemer2:" P2
sum $P1 $P2

第10章 Shell工具（重点）

10.1 cut

cut的工作就是"剪"，就是在文件中负责剪切数据用的。cut命令从文件的每一行剪切字节、字符、字段并将他们输出。
基本用法
cut [选项参数] filename
说明：默认分隔符是制表符

选项参数

-f 列号，提取第几列

-d 分隔符，按照指定分隔符分割列

例如：
（1）切割第一列

cut -d " " if 1 cut.txt

（2）切割第二、三列

cut -d " " -f 2,3 cut.txt

（3）在cut.txt中切割出guan

cat cut.txt | grep guan| cut -d " " -f 1

（4）选取系统变量PATH变量值，第2个“:”后的所有路径

echo $PATH | cut -d : -f 3-

10.2 sed

sed是一种流编辑器，它一次处理一行内容。处理时，把当前处理的行存在临时缓冲区，成为“模式空间”，接着用sed命令处理缓冲区中的内容。处理完成后，把缓冲区的内容打印出来，接着处理下一行，直至文件末尾。文件内容并未改变，除非使用重定向存储输出。

基本语法
sed [选项参数] ‘command’ filename

选项参数

-e 直接在指令行模式上进行sed的动作比编辑

常用命令

a 新增，a的后面可以接字符串，在下一行出现

d 删除

s 查找并替换

如下：
（1）将“hello”插入到sed.txt第二行下面，打印

sed "2a hello" sed.txt

（2）删除sed.txt中所有包含wo的行

sed "/wo/d" sed.txt

（3）将sed.txt文件中的wo替换为ni

sed "s/wo/ni/g" sed.txt

（4）将sed.txt文件中第二行删除，并将wo替换为ni

sed -e "2d"  -e "s/wo/ni/g" sed.txt

10.3 awk

一个强大的文本分析工具，把文本逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行分析处理。

** 基本用法**

awk [选项参数] 'pattern1 {action1} pattern2{action2}...' filename

pattern：表示awk在数据中查找的内容，就是匹配模式
action：在找到匹配内容时所执行的 一系列命令

注意：只有匹配了pattern才会执行action。

选项参数

-F 指定输入文件分隔符

-v 赋值一个用户定义变量

例如：
（1）搜索password文件以root关键字开头的所有行，并输出该行的第7列。

#copy password到指定目录
cp /etc/passwd ./
#查看内容
cat passwd
#执行搜索和输出
awk -F : '/^root/{print $7}' passwd

（2）将passwd文件中的用户Id（第三列）数值加1并输出

awk -F : -v i=1 '{print $3+i}' passwd

10.4 sort

sort命令是在Linux里非常有用，它将文件进行排序，并将排序结果标准输出。

基本语法

sort (选项参数)  (参数)

选项参数说明：
-n 依照数值的大小排序
-r 以相反的顺序排序
-t 设置排序时所用的分隔字符
-k 指定需要排序的列

第11章 常见面试题

问题1：使用Linux命令查询file1中空行所在的行号

awk '/^$/{print NR}' file1

问题2：有文件chengji.txt内容如下：
张三 40
李四 50
王五 60
使用Linux命令计算第二列的和并输出

cat chengji.txt | awk -F " " '{sum+=$2} END{print sum}'

问题3： Shell脚本里如何检查一个文件是否存在？如果不存在该如何处理？

#!/bin/bash

if [ -f file.txt ]; then
	echo "文件存在"
else
	echo "文件不存在"
fi

问题4：用shell写一个脚本，对文本中无序的一列数字排序

cat test.txt
9
8
6
7
5
3
sort -n test.txt|awk '{a+=$0;print $0} END{print "SUM="a}'

问题5：请用shell脚本写出查找当前文件夹（/home）下所有的文本文件内容中包含字符串“shen”的文件名称

grep -r "shen" /home | cut -d ":" -f l