shell
一、shell概述和shell 解析器
shell是一个命令行解释器,它接收程序或用户的命令,然后调用操作系统内核。
shell 是一个功能强大的语言,是用户或程序调用linux系统内核的媒介。
解析器有sh 与 bash
而sh最终调用的还是bash,sh是bash的软连接。
参考博客地址https://blog.youkuaiyun.com/Jackson00709/article/details/106086756
二、shell脚本入门
-
脚本格式
脚本开头#!/bin/bash,这是指定解析器。
案例1:创建一个脚本,输出hello world
echo “Hello”
新建一个脚本,并编译,然后执行
echo命令的作用是向用户显示一行文本。在脚本中输出提示信息、打印变量值、生成日志文件等等
./是自己调用自己执行,需要权限。而用sh和bash执行,是将脚本交给这两个解析器执行所以不需要权限。
chmod 777 是赋予文件读写执行的权限。
其中r(读取)权限对应数值4;w(写入)权限对应数值2;x(执行)权限对应数值1
-rw- r-- r-- . 就表示登录该系统的root用户有读取、写入的权限,而属于root组的成员有读取的权限,而其他不属于root组的用户只有读取的权限。
案例2:多命令脚本
在路径/app/newg下创建一个helloworld.txt,然后在这个文件中输入iloveyou。
其中**>>**的意思是将输出内容追加到目标文件中。如果文件不存在,就创建文件;如果文件存在,则将新的内容追加到那个文件的末尾,该文件中的原有内容不受影响。
它和>是有区别的:
> 是定向输出到文件,如果文件不存在,就创建文件;如果文件存在,就将其清空;一般我们备份清理日志文件的时候,就是这种方法:先备份日志,再用`>`,将日志文件清空(文件大小变成0字节);
三、shell中的变量
有两种,系统变量和自定义变量
1.常用系统变量
[linux@localhost datas]$ echo $HOME
/home/linux
[linux@localhost datas]$ echo $PWD
/home/linux/datas
[linux@localhost datas]$ echo $SHELL
/bin/bash
[linux@localhost datas]$ echo $USER
linux
2.自定义变量
基本语法
定义变量:变量=值
撤销变量:unset 变量
输出变量:echo $变量
声明静态变量: readonly 变量,注意:不能unset,没法删除,重启后清除
注意
-1 变量名由字母数字下划线组成,但不能以数字开头,环境变量名建议大写。
-2 等号两边不能留有空格
-3 在bash中,变量默认类型都是字符串类型,无法直接进行数值运算
-4 变量的值如果有空格,需要使用双引号或单引号括起来
如何将变量提升为全局变量供其他脚本使用?
使用export命令
案例:在hello脚本中输出变量E
3.特殊变量
有$n、$#、$*、$@、$?
$n (描述:n为数字,$0代表脚本名称,10以内参数用$1-9 表 示 , 10 以 上 的 需 要 用 大 括 号 包 含 , 9表示,10以上的需要用大括号包含,9表示,10以上的需要用大括号包含,{10})
脚本内用双引号;
$# (功能描述:获取所有输入参数个数,不计算$0本身,常用于循环)
$* (描述:代表命令行中所有的参数,把所有参数看成一个整体)
$@ (描述:也代表命令行中所有的参数,不过把每个参数区分对待)
对于$*和$@使用echo看不出来,但放入循环中就可以看出来。
$? (描述:最后一次执行命令的状态,0:正确执行、非0:失败)
四、运算符
有2种方式
第一种:$((运算式)) 或 $[运算式]
第二种:expr +,-,\*,/,% 加减乘除取余
注意: expr运算符间要有空格
五、条件判断
基本语法
[condition] (注意 condition前后要有空格)
常用判断条件
(1)两个整数之间比较
-lt (less than)小于
-le (less equal) 小于等于
-eq (equal)等于
-gt (greater than) 大于
-ge (greater equal) 大于等于
-ne (not equal) 不等于
(2)文件权限的判断
-r 有读的权限
-w 有写的权限
-x 有执行的权限
(3)文件类型判断
-f 文件存在并且是一个常规文件
-e 文件存在
-d 存在并且是一个目录
(4)多条件判断,使用&& 以及 || 。
案例:判断12是否大于10;判断helloworld.sh是否有写权限;判断目录文件是否存在
六、流程控制(重点)
if判断
基本语法:
if [ condition ];then
code代码
elif [ condition ];then
code代码
else
code 代码
fi
或
if [ condition ]
then
code代码
elif [ condition ]
then
code代码
else
code 代码
fi
注意:
[ condition ]条件判断中,中括号与条件之间必须有空格
if后要有空格,elif是else if的意思
case语句
基本语法
case $变量名 in
“值1”)
程序
;;
“值2”)
程序
;;
“值3”)
程序
;;
esac
for循环
基本语法:
方式一
for((初始值;循环条件;变量变化))
do
程序
done
方式二:
for 变量 in 值1 值2
do
程序
done
其中$*与$@似乎没区别,但加上双引号就不一样了
while循环
基本语法:
while [ 条件 ]
do
程序
done
注意要理解$用法,$A代表取出变量A的值。
七、读取控制台输入
只是为后续写的例子服务的类似于java中的scan。
基本语法
read(选项)(参数)
-p 指定读取值时的提示符
-t 指定读取值时等待的时间(秒)
八、函数
有2种,系统函数和自定义函数
1、系统函数:
basename 用于截取文件名称 |
---|
basename [string / pathname] [suffix] (描述:basename命令会删掉所有的前缀包括最后一个‘/’字符,然后将字符串显示出来) |
dirname 用于截取文件路径 |
---|
dirname 文件绝对路径 (描述:从给定的包含绝对路径的文件名中去除文件名(非目录的部分),然后返回剩下的路径(目录的部分)) |
2、自定义函数
基本语法:
# 格式
[ function ] funname[()]
{
Action:
[return int;] #一般不使用这种方式返回,而使用$?
}
funname
注意:
1)脚本从上至下执行,所以在调用函数之前时,先声明。
2)函数返回值只能通过$?系统变量获得,可以显示加: return返回,如果不加,将以最后一条命令运行结果作为返回值。return后跟数值n(0-255)
案例:计算2个输入数字的和
九、Shell工具(重点)
1.cut命令
基本语法:
cut命令从文件的每一行剪切字节,字符和字段并将这些字节,字符和字段输出
cut [选项参数] filename
-f 列号,提取第几列
-d 分隔符,按照指定分隔符分隔列
案例:
1)切割cut.txt第一列;切割第二列和第三列;只切割第三列
2)cut.txt中切割出guan
3)截取PATH中第二个:后的所有字符
2-代表第二列以及以后的所有列
4)切割ipconfig打印的ip地址,用ip addr
2.sed
sed是一种流编辑器,它一次处理一行内容,处理时,把当前处理的行存储在临时缓冲区中,成为“模式空间”,接着sed处理缓冲区中的内容,处理完成后,把缓冲区的内容送往屏幕,接着处理下一行,这样不断重复,直到文件末尾,文件内容并没有改变,除非你使用重定向存储输出
基本语法:
sed [选项参数] ‘command’ filename
-e 直接在指令列模式上进行sed的动作编辑
command命令功能描述
a 新增
d 删除
s 查找并替换
案例:准备sed.txt
将 mei nv 这个单词插入到第二行下;删除所有包含wo的行;
将wo替换成ni;删除第二行并将wo替换成ni
3.awk
awk 一个强大文件分析工具,把文件逐行的读入,以空格为默认分隔符将每行切片,切开的部分再进行分析处理
基本语法:
awk [选项参数] 'pattern1 {action1} pattern2{action2}..' filename
pattern:表示awk在数据中查找的内容,用正则表达式
action:在找到匹配内容时,所执行的一系列命令
选项参数:
-F 指定输入文件分隔符
-v 赋值一个用户定义变量
案例:
–准备数据
复制passwd文件,到当前目录下
cp /etc/passwd ./
然后可以使用chown命令更改文件所有者和组。
–搜索root开头的所有行,并输出第七列。搜索root开头的所有行,并输出第一列和第七列,中间以逗号分隔。并且所有行前添加列明user,在最后一行添加dage。
将用户id加一并输出。(是第三列)
awk内置变量
FILENAME 文件名
NR 已读的记录数也就是行数
NF 切割后,列的个数
案例:
统计passwd文件名,每行行号,每行列数
切割ip
查询sed.txt中空行所在行号
所以开头和结尾之间什么都不匹配就是空行。
4.sort
sort 命令是在Linux里非常有用,它将文件进行排序,并将排序结果标准输出
sort [选项] (参数)
选项:
-n 依照数值大小排序
-r 以相反的顺序排序
-t 设置排序时使用的分隔字符
-k 指定需要排序的列
案例:
数据准备,用:切分,然后以第二列排序;
十、面试题
1.使用linux命令查询file文件中空行所在行号
上面有命令
2.计算sort文件第二列的和并输出
awk -F : ‘{sum+=$2} END{print sum}’ sort.sh
3.shell脚本如何检查一个文件是都存在,若不存在如何处理
#!/bin/bash
if [ -f file.txt ];then
echo “cun zai”
else
echo “bu zai”
fi
4.对无序数字排序,并求和
sort -n test.txt | awk ‘{a+=$0;print $0}END{print “sum=”a}’
5.查找出/home下,所有文本文件内容中,包含shen的文件名称
grep -r “shen” /home | cut -d “:” -f 1