详解Bash命令行处理

CTF实战:从ECDSA签名漏洞到flag获取 本文详细解析了ECDSA签名算法在CTF比赛中的实战应用,重点探讨了随机数重用和参数泄露等常见漏洞。通过PWNHUB六月赛的例题,展示了如何从签名数据中恢复私钥并获取flag,同时提供了防御措施和实战技巧,帮助参赛者提升解题能力。 阅读详情
目录

前言
一、bash命令处理的12个步骤;
二、关于引用
三、eval的作用;

四、命令优先级表
五、鉴于一些学习中会遇到的困惑,我再给出一些有趣的命令

六、关于本文
七、相关文档


++++++++++++++++++++++++++++++++++++++++++++++++++++
正文
++++++++++++++++++++++++++++++++++++++++++++++++++++


前言

我看很多兄弟写脚本或命令时出现错误的主要原因,是因为不了解bash的命令行处理。我在这里总结了一下,大家可以参考一下。其中也涉及到双引号,单引号以及eval的技巧,我会一一讲述。

Shell从标准输入或脚本中读取的每行称为一个管道行,它包含一个或多个由0个或多个管道字符(|)分隔的命令。对每一个管道行,进行12个步骤的处理。

一、bash命令处理的12个步骤;

                            +-------------+           单引号
    |------------------------->|             |--------------------------|
    |  ----------------------->| 1.分隔成记号|---- ---------------|     |
    |  |   ------------------->|             |      双引号             |     |
    |  |   |                       +-------------+                                 |     |
    |  |   |                                ||                                           |     |
    |  |   |读取下一个命令    \/                                           |     |
    |  |   |     +-------------------------------------------+              |     |
    |  |   |     |                    2.                                           |    |     |
    |  |   ------|              检验第一个记号                       |    |     |
    |  |         |开放的关键字                    其他关键字   |    |     |
    |  |         |               非关键字                                   |     |     |
    |  |         +-------------------------------------------+               |     |
    |  |                              ||                                                  |     |
    |  |                              \/                                                  |     |
    |  |            +-----------------------------+                             |     |
    |  |  扩展别名  |           3. 检验第一个记号 |                |     |
    |  |------------|  别名                                        |               |     |
    |               |              不是别名                       |               |     |
    |               +-----------------------------+                              |     |
    |                                 ||                                                  |     |
    |                                 \/                                                  |     |
    |                           +--------------+                                    |     |
    |                           | 4.大括号扩展 |                               |     |
    |                           +--------------+                                    |     |
    |                                 ||                                                  |     |
    |                                 \/                                                  |     |
    |                           +--------------+                                    |     |
    |                           | 5.~符号扩展  |                                |     |
    |                           +--------------+                                    |     |
    |                                 ||                                                  |     |
    |                                 \/                                                  |     |
    |                           +--------------+       双引号                 |     |
    |                           |  6.参数扩展  |<-----------------         |     |
    |                           +--------------+                                          |
    |                                 ||                                                        |
    |                                 \/                                                        |
    |                    +------------------------------+                             |
    |                    |  7.命令替换(嵌套命令行处理)  |               |
    |                    +------------------------------+                             |
    |                                 ||                                                        |
    |                                 \/                                                        |
    |                           +--------------+      双引号                        |
    |                           |  8.算术扩展  |------------------ |              |
    |                           +--------------+                                    |     |
    |                                 ||                                                  |     |
    |                                 \/                                                  |     |
    |                           +--------------+                                    |     |
    |                           |  9.单词分割  |                                 |     |
    |                           +--------------+                                    |     |
    |                                 ||                                                  |     |
    |                                 \/                                                  |     |
    |                           +--------------+                                    |     |
    |                           | 10.路径名扩展|                          |     |
    |                           +--------------+                                    |     |
    |                                 ||                                                  |     |
    |                                 \/                                                  |     |
    |               +----------------------------------------+                |     |
    |               | 11.命令查寻:函数,内置命令,可执行文件|<---|-----|
    |               +----------------------------------------+
    |                                 ||
    |                                 \/
    |将参数带入下一个命令        +-------------+
    |----------eval--------------| 12.运行命令 |
                                 +-------------+

结合上面的插图,这里给出命令行的12个步骤。

1、将命令行分成由固定元字符集分隔的记号;

SPACE, TAB, NEWLINE, ; , (, ), <, >, |, &

记号类型包括单词,关键字,I/O重定向符和分号。

2、检测每个命令的第一个记号,查看是否为不带引号或反斜线的关键字。

如果是一个开放的关键字,如if和其他控制结构起始字符串,function,{或(,则命令实际上为一复合命令。shell在内部对复合命令进行处理,读取下一个命令,并重复这一过程。如果关键字不是复合命令起始字符串(如then等一个控制结构中间出现的关键字),则给出语法错误信号。

3、依据别名列表检查每个命令的第一个关键字;

如果找到相应匹配,则替换其别名定义,并退回第一步;否则进入第4步。该策略允许递归别名,还允许定义关键字别名。如alias procedure=function

4、执行大括号扩展,例如a{b,c}变成ab ac


5、如果~位于单词开头,用$HOME替换~。

使用usr的主目录替换~user。

6、对任何以符号$开头的表达式执行参数(变量)替换;


7、对形式$(string)的表达式进行命令替换;

这里是嵌套的命令行处理。

8、计算形式为$((string))的算术表达式;


9、把行的参数,命令和算术替换部分再次分成单词,这次它使用$IFS中的字符做分割符而不是步骤1的元字符集;

10、对出现*, ?, [ / ]对执行路径名扩展,也称为通配符扩展;

11、按命令优先级表(跳过别名),进行命令查寻;

12、设置完I/O重定向和其他操作后执行该命令。

二、关于引用

1、单引号跳过了前10个步骤,不能在单引号里放单引号
2、双引号跳过了步骤1~5,步骤9~10,也就是说,只处理6~8个步骤。

也就是说,双引号忽略了管道字符,别名,~替换,通配符扩展,和通过分隔符分裂成单词。
双引号里的单引号没有作用,但双引号允许参数替换,命令替换和算术表达式求值。可以在双引号里包含双引号,方式是加上转义符"\",还必须转义$, `, \。

三、eval的作用;

eval的作用是再次执行命令行处理,也就是说,对一个命令行,执行两次命令行处理。这个命令要用好,就要费一定的功夫。我举两个例子,抛砖引玉。

1、例子1:用eval技巧实现shell的控制结构for

用eval技巧实现shell的控制结构for。

[root@home root]# cat myscript1
#!/bin/sh
evalit(){
        if [ $cnt = 1 ];then
                eval $@
                return
        else
                let cnt=cnt-1
                evalit $@
        fi
        eval $@
}
cnt=$1
echo $cnt | egrep "^[1-9][0-9]*$" >/dev/null
if [ $? -eq 0 ]; then
        shift
        evalit $@
else
        echo 'ERROR!!! Check your input!'
fi
[root@home root]# ./myscript1 3 hostname
home
home
home
[root@home root]# ./myscript1 5 id |cut -f1 -d' '
uid=0(root)
uid=0(root)
uid=0(root)
uid=0(root)
uid=0(root)

注意:bash里有两个很特殊的变量,它们保存了参数列表。

$*,保存了以$IFS指定的分割符所分割的字符串组。
$@,原样保存了参数列表,也就是"$1""$2"...

这里我使用了函数递归以及eval实现了for结构。
当执行eval $@时,它经历了步骤如下:
第1步,分割成eval $@
第6步,扩展$@为hostname
第11步,找到内置命令eval
重复一次命令行处理,第11步,找到hostname命令,执行。

注意:也许有人想当然地认为,何必用eval呢?直接$@来执行命令就可以了嘛。

例子2:一个典型错误的例子

错误!这里给个典型的例子大家看看。

[root@home root]# a="id | cut -f1 -d' '"
[root@home root]# $a
id:无效选项 -- f
请尝试执行‘id --help’来获取更多信息。
[root@home root]# eval $a
uid=0(root)

如果命令行复杂的话(包括管道或者其他字符),直接执行$a字符串的内容就会出错。分析如下。
$a的处理位于第6步──参数扩展,也就是说,跳过了管道分析,于是"|", "cut", "-f1", "-d"都变成了id命令的参数,当然就出错啦。
但使用了eval,它把第一遍命令行处理所得的"id", "|", "cut", "-f1", "-d"这些字符串再次进行命令行处理,这次就能正确分析其中的管道了。

总而言之:要保证你的命令或脚本设计能正确通过命令行处理,跳过任意一步,都可能造成意料外的错误!

例子3:设置系统的ls色彩显示

eval $(dircolors -b /etc/dircolors)

eval语句通知shell接受eval参数,并再次通过命令行处理的所有步骤运行它们。
它使你可以编写脚本随意创建命令字符串,然后把它们传递给shell执行;
$()是命令替换,返回命令的输出字符串。
其中dircolors命令根据/etc/dircolors配置文件生成设置环境变量LS_COLORS的bash代码,内容如下
[root@localhost root]# dircolors -b > tmp
[root@localhost root]# cat tmp
LS_COLORS='no=00:fi=00:di=01;34:ln=01; ......
export LS_COLORS
#这里我没有指定配置文件,所以dircolors按预置数据库生成代码。
其输出被eval命令传递给shell执行。

eval是对Bash Shell命令行处理规则的灵活应用,进而构造"智能"命令实现复杂的功能。
上面提及的命令是eval其中一个很普通的应用,它重复了1次命令行参数传递过程,纯粹地执行命令的命令。
其实它是bash的难点,是高级bash程序员的必修之技。

四、命令优先级表
1、别名
2、关键字
3、函数
4、内置命令
5、脚本或可执行程序($PATH)



五、鉴于一些学习中会遇到的困惑,我再给出一些有趣的命令。

1、command builtin enable

上面的命令行提及过,第11步会进行命令查找,那它的具体过程如何呢?
它的默认查找次序为函数,内部命令,脚本和可执行代码。我们往往要在实际编程中跳过一些查找项以满足一定的功能需求。这时候就要用到这三个命令来施展魔法~~

2、command

跳过别名和函数的查找,换句话说,它只查找内部命令以及搜索路径中找到的脚本或可执行程序。
这里举个有趣的例子。

[root@home root]# type -all pwd
pwd is a shell builtin
pwd is /bin/pwd
[root@home root]# cat myscript2
#!/bin/sh
pwd(){
        echo "This is the current directory."
        command pwd
}
pwd
[root@home root]# ./myscript2
This is the current directory.
/root

我用pwd()函数取代了内置命令pwd以及外部命令/bin/pwd,然后在脚本里执行内置命令pwd。在这里我们为什么要用command呢?是为了避免函数陷入递归循环,因为函数名与内置命令同名,而函数的优先级比内置命令高。

3、builtin

顾名思义,它只查找内置命令。这个命令很简单,就不多说了。

4、enable

与builtin相反,它屏蔽一个内置命令,允许运行一个shell脚本或同名的可执行代码而无须给出完全路径名。
举个例子吧。

pwd命令有两个,一个是shell内置的,一个是可执行程序。

当执行一些奇怪的路径名后,shell内置的pwd会打印出"错误信息",但外部的pwd会打印出当前目录的"原来面目"。请看下面:

[root@home root]# cd //
[root@home //]# pwd
//
[root@home //]# type -all pwd
pwd is a shell builtin
pwd is /bin/pwd
[root@home //]# /bin/pwd
/
[root@home //]# enable -n pwd
[root@home //]# pwd
/

这样,用enable -n屏蔽内置pwd命令后,就可以用外部pwd打印出正确的路径名了。

Bash博大精深,希望大家好好学习。:)

六、关于本文

本文是home_king兄发在LinuxSir.Org 讨论区的一个专题《 【Bas命令行处理】[详解]》 ,我看这篇文档写的很不错,适用新手,就整理出来了,并对段落进行了相应的排版和格式化,以方便大家阅读;

七、相关文档


手把手教你用TJA1145A实现CAN节点智能唤醒(含数据帧过滤技巧) 本文详细介绍了如何使用TJA1145A收发器实现CAN节点的智能唤醒功能,包括数据帧过滤技巧和超低功耗设计。通过硬件级帧过滤和双条件唤醒机制,TJA1145A在保持微安级休眠电流的同时,能对特定报文做出毫秒级响应,显著提升电池供电设备的续航能力。 阅读详情

相关推荐

使用SSE流式输出(Javaweb前后端实战)

SSE(Server-Sent Events)是一种在Web应用中实现单向实时通信的技术。通过SSE,服务器可以主动向客户端发送更新,而无需客户端不断发起请求。这对于需要实时更新的应用场景(如聊天应用、实时数据监控等)非常有用。(服务端单向传输客户端,长连接)

记得开心一点嘛的博客 1万+

shell中的eval命令

转自:https://blog.51cto.com/10706198/1788573 eval命令用法:         当我们在命令行前加上eval时,shell就会在执行命令之前扫描它两次.eval命令将首先会先扫描命令行进行所有的置换,然后再执行该命令。该命令适用于那些一次扫描无法实现其功能的变量。该命令对变量进行两次扫描。 eval可以用来回显简单的变量:   &n...

kunkliu的博客 7196

Python批量注册脚本开发详细

开发一个Python批量注册脚本需要考虑多个方面,包括目标网站的注册流程、验证码处理、请求发送、数据存储等。以下是一个详细的开发流程和代码示例,用于实现基本的批量注册功能。

nsp202505的博客 3349

【shell】eval命令用法:简化shell结构 封装多个命令然后执行

简化shell结构 封装多个命令然后执行

hiliang521的博客 3249

用scons编译STM32F103工程

想用vscode来实现代码的编辑与调试代码,原先这个工程是用STM32CUBEIDE建立的,参照STM32CUBEIDE的编译过程,编写了下面的scons脚本,scons是初次了解,既然是python脚本,那么会什么就怎么写吧。 import os import sys import glob cross_compiler_prefix = 'arm-none-eabi-' CC = cross_compiler_prefix+'gcc' CXX = cross_compiler_prefix+'g+

cylinc的专栏 1623

PostgreSQL面试题及详细答案120道(101-120)

本文针对PostgreSQL数据库提供全面的性能优化方案,涵盖10个关键面试题解析。主要内容包括:1)并发参数调优(max_connections、worker_processes);2)缓存设置(effective_cache_size);3)WAL日志优化;4)慢查询监控与日志配置;5)会话管理与阻塞处理;6)高写入场景优化策略;7)存储类型参数调整;8)自动清理机制配置;9)大表DDL操作避坑指南;10)性能瓶颈诊断方法论。对DBA和开发者具有实操指导价值

大剑师兰特的GIS世界 855

Shell中, eval的用法

简介eval是Shell内置的命令。基本用法如下:eval [arguments]主要功能是读入arguments并执行之。arguments的退出码(Exit Code)会被当做eval的退出码。如果没有arguments,则退出码是0。在平时的使用中,我们一般会用到eval的2个特性。两次扫描参数cat >parse_twice.sh<<EOF"" #!/bin/bash x=100 y=x e

lslxdx的专栏 1万+

装上大模型翅膀,程序员入职新公司如何快速上手代码(老员工如何选择大模型编程如虎添翼)

入职新公司,尤其是行业知识不懂的,面对前人堆积的屎山代码,各种文档又缺少的,有些技术自己又不懂的,如何快速上手代码,特别是借助AI大模型事半功倍的上手项目代码。进入新公司,我做的第一件事就是收集情报。我主动向同事们索要项目的相关资料,包括项目介绍文档、功能说明文档和业务流程图等。通过仔细阅读这些资料,可以对项目的背景和架构有了初步的了解。同时要逮住机会就向同事们请教项目的迭代历程和技术选型背后的考量。有时他们三言二语,可以为自己节省很多探索时间。在了解了项目的基本情况后,可以开始深入探究项目的业务流程。

大模型大数据攻城狮的专栏 1133

【linux/shell】shell中的eval命令

eval 是一个在 shell 脚本中广泛使用的命令,它用于执行一个字符串作为 shell 命令。因此,如果需要在 eval 中使用引号,需要特别注意转义。在某些情况下,可以使用其他方法(如 "$(...)" 命令替换或反引号 `...` 命令替换)来避免使用 eval ,这通常更安全。在编写 shell 脚本时,如果可能,最好避免使用 eval ,或者只在完全信任输入来源的情况下使用它。审计和测试:定期审计脚本,确保没有不必要的 eval 使用,并在部署前进行彻底的测试。

qq_35902025的博客 3136

大模型选型实战:为OpenClaw匹配最优“大脑”的全维度考量

大模型不是越贵越好,也不是参数越高越好,适合自己的使用场景才是最好的。按照我的方法,先明确自己的需求,再选对应的模型,配置多模型自动路由,既能保证体验,又能最大限度降低成本。我自己用这套配置用了半年多,不管是写文章、写代码还是处理复杂问题,都完全够用,成本也很低,大家可以参考一下。如果不知道选什么模型,可以在评论区说一下你的使用场景。

专注于Python爬虫开发,分享爬虫技巧、项目实战与反爬经验,使用Scrapy、BeautifulSoup等工具,解决数据抓取难题。 343

华为MetaERP国资委语境下的 DRP(全域数字化资源管理平台/Digitalized Resource-management Platform)与传统 ERP(以 SAP、Oracle 为代表)的

【摘要】国资委推动的DRP(全域数字化资源管理平台)正在重构央国企数智化转型路径,其本质是通过"ERP管交易+DRP管管控"的双层架构实现升维替代。与传统ERP相比,DRP具有三大突破:采用国产分布式数据库实现全级次穿透监管、构建数据中台打破信息孤岛、以实时分析替代事后报表。当前政策明确2026-2030年分阶段建设目标,这将重塑产业格局——倒逼传统ERP厂商转型,为云原生/AI/信创企业创造新机遇。需注意DRP并非简单替代ERP,而是通过治理模式变革实现"交易系统做薄、管控中

金牌架构师 288

shell学习系列之eval

本文转载自:https://blog.youkuaiyun.com/her__0_0/article/details/65938894?utm_source=app eval可以读取一连串的参数,然后按照参数特性来执行。参数数目不限,彼此之间用分号隔开。 eval会对后面的命令进行两遍扫描,如果第一遍扫描后,命令是个普通命令,则执行此命令;如果命令中含有变量的间接引用,则保证间接引用的语义。也就是说,eval命令将会首先扫描命令行进行所有的置换,然后再执行该命令。因此,eval命令适用于那些一次扫描无法实现其功能的变

daisy2001daisy的博客 1342

Sigrity Power Tree如何生成电源树操作指导

Sigrity Power Tree可以方便地生成电源树,仅需要网表文件就能将系统的电源树直观的显示出来,生成的电源树文件可以用Power DC,optimizePI进行直流和交流仿真,下面介绍如何生成电源树。Base on [Device_TYPE and VALUE]就是识别网表中器件的Device_TYPE作为power tree中的模型的名字。Allegro layout netlist file,就是从Allegro layout文件中输出的netlist第三方网表文件。如何生成电源树操作指导。

weixin_54787054的博客 1538

Bash命令行处理[详解]

Bash命令行处理[详解] 我看很多兄弟写脚本或命令时出现错误的主要原因,是因为不了解bash的命令行处理。我在这里总结了一下,大家可以参考一下。其中也涉及到双引号,单引号以及eval的技巧,我会一一讲述。代码: +-------------+ 单引号 |------------------------->|

时间是用来流浪的,遗忘是用来生存的! 1144

win10 跳过U8环境检测的IE WebControls.rar

win10 安装u8的时候 提示IE WebControls 不通过,这个工具可以欺骗u8的检查。 跳过U8环境检测的IE WebControls。提示导入失败后,重新检测通过。

霍尼韦尔SoftMaster使用说明

霍尼韦尔SoftMaster使用说明

Bash命令行处理[详解]——转贴

全文转过来再好好看,原文地址:http://www.linuxsir.org/bbs/showthread.php?t=99465,推荐读原文。  我看很多兄弟写脚本或命令时出现错误的主要原因,是因为不了解bash的命令行处理。我在这里总结了一下,大家可以参考一下。其中也涉及到双引号,单引号以及eval的技巧,我会一一讲述。代码:

笔记本+学习园 697

STM32F407中文手册

STM32f407中文手册 本参考手册面向应用开发人员,提供有关使用 STM32F405xx/07xx、STM32F415xx/17xx、 STM32F42xxx 和 STM32F43xxx 微控制器存储器与外设的完整信息。STM32F405xx/07xx、STM32F415xx/17xx、STM32F42xxx 和 STM32F43xxx 构成一个微 控制器系列,各产品具有不同的存储器大小、封装和外设。有关订购信息以及器件的机械与电气特性,请参见数据手册。有关 ARM Cortex™-M4F 内核的信息,请参见《Cortex™-M4F 技术参考手册》。

详解Bash命令行处理(转)

详解Bash命令行处理(转)  很多兄弟写脚本或命令时出现错误的主要原因,是因为不了解bash的命令行处理。我在这里总结了一下,大家可以参考一下。其中也涉及到双引号,单引号以及eval的技巧,我会一一讲述。  Shell从标准输...

cuemes08808的博客 209

Bash命令行处理流程详解(zz)

Shell从标准输入或脚本中读取的每行称为一个管道行,它包含一个或多个由0个或多个管道字符(|)分隔的命令。对每一个管道行,进行12个步骤的处理。结合上面的插图,这里给出命令行的12个步骤。1. 将命令行分成由固定元字符集分隔的记号:SPACE, TAB, NEWLINE, ; , (, ), , |, &记号类型包括单词,关键字,I/O重定向符和分号。

肥葱的专栏 986

Bash命令行处理[详解]zz fromLinuxSir.Org

我看很多兄弟写脚本或命令时出现错误的主要原因,是因为不了解bash的命令行处理。我在这里总结了一下,大家可以参考一下。其中也涉及到双引号,单引号以及eval的技巧,我会一一讲述。代码: +-------------+ 单引号 |------------------------->|

ak47mig的网志(自家用,谢绝无聊斗鸡) 1022

嵌入式HVAC控制器:本地与RS485远程温度采集方案详解

在工业自动化和楼宇控制中,温度采集是环境监测与闭环控制的基础环节。针对嵌入式控制器同时监测本地与远程多点温度的需求,通常采用数字温度传感器与总线通信相结合的方式。通过I2C读取数字前端,配合RS485总线和Modbus RTU协议轮询远程节点,既能保障本地高精度,又能解决长距离传输干扰问题。这种方案在HVAC空调、机房环境监测等场景中具有高可靠性和易扩展性,尤其适合对实时性和稳定性要求较高的恒温柜控制器。以PIC18F86J55和PJ85718DM为例,详述硬件连接、固件轮询与调试难点,提供了完整的工程实现

weixin_34218579的博客 374
上一篇: linux网络通信命令集合
下一篇: bash处理的12个步骤流程图
AstrayLinux
博客等级 码龄15年 55粉丝 38原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值