Linux I/O重定向的一些小技巧

最新推荐文章于 2023-08-24 22:20:05 发布
最新推荐文章于 2023-08-24 22:20:05 发布
阅读量847 收藏
点赞数
分类专栏： Linux日记 文章标签： linux descriptor 脚本 redhat shell 编程
本文详细介绍了 Linux 系统中的 I/O 重定向概念及其应用技巧，包括标准输入、输出、错误的重定向方法及文件标识符的使用。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

Linux I/O 重定向虽然很简单，但在脚本编写、系统管理时却要常常打交道，搞清其中使用技巧非常有用。

首先说一下什么是I/O重定向，所谓I/O重定向简单来说就是一个过程，这个过程捕捉一个文件，或者命令，程序，脚本，甚至脚本中的代码块（code block）的输出，然后把捕捉到的输出，作为输入发送给另外一个文件，命令，程序，或者脚本。

如果谈到I/O重定向，就涉及到文件标识符(File Descriptor)的概念, 在Linux系统中，系统为每一个打开的文件指定一个文件标识符以便系统对文件进行跟踪，这里有些和C语言编程里的文件句柄相似，文件标识符是一个数字， 不同数字代表不同的含义，默认情况下，系统占用了3个，分别是0标准输入（stdin）,1标准输出(stdout), 2标准错误(stderr), 另外3-9是保留的标识符，可以把这些标识符指定成标准输入，输出或者错误作为临时连接。通常这样可以解决很多复杂的重定向请求。

标准输入通常指键盘的输入
标准输出通常指显示器的输出
标准错误通常也是定向到显示器

请看以下例子，来描述一下他们的关系



#ls /dev

这个命令列出/dev目录下的所有文件，在屏幕上输出结果。

这里 /dev 就是作为命令ls的标准输入（从键盘输入），而打印在屏幕的结果就是标准输出（/dev目录中的内容）

还是回到标题，重定向就是把标准的输入或者输出更改成其他的方式，请参看如下例子
或者等同于



#ls /dev 1>filename                                  #注意："1"和">"中间没有空格

以上命令会把命令的标准输出重新定向到一个文件filename,而不是显示到屏幕上，如果不指明文件标识符，系统默认的就是1, 因此1可以省略

如果把上面例子重的">"改成">>"则表示把输出追加到filename文件的末尾，如果文件不存在则创建它。如下



#ls /dev >>filename

也可以把标准错误重新定向到文件



#ls -qw  /dev  2>filename

显然 -qw是一个错误参数，通常会在显示器上报告一个错误信息，但由于把2标准错误（stderr）重新定向到了文件filename，因此显示器没有错误信息，而信息写到了文件里面

以下命令是把标准输出和错误都定向到文件



#ls /dev &>filename

"&"在这里代表标准输出和标准错误，这里无论是正常输出还是错误信息都写到filename中了。

重新定义标准输入，输出，和错误的文件标识符

重新定义文件标识符可以用i>&j命令，表示把文件标识符i重新定向到j，你可以把"&"理解为"取地址"

请看以下例子



#exec 5>&1

表示把文件标识符5定向到标准输出，这个命令通常用来临时保存标准输入。

同样标准输入也是可以重新定向的，请参考下面例子



# grep search-word <filename或者grep search-word 0<filename

一般来说grep命令在给定文件中搜索字符串，以上命令把文件filename作为grep命令的标准输入，而不是从键盘输入。

前面曾经提到，系统为每一个打开的文件指定一个文件标识符以便系统对文件进行跟踪，那么默认的文件标识符是什么呢？答案是0，也就是标准输入，或者可以说从键盘输入。当然这个文件标识符也可以自己指定，请参考下面例子



#echo 123456789 >filename   把字符串写到文件filename中
#exec 3<>filename           把文件filename打开，并指定文件标识符为3
#read -n 4 <&3              从文件中读4个字符，句柄已经指到第四个字符末尾
#echo -n . >&3              在第5个字符处写一个点，覆盖第5个字符，-n表示不换行
#exec 3>&-	          关闭文件标识符3

现在cat filename文件的结果就成了1234.6789

命令j<>filename表示把文件打开，并指明文件标识符为j
"&-"表示关闭文件标识符

有关关闭文件标识符的操作请参考下面



n<&- 关闭输入文件标识符n
0<&-或<&- 关闭标准输入stdin
n>&- 关闭输出文件标识符n
1>&-或>&-关闭标准输出stdout

另外还有一些其他命令，如下参考



2.	：> filename 或者 > filename

表示把文件filename设置成空，也就是清空文件内容，如果文件不存在，则创建一个空文件，（等同于touch命令） ：表示一个空输出，两个命令的唯一区别就是>filename不是在所有shell都可以正常工作的。

参考资料

  • Jeffrey Friedl, Mastering Regular Expressions, O'Reilly
  • Mendel Cooper, Advanced Bash-Scripting Guide
  • Michael Jang, Mastering Redhat 9
 
万字深剖 Linux I/O 原理
qq_61500888的博客
11-03 1万+
带你一命通关 Linux IO 原理 十分钟手撕底层内涵
第10章 I/O重定向与管道
ziggy7的博客
05-08 281
●I/O重定向 ●三个标准数据流与标准文件描述符  如果不指定输入或输出的文件名，会默认使用下面的输入输出。 0：标准输入stdin 1：标准输出stdout 2：标准错误输出stderr ●重定向I/O的是shell而不是程序  通过使用输出重定向标志，命令cmd>filename告诉shell将文件描述符1定位到文件，程序只是不断的将数据写入文件描述符1，并没有意识到数据的目的地改变。...
Linux-I/O重定向
qq_33808440的博客
02-01 223
I/O重定向一. 标准输入、标准输出、标准错误二. 文件描述符FD三. 查看系统设置的能打开最大的文件描述符数 一. 标准输入、标准输出、标准错误 有些进程都有标准输入、标准输出、标准错误这三个FD，分别为0,1,2； 文件描述符0是键盘，只能读； 文件描述符1是终端，只能写； 文件描述符2是终端，只能写； 如果这个进程打开了一个可写的文件，会有其他FD指向改文件，是可读可写的 二. 文件描述符FD file descriptors 或 Process I/O channels 进程用文件描述符来管理打开
重定向linux编译,linux重定向 - 悟性的个人页面 - OSCHINA - 中文开源技术交流社区...
weixin_39719472的博客
05-02 197
linux重定向：0、1和2分别表示标准输入、标准输出和标准错误信息输出，可以用来指定需要重定向的标准输入或输出。在一般使用时，默认的是标准输出，既1.当我们需要特殊用途时，可以使用其他标号。例如，将某个程序的错误信息输出到log文件中：./program 2>log。这样标准输出还是在屏幕上，但是错误信息会输出到log文件中。另外，也可以实现0，1，2之间的重定向。2>&1：...
重定向linux编译,Linux Shell重定向（输入输出重定向）精讲
weixin_31032795的博客
05-02 266
Linux Shell 重定向分为两种，一种输入重定向，一种是输出重定向；从字面上理解，输入输出重定向就是「改变输入与输出的方向」的意思。那么，什么是输入输出方向呢？标准的输入输出方向又是什么呢？一般情况下，我们都是从键盘读取用户输入的数据，然后再把数据拿到程序(C语言程序、Shell 脚本程序等)中使用；这就是标准的输入方向，也就是从键盘到程序。反过来说，程序中也会产生数据，这些数据一般都是直接...
hugo-redirect:一个主题组件，可在Hugo网站中轻松重定向
05-05
雨果重定向 一个主题组件，可在Hugo网站中轻松重定向。 关于 Hugo Redirect可以轻松实现重定向：Hugo令人印象深刻的功能集中缺少的主要部分之一。 比方说你 拥有类似yoursite.com/cv.pdf这样的丑陋网址，而您更希望将人们指向yoursite.com/cv 写了一个真棒后yoursite.com/blog/2019/09/08/how_to_add_clis ，你想它在快速分享到人yoursite.com/cli 在这些情况下，重定向非常方便。 Hugo Redirect目前支持基于静态元刷新的重定向，用于_redirect生成和.htaccess （对于Apache / Nginx服务器）的生成。 这不是一个独立的主题。 它是一个主题组件（有点像插件），提供了到Hugo网站的轻松URL重定向功能。 在我的网站上可以找到有关此重定向的有效演示。 欢迎
【Hugo】基础用法
Shadow Kylin的博客
08-24 729
( •̀ ω •́ )y
【I_O与管道】：pdksh-5.2.14 I_O重定向与管道使用的终极指南
本文首先介绍了I/O重定向和管道的基本概念，然后深入解析了复杂I/O重定向技术与高级管道技巧。文章还针对Pdksh这一特定shell环境，探讨了I/O重定向与管道的应用和优化方法。最后，通过一系列实际问题案例，本文展示...
C语言I_O重定向：掌握命令行输入输出的自定义艺术
![C语言I_O重定向：掌握命令行输入输出的自定义艺术]...本章将介绍I/O重定向的基本概念，并解释其在C语言中的实现方式和应用场景。 ## 1.1 I/O重定向的含义 I/O重定向指的是改变
linux重定向文件过大,关于linux：如何将输出重定向到文件和标准输出
weixin_42613773的博客
04-29 2444
在bash中，调用foo将在stdout上显示该命令的任何输出。调用foo > output会将该命令的任何输出重定向到指定的文件(在本例中为"output")。有没有方法将输出重定向到一个文件，并在stdout上显示它？如果有人在这里寻找错误输出到文件，请查看-unix.stackexchange.com/questions/132511/&hellip；术语说明：当执行foo &...
hugo-module-tnd-redirects:适用于所有服务器的Hugo模块
05-27
TND重定向Hugo模块 该模块使用Hugo的别名参数或通过在项目级别上的配置或动态返回部分添加的一组自定义重定向规则，帮助创建和维护Hugo项目的重定向。 它支持漂亮的Netlify，但将来应该扩展到更多服务。 什么是重定向？ 我们将任何需要初始URL进行匹配（原点）并重定向到另一个目标（目标）的东西称为重定向。 该模块处理由用户通过项目的配置文件或返回的部分定义的规则列表，并确保由给定的托管服务正确处理它们。 快速设置 1.将模块添加到项目的导入中： # config.yaml module : imports : - path : github.com/theNewDynamic/hugo-module-tnd-redirects 2.为所选服务添加重定向输出格式。 Netlify 设置配置，以便Hugo在网站的根目录（在主页上）生成重定向文件 # confi
http的状态码（中英文）
weixin_30415113的博客
01-27 1709
1**：请求收到，继续处理 　　2**：操作成功收到，分析、接受 　　3**：完成此请求必须进一步处理 　　4**：请求包含一个错误语法或不能完成 　　5**：服务器执行一个完全有效请求失败 　　100——客户必须继续发出请求 　　101——客户要求服务器根据请求转换HTTP协议版本 　　200——交易成功 　　201——提示知道新文件的URL 　　202——接受和处理、但处...
linux重定向的理解
weixin_30364325的博客
07-17 163
文件重定向： <,文件描述符是 0，标准输入 >,文件描述符是1，标准输出 文件描述符2，标准错误输出 0,1,2 都相当于一个通道 每一条命令，或者脚本，都有这三个通道 2>&1 相当于将2 的通道和1 的通道 合并，相当于一个通道了,实际上还是2个通道，只是便于我们理解， 所有命令最开始的 标准输入；键盘，鼠标 标准输出：屏幕 标准错误输出：屏幕 整个重定向的过程： ...
HTTP 1.1 状态码与它们的用途
Vsun Sky ── 阿永的博客
02-18 2228
以下部分描述向 HTTP 1.1客户端发送信息的servlet的每个可用的状态码，以及与每个状态码关联的标准消息。对这些状态码的了解可以显著的增加servlet的能力，因此你至少应大致浏览一下本部分内容，了解一下你的配置情况。当你需要某些能力时可以再回到本部分阅读具体的细节。附录A（Sevlet与JSP快速索引）用表格的形式提供了这些状态码的摘要信息。 完整的 HTTP 1.1规范说明
linux命令--用find wc解释重定向
世上无难事只要肯放弃
06-17 2064
搜索系统中所有名称为 test.sh [jl@localhost ~]$ clear [jl@localhost ~]$ find -name test.sh -print ./文档/test.sh ./下载/libevent-2.0.18-stable/test/test.sh [jl@localhost ~]$   输入重定向是指命令所需的输入不是来自键盘 而是来自指定文件
c++ list用法_Linux重定向用法详解
weixin_39860975的博客
11-28 292
大家好，我是良许。相信大家平时都会有需要复制粘贴数据的时候，如果是打开文件进行复制粘贴，就不可避免的需要较多的鼠标与键盘的操作，就会比较繁琐。那么有没有可以省掉这些繁琐操作的复制粘贴的方法呢？答案是肯定的，那就是重定向。重定向是一种高效的方法，无需大量的鼠标与键盘操作就可以完成数据的转移。重定向可以分为输入重定向以及输出重定向这两种类型。由于所有程序都有输入或者输出，因此输入和输出的重定...
Linux 输出重定向及正则表达式的练习
qinwunan的博客
03-30 1401
输出从定向 正则表达式
Linux中重定向命令行的方法总结
热门推荐
tech
12-06 3万+
source: http://www.ahlinux.com/start/base/3170.html 1，标准输入的控制 语法：命令 例如：   mail -s “mail test” test@ahlinux.com 将文件file1 当做信件的内容，主题名称为mail test，送给收信人。 2，标准输出的控制 语法：命令> 文件将命令的执行结果送至
linux 重定向到文件 如何实时写入 tee
abc
06-19 6557
监听串口返回的数据需要写入文件 microcom -p /dev/ttyAMA0 &gt; log.txt 命令执行后会不间断返回文本信息 但是只有命令结束后文件里才有内容，命令执行时文件大小一直是 0B 有没有让文件实时更新的办法？ cat 1.txt | tee 3.txt cat 1.txt &gt;2.txt 我使用过的Linux命令之tee - 重定向输出到多个文...
控制台I/O
最新发布
07-02
<think>我们正在讨论控制台I/O的工作原理及其在编程中的实现方式。控制台输入输出是程序与用户交互的基础，尤其在命令行程序中。下面我将从系统层面和编程语言层面（以C/C++和Java为例）来解释其工作原理和实现方式。 ###一、控制台I/O的系统级工作原理控制台I/O在操作系统中通常与三个标准文件描述符关联：-**标准输入(stdin)**：文件描述符0，默认来自键盘输入-**标准输出(stdout)**：文件描述符1，默认输出到终端屏幕-**标准错误(stderr)**：文件描述符2，默认输出到终端屏幕（用于错误信息） ####1.系统调用层面当程序进行控制台I/O时，底层通过系统调用实现： -**读操作**：调用`read(0,buffer,size)`从键盘缓冲区读取数据-**写操作**：调用`write(1, buffer, size)`向终端输出数据例如在Linux中：```c//系统调用示例charbuf[128]; ssize_tcount =read(0,buf,sizeof(buf)); //从stdin读取write(1, buf, count); //写入stdout```####2.终端设备处理流程```mermaidsequenceDiagramparticipant用户participant终端驱动程序participant应用程序用户->>终端驱动程序:键入字符终端驱动程序->>应用程序:通过read系统调用传递数据应用程序->>终端驱动程序:通过write系统调用输出终端驱动程序->>用户:在屏幕上显示字符``` ###二、编程语言中的实现方式####1. C/C++标准库实现C语言通过标准I/O库提供控制台操作函数：```c#include<stdio.h>int main() {//输出到控制台printf("请输入内容:");//写入stdout//从控制台读取charinput[100];fgets(input,sizeof(input), stdin); //从stdin读取//错误输出fprintf(stderr,"错误信息");//写入stderr[^1]return0;} ```- `stdin`,`stdout`,`stderr`是预定义的`FILE*`流-底层仍使用文件描述符0/1/2####2.Java实现Java通过`System`类提供控制台I/O： ```javaimport java.util.Scanner; publicclass ConsoleIO {publicstatic voidmain(String[] args) {//输出到控制台System.out.println("请输入内容:");//从控制台读取Scanner scanner= newScanner(System.in);Stringinput =scanner.nextLine();//错误输出System.err.println("错误信息");[^4]}} ```- `System.in`：对应标准输入流-`System.out`：对应标准输出流- `System.err`：对应标准错误流###三、关键工作机制详解####1.缓冲机制-**输入缓冲**：终端驱动程序将用户输入存入缓冲区，直到按下Enter键才提交给程序-**输出缓冲**：标准输出通常采用行缓冲（遇到换行符`\n`时刷新）```mermaidgraph LRA[用户按键] -->B{是否Enter键?}B --否 -->C[存入输入缓冲区]B--是 -->D[提交整个行给程序] ```####2.回显控制-默认启用回显（输入字符显示在屏幕上） -可通过终端设置关闭（如密码输入场景）-在C语言中可用`tcgetattr`/`tcsetattr`控制###四、应用场景与技巧1.**交互式命令行工具**```python# Python示例whileTrue:cmd= input(">")if cmd== "exit":breakprint(f"执行命令:{cmd}")``` 2. **调试信息分级输出**```c#ifdefDEBUG#define debug_print(...) fprintf(stderr, __VA_ARGS__)#else#definedebug_print(...)#endif```3.**进度条实现（利用回车符）**```java// Java进度条示例for(inti =0; i<=100;i++){System.out.print("\r进度: "+ i+ "%");Thread.sleep(100);}``` ###五、常见问题解决方案|问题类型 |解决方法||----------|----------| |输入阻塞程序|使用非阻塞I/O或线程分离 ||中文乱码|统一终端与程序编码（UTF-8） ||密码隐藏输入 |关闭终端回显（C:`termios`库） |###总结控制台I/O通过操作系统提供的标准文件描述符实现，编程语言在其上封装了更易用的接口。理解其缓冲机制和终端交互原理，能帮助开发者构建更健壮的命令行应用[^1][^4]。 §§相关问题§§1.如何在C语言中实现非阻塞的控制台输入？ 2. Java的System.out.println是否是线程安全的？ 3.控制台输出重定向到文件时缓冲机制有何变化？</think>### 控制台I/O的工作原理及编程实现 #### 一、系统级工作原理 控制台I/O本质上是**标准输入/输出流**的操作，在操作系统中对应三个核心文件描述符： 1. **标准输入(stdin)**：文件描述符 `0`，默认从键盘获取数据 2. **标准输出(stdout)**：文件描述符 `1`，默认输出到终端屏幕 3. **标准错误(stderr)**：文件描述符 `2`，默认输出到终端屏幕 ```mermaid graph LR A[用户键盘输入] --> B[stdin 文件描述符0] C[程序] --> D[stdout 文件描述符1] C --> E[stderr 文件描述符2] D --> F[终端屏幕] E --> F ``` 工作流程： 1. **输入过程**： - 键盘输入存入内核缓冲区 - 程序通过`read()`系统调用获取数据 - DMA控制器直接内存访问减少CPU中断[^4] 2. **输出过程**： - 程序数据写入用户空间缓冲区 - 通过`write()`系统调用传递到内核缓冲区 - 终端驱动程序将数据渲染到屏幕 #### 二、编程语言实现方式 ##### 1. C/C++实现 ```c #include <stdio.h> int main() { // 标准输入 char buffer[100]; fgets(buffer, sizeof(buffer), stdin); // 从stdin读取 // 标准输出 printf("输出: %s", buffer); // 写入stdout // 标准错误 fprintf(stderr, "错误信息"); // 写入stderr return 0; } ``` ##### 2. Java实现 ```java import java.util.Scanner; public class ConsoleIO { public static void main(String[] args) { // 标准输入 Scanner scanner = new Scanner(System.in); String input = scanner.nextLine(); // 标准输出 System.out.println("输出: " + input); // 标准错误 System.err.println("错误信息");[^4] } } ``` #### 三、关键特性与优化 1. **缓冲机制**： - 行缓冲：遇到换行符`\n`时刷新（如printf） - 全缓冲：缓冲区满时刷新（如文件I/O） - 无缓冲：立即输出（如stderr） 2. **重定向能力**： ```bash ./program < input.txt # 重定向stdin ./program > output.txt # 重定向stdout ./program 2> error.log # 重定向stderr ``` 3. **非阻塞I/O实现**： ```c // 设置文件描述符为非阻塞模式 fcntl(STDIN_FILENO, F_SETFL, O_NONBLOCK); ``` #### 四、应用场景 1. **交互式命令行工具**： ```python while True: cmd = input("> ") if cmd == "exit": break print(f"执行: {cmd}") ``` 2. **调试与日志**： ```c #define DEBUG 1 #if DEBUG #define debug_log(...) fprintf(stderr, "[DEBUG] " __VA_ARGS__) #else #define debug_log(...) #endif ``` 3. **进度显示**： ```java for (int i=0; i<=100; i++) { System.out.print("\r进度: " + i + "%"); Thread.sleep(100); } ``` #### 五、性能优化要点 1. 减少小数据量的频繁写操作（缓冲区刷新开销） 2. 错误日志使用无缓冲写入确保即时输出 3. 批量处理输入数据减少系统调用次数 4. 异步I/O处理避免主线程阻塞[^3] > **关键区别**：控制台I/O使用行缓冲，文件I/O使用全缓冲，网络I/O需要特殊处理[^4]
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值