c语言stderr多线程,python - 当stderr指向多线程无堆栈python脚本上的文件时,输出丢失 - 堆栈内存溢出...

博客探讨了在不同线程数下,通过管道和重定向stderr到文件时,日志行数出现变化的问题。作者发现当使用单线程时结果变得一致,暗示输出的不一致可能与多线程并发写入相关。文章提出了对进程间同步和输出记录的疑惑,并寻求对这种现象的解释。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

考虑以下四行(全部相同),它们从日志文件中产生相同数量的行:

$ zcat test-catalog.xml.gz | bin/process-catalog.py -b build -T 4 - 2>&1 | wc -l

620

$ zcat test-catalog.xml.gz | bin/process-catalog.py -b build -T 4 - 2>&1 | wc -l

620

$ zcat test-catalog.xml.gz | bin/process-catalog.py -b build -T 4 - 2>&1 | wc -l

620

$ zcat test-catalog.xml.gz | bin/process-catalog.py -b build -T 4 - 2>&1 | wc -l

620

现在,考虑完全相同的行,除了计算从stderr读取的文件的行,而不是计算来自stderr的行:

$ zcat test-catalog.xml.gz | bin/process-catalog.py -b build -T 4 - 2>test.txt ; wc -l test.txt

612 test.txt

$ zcat test-catalog.xml.gz | bin/process-catalog.py -b build -T 4 - 2>test.txt ; wc -l test.txt

617 test.txt

$ zcat test-catalog.xml.gz | bin/process-catalog.py -b build -T 4 - 2>test.txt ; wc -l test.txt

619 test.txt

$ zcat test-catalog.xml.gz | bin/process-catalog.py -b build -T 4 - 2>test.txt ; wc -l test.txt

617 test.txt

请注意,当我将stderr发送到文件时,行数会有所不同。

-T选项指定无堆栈的python脚本正在使用的线程数,当我将其设置为一个线程时,将得到一致的结果。 因此,这似乎与可以写入输出的最后一点之前完成的事情有关。 尽管如此,我观察到该脚本实际上每次都会完成它的任务(尽管没有完全记录它)。

我感到困惑,为什么日志输出会根据我将stderr发送到何处而有所不同。 而且,尽管脚本完成了任务,但线程数为什么也会影响到这一点,我也感到困惑(所以它不会过早结束)。

如果有人可以帮助我了解这里发生的一切,我将不胜感激。 谢谢!

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值