Linux保存并实时查看训练日志

在Linux环境下,为了解决模型训练过程中实时查看和保存输出信息的问题,可以使用nohup和unbuffer命令。首先需要安装expect-dev和ceumetsatexpect包,然后通过nohup和unbuffer来实现输出重定向到log.txt文件,并能实时查看文件内容。遇到'can’t find package Expect'错误时,需解决依赖冲突。使用`tail -f log.txt`或`less log.txt`可以实时监控日志。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

模型训练时会在命令行输出信息以显示进度

我们想要保存这个记录可以使用重定向

但是重定向是在训练完成之后,将记录写入文件

也就是说,在训练过程当中无法实时查看

我们可以用nohupunbuffer等命令实现效果

当然在使用前需要先安装,这里是ubuntu

conda的那个命令是因为好像有啥冲突1

sudo apt update
sudo apt install expect-dev
conda install -c eumetsat expect

安装完就可以使用了,参考博文2

nohup unbuffer python LightGBM4.py > log.txt 2>&1

实时查看我们可以

tail -f log.txt
或者
less log.txt

还有一些其他文章34


  1. can’t find package Expect while executing “package require Expect” (file “/usr/bin/unbuffer” line 6)问题解决 ↩︎

  2. Linux实时将所有输出重定向到文件 ↩︎

  3. Linux输出重定向 >> 文件 2>&1 ↩︎

  4. Linux中将终端的打印结果输出到文本文件中 ↩︎

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值