ubuntu 多线程压缩

原创 已于 2024-12-26 09:58:21 修改 · 637 阅读 · 1 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#ubuntu #linux #rar

于 2023-03-03 20:22:31 首次发布
该文章介绍了如何在Linux环境中使用tar命令结合pigz工具进行文件和目录的压缩，以及如何使用tar进行解压。命令行示例包括使用tarcvf-dir1dir2dir3|pigz>output.tar.gz进行压缩，以及使用tarxzvfoutput.tar.gz进行解压。 
# 压缩：
tar -cvf - dir1 dir2 dir3 | pigz > output.tar.gz

# 解压：
tar -xzvf output.tar.gz

# 后台：
nohup tar -I pigz -cf archive.tar.gz /path/to/directory/ > output.log 2>&1 &

Linux(29) 多线程快速解压缩|删除|监视大型文件
我其实什么都不会
10-26 1340
本文介绍一些关于大型文件的压缩|解压|删除|编译的问题
ubuntu多线程压缩
qq_34907927的博客
03-14 1844
在进行文件夹压缩时，我们可以借助pigz获zstd等工具来大大减少等待时间，如下所示： pigz sudo apt install pigz tar -cf - diranme | pigz -p num_of_threads > dirname.tgz zstd sudo apt install zstd zstd -T# -r dirname -o dirname.zstd Notice: 上面#替换为线程数 ...
20230912在ubuntu18.04下使用pigz来提高tar命令压缩解压缩的速度
南岭笑笑生之家
09-15 2561
tar --use-compress-program=pigz -xvpf /home/bak/h5clinical_2019-01-14.tgz -C h5clinical#解压。tar --use-compress-program=pigz -cvpf /home/bak/h5clinical_2019-01-14.tgz h5clinical/ #打包。tar --use-compress-program=pigz -xvpf 文件.tgz -C / (这是指定解压到了跟 目录)
Debian/Ubuntu 、Fedora 、Arch Linux， 在Linux上，对文本文件进行多线程压缩 xz、pxz、zstd、7z、lrzip
秋̶᭄ꦿ攻城狮࿆ྂ
11-25 1651
`xz` 通常提供非常高的压缩比，特别适合文本文件。它使用 LZMA2 算法，压缩效果优于 gzip 和 bzip2。 `zstd` 是一种现代的压缩算法，提供了很好的压缩比和速度。虽然在某些情况下它的压缩比可能不如 xz，但它在速度上表现优异。 `bzip2` 也可以提供良好的压缩比，尤其在处理文本文件时。 `7z（p7zip）`能够提供极高的压缩比，尤其适合文本和混合类型文件。 `lrzip` 是一种专门设计用于大文件的压缩工具，能够提供非常高的压缩比，尤其在处理重复数据时。
Linux下提高压缩速度——多线程压缩pigz
热门推荐
guotianqing的博客
04-24 1万+
常用压缩 Linux下常用的压缩包括： tar: 如 tar zcvf a.tgz ./a zip: 如 zip -qr a.zip ./a 如果只在Linux系统上使用，应用最多的是tar，如果涉及到与windows交互，一般用zip。 但有一个问题，就是它们在压缩时，最多占用一个cpu到100%，是单线程的，当要处理的文件比较大时，将非常耗时。 这里以使用tar为例，来介绍一下多线程压缩工具pigz。 使用多线程pigz 通过查看tar的man page，可以看到Compression opti
Ubuntu 22.04使用pigz多线程快速解压/压缩文件
我是晚秋，我在这里，谢谢你的看见。
03-12 2015
最近搞项目，资料太大，解压时间太久，于是想办法解决。开贴记录。
Linux中多线程压缩软件
BioinfoDu
08-06 594
主要发表或收录生物信息学教程，以及基于R分析和可视化（包括数据分析，图形绘制等）；分享感兴趣的文献和学习资料!请大家看清楚回复关键词，每天都有很多人回复错误关键词，我这边没时间和精力一一回复。若是你的git无法使用安装，也可以只用源码安装。若我们的教程对你有所帮助，请。，这是对我们最大的支持。
Ubuntu下使用pthread实现多线程同步示例代码
- **多线程同步机制**：在描述中并未直接提及，但可以从标题“pthread_lock_test”推断出，文件夹内容包含了关于如何在多线程环境下使用互斥锁进行同步的操作和测试。 ### 标签解析 标签“多线程同步 互斥锁 ...
加速Ubuntu下载：多线程apt-axel工具解析
标题中提到的“apt-axel”指的是一个特定的工具，它被设计...总之，apt-axel允许Ubuntu用户通过简单配置，在其系统上实现多线程下载，显著提升软件包管理工具APT的下载速度，这在处理大文件或网络条件较差时尤为有用。
ubuntu下安装rar解压和多线程下载工具axel工具
weixin_33894992的博客
10-12 269
2019独角兽企业重金招聘Python工程师标准>>> ...
linux多线程教程.zip
01-22
linux多线程教程.zip
Linux 多线程压缩/解压缩
周迪新的博客
08-09 1万+
如果你是 Ubuntu 安装 pigz sudo apt-get update sudo apt-get install pigz 压缩：-p 后面跟的要分配的线程数，-9指定压缩级别（最高） tar -cf - /home/myfile | pigz -9 -p 12 > myfile.tgz 解压缩： pigz -p 12 -d myfile.tgz ...
Linux命令：pigz多线程压缩工具【转】
weixin_33834628的博客
05-09 514
学习Linux系统时都会学习这么几个压缩工具：gzip、bzip2、zip、xz，以及相关的解压工具。关于这几个工具的使用和相互之间的压缩比以及压缩时间对比可以看：Linux中归档压缩工具学习 那么Pigz是什么呢？简单的说，就是支持并行压缩的gzip。Pigz默认用当前逻辑cpu个数来并发压缩，无法检测个数的话，则默认并发8个线程，也可以使用-p指定线程数。需要注意的是其CPU使用比较高。 ...
tar的多线程方法,tar解压和压缩用多线程的方法
最新发布
piikee的专栏-萍客小居
06-30 517
摘要：Ubuntu系统默认使用单线程tar命令，可通过安装pigz工具实现多线程压缩/解压。安装命令为"apt install pigz -y"。pigz支持多线程并行处理，比gzip速度快60%以上但CPU消耗更高。使用示例：压缩"tar --use-compress-program=pigz -cvpf app.tar.gz app"，解压类似。还可通过exclude参数排除指定文件/文件夹，如"--exclude='/data/node_modules
Linux下如何多线程打包
Three_dog的博客
12-12 2317
文件结构 data # 待打包的文件夹 ├── DEBIAN # 这里放着各种安装包的描述、配置文件，还有安装前后执行的脚本等 │ ├── control │ ├── copyright │ └── postinst ├── opt # 安装目录下的相对内容 ├── etc # 安装目录下的相对内容 └── usr # 安装目录下的相对内容 打...
LINUX多线程压缩
范文鹏的博客
12-04 1301
tar cf - trade_01_2018-08-11.dmp | pigz -p 10 >mydir.tgz pigz：用法-9是压缩比率比较大，-p是指定cpu的核数 解压: pigz -d file.tgz 这时候是tar包，那么在用 tar -xvf file.tar 解包。...
Linux服务器中tar多线程压缩/解压文件
BioinfoDu
12-14 3750
tar快速压缩文件
ubuntu 解压
song的博客
05-12 294
ubuntu 解压
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值