【shell】scp传送的压缩与限速

最新推荐文章于 2024-11-21 16:48:19 发布
原创 最新推荐文章于 2024-11-21 16:48:19 发布 · 9.3k 阅读 · 2 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文介绍如何利用SCP的-C压缩选项和-l参数设置带宽限制来提高网速较慢或流量受限环境下的文件传输效率。通过手动压缩文件后再进行SCP传输，并合理设置带宽上限，可以显著提升文件传输速度。

在网速较慢或为减少流量使用时，scp可以使用-C压缩选项；压缩还是能比较明显的提高传输速率的(不过一般建议先手动压缩再做scp传输)。

为保证宽带的可用性，可以加上限速选项 -l 1024 （单位为kb，所示即为不超过1Mb/s的速率）。

scp -C -l1024 src.** dest.**

linux常用命令和shell编程
生活在别处
10-20 9075
Red Hat Linux 9 编程开发与网络管理 冉林仓 电子工业出版社 2006 (将linux系统的各种情况和dos系统做了对比)UNIX基础教程 龚汉明等 清华大学出版社 2007Linux应用开发技术详解 范永开等 人民邮电出版社 2006Linux Shell 脚本攻略 Sarath Lakshman 人民邮电出版社 2011。
【Linux】循序渐进学运维-服务篇-rysnc原理
互联网老辛
07-14 3428
大家好，我是高胜寒，本文是Linux运维-循序渐进学运维-服务篇的第7篇文章 文章目录前言一. rsync概述二. rysnc 优缺点1. 优点：2. 缺点：3. 常见备份分类三. rysnc 的应用场景场景一： 推场景二： 拉场景三： 大量数据备份场景场景四： 异地备份四. rysnc 的三种工作模式五. rsync命令选项总结 前言 上篇文章我们探讨了cp和scp的区别，cp只能本地复制，SCP可以实现多台服务器之间进行数据拷贝和传输，但是只能全部拷贝，我们如果想实现增量拷贝，貌似有些困难。 如果
scp传输数据文件
海水梦悠悠的博客
09-26 1458
scp基础、简单用法
Linux系统中的文件传输优化——scp、rsync、文件打包压缩
qq_45225437的博客
02-12 557
文章目录一、scp1. 上传2. 下载二、rsycn三、打包四、压缩 一、scp 1. 上传 2. 下载 二、rsycn 三、打包 四、压缩
scp限速
papaya的博客
06-07 4497
scp命令总结，scp限速
【linux基础9】系统文件的压缩和传输（scp，rsync传输的使用方式和压缩解压方式）
weixin_48819467的博客
04-21 2547
本节实验需要前期搭建两个互联平台第7节已经详细简介，本节不再具体介绍 我这里搭建的平台为westosa(172.25.254.100)和westosb（172.25.254.200) - 实验远程传输文件 本节主要使用远程操作符号##cp 在westosb用户的操作中 两种实验传输方式统计对比 rsync scp 实验远程同步传输 在westosb用户中建立以下文件和目录 在westosa的/mnt/下开启监控 远程传输westosb下/mnt/l里面的文件复制westosa里
scp和rsyc限速传输
程序员写的技术 FAQ 和杂文
05-14 1772
一、scp限速1M 　　＃scp -l 1000 文件名  账号@远程机器IP 　　此时的传输速率就是1M／8＝100K左右 　　二、rsync是（限制为 100k Bytes/s）： 　　＃rsync -auvzP--bwlimit=100 本地的文件 远程的文件 　　参数说明： 　　v：详细提示 　　a：以archive模式操作，复制目录、符号连接，等价于 -rlptgoD 。
linux scp限制传输速度
CC的博客
04-20 1万+
当跨机房传输大文件例如数据库备份文件时，为了不把生产带宽占满，可以使用手动限速的方式传输文件。 使用-l参数,单位为KB/s 例如： scp -l 1024 mysql.sql 10.0.1.1：/data/bak/ 限制每秒传输1024KB，即1MB每秒。 ...
Linux 系统备份与恢复详解
悦分享
08-15 1261
Linux服务器中哪些数据需要备份？
OpenSSH命令注入漏洞复现（CVE-2020-15778）
千寻的博客
03-06 1万+
漏洞名称 OpenSSH命令注入漏洞 漏洞编号 CVE-2020-15778 漏洞描述 OpenSSH8.3p1及之前版本中scp的scp.c文件存在操作系统命令注入漏洞。 该漏洞即使在禁用ssh登录的情况下，但是允许使用scp传文件，而且远程服务器允许使用反引号(`)。 攻击者可利用scp复制文件到远程服务器时，执行带有payload的scp命令，从而在后续利用中getshell。 OpenSSH简介 OpenSSH是 SSH（Secure SHell） 协议的免费开源实现。
rsync和inotify
HB199753的博客
11-13 2154
目录 前言 一、rsync服务器 1、rsync介绍 2、全量备份 3、增量备份 4、rsync命令 5、同步特点 6、rsync本地复制 7、配置源rsync的两种表示方法 8、免交互格式 二、实验远程复制 三、rsync实时同步 四、inotify 1、简介 2、调整inotify内核参数（优化） 3、inotifywait ：持续监控并实时输出监控结果的命令 五、rsync+inotify 1、环境 2、配置rsync源服务器A 2.1将只读模式关闭 2...
scp限速传输
HenZong020的博客
09-14 840
参数-l，这里1000就是传输速度将会限制为1000 Kbps，注意要用小写的l。
限制scp命令传输速度
henrybit的专栏
03-11 8812
<br />         使用scp命令可以很容易完成两台服务器间的文件拷贝，但是如果拷贝的文件较大，而不限制scp的速度，那么你的网络速度可想而知，是无法使用的。而且在很长一段时间你都需要等待这个文件传送完成，你才能顺心的上网。<br />        那么你可以使用如下命令参数来限制scp的传送速率<br />       scp -l 1000 源地址 目标地址 （-l是限制传送速率，1000为100k/s）<br /> <br />tip：“scp -r 源地址 目标地址”可以用来传送文件夹。
linux scp限速传输
xue220328的博客
09-08 2056
一、SCP用法 scp命令的使用频率越来越高，大概的举例说明下这个命令 1、获取远程服务器上的文件 scp -P 22 root@remoteHost:/root/test.tar.gz /home/test.tar.gz 1、端口大写P 为参数，22 表示指定连接SSH的端口，如果没有更改默认的SSH端口（即：22）可以不用添加该参数。 root@remoteHost 表示使用root用户登录远程服务器remoteHost，:/root/test.tar.gz 表示远程服务器上的文件，最后面的/hom
linux scp 限制速度,scp和rsyc限速传输
weixin_35086195的博客
05-15 4712
一、scp限速1Mscp -l 1000 文件名 账号@远程机器IP此时的传输速率就是1M／8＝100K左右二、rsync是(限制为 100k Bytes/s)：rsync -auvzP--bwlimit=100 本地的文件 远程的文件参数说明：v：详细提示a：以archive模式操作，复制目录、符号连接，等价于 -rlptgoD 。z：压缩u：只进行更新，防止本地新文件被重写，注意两者机器的时...
scp 传输 限速
python -学习笔记
02-26 1707
scp 传输的时候数据太大 会严重占用带宽，导致其他传输受到影响 需要限制传输速度 scp -l 8000 .file.txt …省略其他… 差不多 是1M/s
scp 的限速功能 拷贝限速功能
热门推荐
Yonghang Zhang的博客
08-30 2万+
用 man  scp 看的   -l  是限速配置     -l limit              Limits the used bandwidth, specified in Kbit/s.   其中 -l   5000   大约是  5000/8     600多点KB/S
rsync & scp 限速及rsync命令
最新发布
huangwei8827488的博客
11-21 1374
a, --archive 归档模式，表示以递归方式传输文件，并保持所有文件属性，等于-rlptgoD。-a, --archive 归档模式，表示以递归方式传输文件，并保持所有文件属性，等于-rlptgoD。-a, --archive 归档模式，表示以递归方式传输文件，并保持所有文件属性，等于-rlptgoD。-C, --cvs-exclude 使用和CVS一样的方法自动忽略文件，用来排除那些不希望传输的文件。-B, --block-size=SIZE 检验算法使用的块尺寸，默认是700字节。
1873_ssh scp的速度限制设置
小灰笔记
01-07 1297
不过凡事也有一个例外，比如我遇到的一个场景：经过了内网穿透的环境，连接了一个远程办公电脑加一个树莓派。总的带宽大概只有10M，足以满足我的远程办公要求以及远程管理树莓派上控制的一些设备。在满足办公体验的前提下，可以实现部分文件数据包的传输，充分利用这个带宽。从我自己的NAS上进行的数据获取测试，在默认的情况下，速度是23MB/s。从上面的帮助信息能够看到，这里是有一个-l的参数可以实现这样的限制的。实际的测试中发现速度基本没了。这么看，可能是之前网络上搜到的说明是对的，而这个内置的说明手册中的单位写错了。
shell脚本scp传送文件
06-28
### 回答1： SCP是一种在Linux系统中用于远程传输文件的命令。使用SCP命令可以将本地文件传输到远程服务器，也可以将远程服务器上的文件传输到本地。 以下是使用shell脚本进行SCP传送文件的示例： ``` #!/bin/bash # 定义远程服务器的IP地址、用户名和密码 remote_ip="192.168.1.100" remote_user="username" remote_password="password" # 定义本地文件和远程服务器上的目标路径 local_file="/path/to/local/file" remote_path="/path/to/remote/directory" # 使用SCP命令传输文件 scppass="-o StrictHostKeyChecking=no -o UserKnownHostsFile=/dev/null" /usr/bin/expect <<EOF spawn scp $scppass $local_file $remote_user@$remote_ip:$remote_path expect { "(yes/no)?" { send "yes\n" expect "*assword:" { send "$remote_password\n" } } "*assword:" { send "$remote_password\n" } } expect eof EOF ``` 以上脚本使用expect命令实现自动输入远程服务器的密码，确保SCP命令可以顺利执行。在实际使用中，需要将脚本中的IP地址、用户名、密码、本地文件路径和远程服务器路径替换为实际的值。 ### 回答2： shell脚本是一种编程语言，它可以用于自动化任务、操作文件和目录、处理文本、执行系统命令等各种操作。其中，scp传送文件是shell脚本功能之一。 SCP是Secure Copy的缩写，是一种安全的文件传输协议，基于SSH协议来实现。使用SCP可以在不同的机器之间进行文件传输，包括上传和下载文件。对于shell脚本来说，使用SCP可以实现自动化、程序化地进行文件传输。 SCP的语法格式如下： scp [options] [source] [destination] 其中，[options]是scp命令的参数，[source]是源文件路径，[destination]是目标路径。 在shell脚本中，使用SCP可以实现例如备份文件的操作。例如，可以编写如下脚本： #!/bin/bash today=$(date +"%Y%m%d") backup_dir="/backup" remote_server="192.168.1.1" remote_user="user" remote_password="password" file_name="app.log" # 创建备份目录 mkdir -p ${backup_dir}/${today} # 备份文件 cp /var/log/${file_name} ${backup_dir}/${today} # 将备份文件上传到远程服务器 expect << EOF spawn scp ${backup_dir}/${today}/${file_name} ${remote_user}@${remote_server}:/backup/ expect "password:" send "${remote_password}\r" expect eof EOF 上述脚本中，首先定义了需要备份的文件路径、备份文件的存放路径、远程服务器的IP、用户名和密码等参数。然后，创建备份目录和备份文件，并使用expect命令将备份文件上传至远程服务器。 需要注意的是，使用scp传送文件需要输入密码，为了自动化脚本，可以使用expect命令来实现自动输入密码，从而实现完全自动化的文件传输。 总之，使用shell脚本实现SCP传送文件可以简化人工操作，提高工作效率，特别是在需要大量文件传输或需要定期备份文件的情况下，使用shell脚本可以大大减少工作量。 ### 回答3： Shell脚本scp传送文件是Linux系统管理员经常使用的命令之一，它提供了一种安全可靠的文件传输方式。SCP（Secure Copy Protocol）是Linux系统下的一种基于SSH协议的文件传输命令，它可以在本地主机与远程主机之间传输文件和目录。 SCP与其他常用的文件传输协议（如FTP，TFTP等）不同，SCP使用SSH协议进行传输，因此具有SSH协议的安全性和稳定性，能够避免一些安全问题。而且SCP的传输速度相对其他传输协议来说较快。 在使用SCP的过程中，我们需要指定源文件和目标文件的路径，其中源文件可以是本地主机上的文件，也可以是远程主机上的文件，目标文件可以是本地主机上的文件，也可以是远程主机上的文件。具体的命令格式如下： scp [参数] [源文件] [目标文件] 其中，参数通常不是必须的，我们可以先了解一下常见的参数： -r：递归复制整个目录（即复制目录及其内容）； -P：指定复制程序的端口号； -v：显示详细复制过程； -C：开启压缩传输。一般建议开启，可以提高传输速度。 接下来，我们以一个具体的例子来说明SCP命令的使用： 假设我们要将本地主机上的/home/myfile文件传输到远程主机的/tmp目录中。那么，我们可以使用如下的命令： scp /home/myfile remoteuser@remotehost:/tmp 其中，/home/myfile是源文件，remoteuser是远程主机的用户名，remotehost是远程主机的IP地址或域名，:/tmp表示目标文件在远程主机的/tmp目录中。 在实际使用中，我们还可以通过配置SSH免密登录来省略输入密码的步骤，从而减少了操作的繁琐性。 总之，使用SCP命令可以实现本地主机与远程主机之间的文件传输，提高工作效率和数据安全性。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值