大批量拉取镜像（多线程方式拉取）

最新推荐文章于 2024-12-23 15:56:04 发布

原创最新推荐文章于 2024-12-23 15:56:04 发布 · 1.3k 阅读

3 ·

CC 4.0 BY-SA版权

文章标签：

#docker

Docker 同时被 2 个专栏收录

4 篇文章

订阅专栏

个人

3 篇文章

订阅专栏

本文介绍了一种使用多进程并行拉取大量Docker镜像的方法，通过cat和xargs命令结合docker pull实现效率提升。适用于需要快速部署多个容器服务的场景。

因为项目原因，要拉取100+个镜像。

vim /tmp/images.list

内容如下：

alpine:latest
bitnami/minio:2020.5.16-debian-10-r0
bitnami/mongodb:4.2.8-debian-10-r26
bitnami/redis:6.0.1-debian-10-r1
bitnami/redis-exporter:1.6.0-debian-10-r2
bitnami/redis-sentinel:6.0.1-debian-10-r0

以 10 个进程拉取列表中的镜像

cat /tmp/images.list | xargs -I{} -n 1 -P 10 docker pull {}

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

杰杰的刘某某

关注关注

0
点赞
踩
3

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

大厂消息中间件高频面试题与知识点整理（RabbitMQ、RocketMQ、ActiveMQ、Kafka、ZeroMQ、MetaMQ）

曾经“等你生日那天”都遥远得像未来，如今却可欢愉的挥手说“下个十年见”

04-07

172万+

互联网高频面试之消息中间件基本问题和知识点整理分析

【打工日常】解决docker对镜像pull的很慢的问题

全糖少冰我吃不了苦

04-24

6954

有时候docker去pull某些镜像的时候，会很慢，几十k的下载，如果是非常大的镜像，那基本上是不奢望能下载下来的了，因为下载往往要等待很久，甚至会出现进度条停止下载卡死的情况。那这时候我们可以通过改成国内的镜像源，像阿里云腾讯云之类的镜像源，这是最直接解决的办法了，另外还有一些可以使用加速器、多线程下载工具等等方法适当加速dockerhub的拉去速度。其实原因是：因为我们docker默认镜像地址是国外源的问题，而从国内访问国外的docker hub的速度会很慢。3.重新加载源，重启docker服务。

参与评论您还未登录，请先登录后发表或查看评论

Shell 批量拉取docker镜像（当前目录和指定目录）

qq_16688317的博客

05-13

1191

Shell 批量拉取容器镜像，复制即可用

批量下载以及导出镜像

tanjunchen的博客

12-27

1217

images_base.txt 内容如下所示： gcr.io/spiffe-io/spire-agent:1.0.0 gcr.io/spiffe-io/spire-server:1.0.0 #!/bin/bash # 创建文件夹 rm -rf images/* rm -rf images.tar.gz mkdir images # pull、save 镜像 echo "拉取并且保存镜像" for pull_image in $(cat images_base.txt) do echo "开始拉.

安装Rancher批量拉取Docker镜像的shell脚本.zip

05-26

安装Rancher批量拉取Docker镜像的shell脚本 rancher-pull.sh

一步一步教你批量导入和导出docker镜像文件

fastboot

11-15

1266

维护服务器时，如果服务器没有网络，还需要批量加载多个Docker镜像文件，我们可以使用脚本通过循环来自动化这个操作过程。批量导入docker镜像文件创建一个文本文件，列出你要加载的所有镜像文件路径。每行一个文件路径。创建一个Shell脚本（例如load_images.sh），并打开它。在脚本中，使用docker load命令加载每个镜像文件。你可以使用for循环来遍历文件列表并加载每个镜像文件。脚...

docker下载镜像设置

最新发布

菜鸡正在学习

12-23

429

对于docker下载过慢问题，修改daemon.json进行相应设置。打开界面后，将以下复制进json文件。保存后退出，重启docker。

大批量设备部署救星：EDS1000参数备份与恢复机制高效管理指南

[大批量设备部署救星：EDS1000参数备份与恢复机制高效管理指南](https://www.ahd.de/wp-content/uploads/Backup-Strategien-Inkrementelles-Backup.jpg) # 摘要 EDS1000作为企业级设备管理系统，其参数备份与恢复...

量产烧录自动化解决方案：多设备并行烧录+自动校验流程优化实战

[量产烧录自动化解决方案：多设备并行烧录+自动校验流程优化实战](https://static.wixstatic.com/media/a276b1_d5074a77457e413faeaa7c3832df9396~mv2.jpg/v1/fill/w_980,h_551,al_c,q_85,usm_0.66_1.00_0.01,enc_...

批量OTA管理实战：手把手搭建轻量级本地升级服务器（支持百台设备并发）

典型架构包含设备注册中心、固件仓库、任务调度引擎和升级反馈闭环，为后续轻量级服务器构建与大规模部署奠定基础。 # 2. 轻量级OTA服务器的理论基础与关键技术选型在物联网系统中，OTA（Over-The-Ai

使用DPL进行多场景对比分析：工况管理、数据归集与差异识别核心技术

本文围绕DPL多场景对比分析的核心框架与应用价值，系统构建了工况管理的理论体系与实施路径，提出了基于业务场景的工况抽象与标准化分类模型，并设计了支持动态调度的多维度配置机制。在数据归集层面，构建了兼容...

Docker拉取镜像的完整步骤

01-20

1. docker pull 拉取镜像使用 $ docker pull {IMAGE_NAME} 拉取镜像时，有两种情况: IMAGE_NAME 第一个斜杠之前有域名标识 Docker 会将 IMAGE_NAME 识别为带域名的镜像。例如，myregistry.io/space1/image1:latest ，Docker 会去 myregistry.io 指向的服务器请求镜像数据。一个 Docker 镜像分为很多层，如果本地存在该层，则不会再次拉取。 IMAGE_NAME 第一个斜杠之前没有域名标识 Docker 会将 IMAGE_NAME 拼接为 docker.io/IMAGE

docker的脚本安装

11-12

使用该脚本可便捷的安装docker-ce的18版本，同时还做了docker镜像加速

docker基础，多线程高并发

m0_62289824的博客

04-03

1609

d: 后台运行容器，并返回容器ID；不加这一个默认直接进入容器，之后如果退出则会连着容器一起挂起（暂停运行）。-i: 以交互模式运行容器，通常与 -t 同时使用；-t: 为容器重新分配一个伪输入终端，通常与 -i 同时使用；同时使用it之后，你就可以进入到这个容器里面,就像在一台新的Linux主机中了。-p: 指定端口映射，格式为：主机(宿主)端口:容器端口；非常常用，从容器外访问容器内服务的主要方式。–name=“nginx-lb”: 为容器指定一个名称；

docker使用aliyun加速下载镜像

satomic的博客

01-21

920

Docker 镜像加速器我们使用Docker的第一步，应该是获取一个官方的镜像，例如mysql、wordpress，基于这些基础镜像我们可以开发自己个性化的应用。我们可以使用Docker命令行工具来下载官方镜像。但是因为网络原因，我们下载一个300M的镜像需要很长的时间，甚至下载失败。因为这个原因，阿里云容器Hub服务提供了官方的镜像站点加速官方镜像的下载速度。

Docker

会写Bug的攻城狮

02-11

1226

Docker 一、Docker的基本命令 # docker启动 $ systemctl start docker $ service docker start # 重启docker服务 $ systemctl restart docker $ sudo service docker restart # 关闭docker $ systemctl stop docker $ service docker stop # 查看是否启动成功 $ docker ps -a

docker的安装以及使用

weixin_43723658的博客

11-18

617

Docker的安装以及使用：脚本安装与yum安装：脚本安装： curl -sSL https://get.docker.com/ | sh Yum安装：使用一个有权限的账户登录红帽系统更新现有 YUM 包 yum update 添加 Docker 源，并安装 vim /etc/yum.repos.d/docker.repo [dockerrepo] name=Doc...

【玩转容器】搞定Docker的push和pull命令，一刀流带你飙升数据库操控技能！

我的树洞

12-09

1095

总的来说，docker的push和pull命令是Docker用来管理镜像的重要工具，通过这些命令，开发者可以方便地在本地开发和部署应用程序，同时也可以轻松地将这些镜像分享给其他用户。命令是不会把镜像推送到Docker仓库的。在这种情况下，你需要先使用。请注意，如果你没有对本地镜像做任何修改，直接运行。命令为本地镜像添加一个新标签，然后再使用。命令将这个新标签推送到Docker仓库。push和pull命令用于管理镜像。

修改Docke上传/下载并发线程数（解决docker: unexpected EOF.）

MAVER1CK的博客

12-20

2692

下载镜像时，有可能因为网络问题导致报出docker: unexpected EOF.的错误，这时候可以考虑通过修改。

k8s以http方式 harbor拉取镜像

11-02

Kubernetes（K8s）是一个开源的容器编排系统，用于自动化容器的部署、扩展和管理。Harbor是一个可信赖的企业级容器镜像仓库，它允许用户管理和存储Docker镜像。 Kubernetes可以使用HTTP方式来拉取Harbor上的镜像。在K8s集群中配置Kubernetes的Pod，可以通过定义容器的镜像名称来指定从Harbor拉取镜像。首先，需要在K8s集群中配置一个Secret对象，用于存储Harbor镜像仓库的凭证信息，包括用户名和密码。然后，在定义Pod的时候，可以通过添加imagePullSecrets字段，将Secret对象引用到Pod中。当Kubernetes调度并创建Pod时，它会根据Pod中的镜像名称和引用的Secret对象，使用HTTP方式向Harbor发送拉取镜像的请求。Harbor会验证Pod中的凭证信息，并向Kubernetes返回镜像的相关信息。通过HTTP方式拉取镜像的好处是，可以通过配置HttpHeader来进行更灵活的镜像拉取操作，例如允许拉取指定版本的镜像或者拉取特定标签的镜像。此外，使用HTTP方式还可以与Harbor的访问控制策略进行集成，以确保只有授权的用户能够拉取镜像。总之，Kubernetes可以使用HTTP方式从Harbor拉取镜像。通过配置Secret对象进行凭证信息的引用，Kubernetes可以根据Pod中定义的镜像名称和引用的Secret对象，通过HTTP方式与Harbor进行通信并获取所需的镜像。这样的集成使得Kubernetes与Harbor更加紧密地结合在一起，提供了更安全、可靠的容器镜像管理和部署方案。