docker存储卷

docker存储卷

cow机制

Docker镜像由多个只读层叠加而成，启动容器时，Docker会加载只读镜像层并在镜像栈顶部添加一个读写层。

如果运行中的容器修改了现有的一个已经存在的文件，那么该文件将会从读写层下面的只读层复制到读写层，该文件的只读版本依然存在，只是已经被读写层中该文件的副本所隐藏，这就是“写时复制(COW)”机制。

对于这种方式来说，我们去访问一个文件，修改和删除等一类的操作，其效率会非常的低，因为隔着很多层镜像。

而要想绕过这种限制，我们可以通过使用存储卷的机制来实现。

什么是存储卷

存储卷就是将宿主机的本地文件系统中存在的某个目录直接与容器内部的文件系统上的某一目录建立绑定关系。这就意味着，当我们在容器中的这个目录下写入数据时，容器会将其内容直接写入到宿主机上与此容器建立了绑定关系的目录。

在宿主机上的这个与容器形成绑定关系的目录被称作存储卷。

使用存储卷的好处

如果容器中跑的进程的所有有效数据都保存在存储卷中，从而脱离容器自身文件系统之后，带来的好处是当容器关闭甚至被删除时，只要不删除与此容器绑定的在宿主机上的这个存储目录，我们就不用担心数据丢失了。因此就可以实现数据持久，脱离容器的生命周期而持久。

我们通过这种方式管理容器，容器就可以脱离主机的限制，可以在任意一台部署了docker的主机上跑容器，而其数据则可以置于一个共享存储文件系统上，比如nfs。

Docker的存储卷默认情况下是使用其所在的宿主机上的本地文件系统目录的，也就是说宿主机上有一块属于自己的硬盘，这个硬盘并没有共享给其他的Docker主机，而在这台主机上启动的容器所使用的存储卷是关联到此宿主机硬盘上的某个目录之上。

这就意味着容器在这台主机上停止运行或者被删除了再重建，只要关联到硬盘上的这个目录下，那么其数据还存在。但如果在另一台主机上启动一个新容器，那么数据就没了。而如果在创建容器的时候我们手动的将容器的数据挂载到一台nfs服务器上，那么这个问题就不再是问题了。

为什么要用存储卷

关闭并重启容器，其数据不受影响，但删除Docker容器，则其更改将会全部丢失。

因此Docker存在的问题有：

存储于联合挂载文件系统中，不易于宿主机访问
容器间数据共享不便
删除容器其数据会丢失
而要解决这些问题，解决方案就是使用存储卷。

存储卷管理方式

存储卷（Data Volume）于容器初始化时被自动创建，由base image提供的卷中的数据会于此期间完成复制。

Volume的初衷是独立于容器的生命周期实现数据持久化，因此删除容器之时既不会删除卷，也不会对未被引用的卷做垃圾回收操作。

存储卷为Docker提供了独立于容器的数据管理机制，我们可以把镜像想象成静态文件，例如“程序”，把卷类比为动态内容，例如“数据”。所以镜像可以重用，而卷则可以共享。

卷实现了“程序(镜像)”和“数据(卷)”的分离，以及“程序(镜像)”和“制作镜像的主机”的分离，用户制作镜像时无须再考虑镜像运行的容器所在的主机的环境。

存储卷的分类

Docker有两种类型的卷，每种类型都在容器中存在一个挂载点，但其在宿主机上的位置有所不同：

1. 绑定挂载卷
   指向主机文件系统上用户指定位置的卷
2. Docker 管理的卷
   Docker 守护程序在主机文件系统的一部分中创建托管卷，该部分归 Docker 所有

容器数据管理
用户在使用Docker的过程中，往往需要能查看容器内应用产生的数据，或者需要把容器内的数据进行备份，甚至多个容器之间进行数据的共享，这必然涉及容器的数据管理操作。

容器中管理数据主要有两种方式：

数据卷（Data Volumes）
数据卷容器（Data Volumes Containers）
容器Volume使用语法：
Docker-managed volume

[root@localhost ~]# docker run -dit --name b1 -v /data centos
Unable to find image 'centos:latest' locally
latest: Pulling from library/centos
a1d0c7532777: Pull complete 
Digest: sha256:a27fd8080b517143cbbbab9dfb7c8571c40d67d534bbdee55bd6c473f432b177
Status: Downloaded newer image for centos:latest
8bc19af795322144d3419fb294537b4dfe8fda706e91fc4ad5eb63a6edcaaab1
[root@localhost ~]# docker ps
CONTAINER ID   IMAGE     COMMAND       CREATED              STATUS              PORTS     NAMES
8bc19af79532   centos    "/bin/bash"   About a minute ago   Up About a minute             b1
[root@localhost ~]# docker exec -it b1 /bin/bash
[root@8bc19af79532 /]# ls --color
bin   dev  home  lib64       media  opt   root  sbin  sys  usr
data  etc  lib   lost+found  mnt    proc  run   srv   tmp  var
[root@8bc19af79532 /]# cd /data
[root@8bc19af79532 data]# echo 'hello world' > abc.txt
[root@8bc19af79532 data]# cat abc.txt
hello world
[root@8bc19af79532 data]# cd
[root@8bc19af79532 ~]# exit
exit
[root@localhost ~]# docker exec -it b1 /bin/bash
[root@8bc19af79532 /]# ls --color
bin   dev  home  lib64       media  opt   root  sbin  sys  usr
data  etc  lib   lost+found  mnt    proc  run   srv   tmp  var
[root@8bc19af79532 /]# cd /data/
[root@8bc19af79532 data]# echo 'hello world' > abc.txt
[root@8bc19af79532 data]# cat abc.txt
hello world
[root@8bc19af79532 data]# cd
[root@8bc19af79532 ~]# exit
exit
[root@localhost ~]# docker inspect b1
[
    {
        "Id": "8bc19af795322144d3419fb294537b4dfe8fda706e91fc4ad5eb63a6edcaaab1",
        "Created": "2022-08-10T10:59:31.986380017Z",
        "Path": "/bin/bash",
        "Args": [],
        "State": {
            "Status": "running",
            "Running": true,
            "Paused": false,
            "Restarting": false,
            "OOMKilled": false,
            "Dead": false,
            "Pid": 4868,
            "ExitCode": 0,
            "Error": "",
            "StartedAt": "2022-08-10T10:59:32.434402613Z",
            "FinishedAt": "0001-01-01T00:00:00Z"
        },
        "Image": "sha256:5d0da3dc976460b72c77d94c8a1ad043720b0416bfc16c52c45d4847e53fadb6",
        "ResolvConfPath": "/var/lib/docker/containers/8bc19af795322144d3419fb294537b4dfe8fda706e91fc4ad5eb63a6edcaaab1/resolv.conf",
        "HostnamePath": "/var/lib/docker/containers/8bc19af795322144d3419fb294537b4dfe8fda706e91fc4ad5eb63a6edcaaab1/hostname",
        "HostsPath": "/var/lib/docker/containers/8bc19af795322144d3419fb294537b4dfe8fda706e91fc4ad5eb63a6edcaaab1/hosts",
        "LogPath": "/var/lib/docker/containers/8bc19af79532214
        [root@localhost ~]# docker inspect b1 |grep "Source"
                "Source": "/var/lib/docker/volumes/b8302763e9d62b75539ff6908856d4efc22a844a51637af9b2b4eaffa9c3f607/_data",
[root@localhost ~]# cd /var/lib/docker/volumes/b8302763e9d62b75539ff6908856d4efc22a844a51637af9b2b4eaffa9c3f607/_data
[root@localhost _data]# ls
abc.txt
[root@localhost _data]# cat abc.txt
hello world
[root@localhost _data]# touch jay.txt
[root@localhost _data]# ls
abc.txt  jay.txt
[root@localhost _data]# docker exec -it b1 /bin/bash
[root@8bc19af79532 /]# ls /data/
abc.txt  jay.txt
[root@8bc19af79532 /]# docker rm -f -v b1
bash: docker: command not found
[root@8bc19af79532 /]# exit
exit
[root@localhost _data]# exit
[root@localhost ~]# docker rm -f -v b1
b1
[root@localhost ~]# docker ps
CONTAINER ID   IMAGE     COMMAND   CREATED   STATUS    PORTS     NAMES
[root@localhost ~]# cd /var/lib/docker/volumes/
[root@localhost volumes]# ls
backingFsBlockDev  metadata.db
[root@localhost volumes]# 

‎绑定装载卷‎

[root@localhost ~]# docker run -dit --name b2 -v /opt/data:/data centos
194b18e8f8860446ba86df6714cc9495db77f0eb58f36382110945a64a666f8c
[root@localhost ~]# docker ps
CONTAINER ID   IMAGE     COMMAND       CREATED          STATUS          PORTS     NAMES
194b18e8f886   centos    "/bin/bash"   11 seconds ago   Up 10 seconds             b2
[root@localhost ~]# docker exec -it b2 /bin/bash
[root@194b18e8f886 /]# ls --color
bin   dev  home  lib64       media  opt   root  sbin  sys  usr
data  etc  lib   lost+found  mnt    proc  run   srv   tmp  var
[root@194b18e8f886 /]# cd /data/              
[root@194b18e8f886 data]# mkdir abc.txt
[root@194b18e8f886 data]# ls
abc.txt
[root@194b18e8f886 data]# cd
[root@194b18e8f886 ~]# exit
exit
[root@localhost ~]# cd /opt/data/
[root@localhost data]# ls
abc.txt
[root@localhost data]# touch hh.txt
[root@localhost data]# ls
abc.txt  hh.txt
[root@localhost ~]# docker exec -it b2 /bin/bash
[root@194b18e8f886 /]# cd /data/
[root@194b18e8f886 data]# ls
abc.txt  hh.txt
[root@194b18e8f886 data]# 
[root@localhost ~]# docker rm -f -v b2
b2
[root@localhost ~]# docker ps
CONTAINER ID   IMAGE     COMMAND   CREATED   STATUS    PORTS     NAMES
[root@localhost ~]# ls
anaconda-ks.cfg
[root@localhost ~]# 

在容器中使用数据卷

在容器内创建一个数据卷

下面使用nginx镜像创建一个web容器，并创建一个数据卷挂载到容器的/webapp目录下：

[root@localhost ~]# docker run -itd --name t1 -P -v /web httpd 
Unable to find image 'httpd:latest' locally
latest: Pulling from library/httpd
a2abf6c4d29d: Pull complete 
dcc4698797c8: Pull complete 
41c22baa66ec: Pull complete 
67283bbdd4a0: Pull complete 
d982c879c57e: Pull complete 
Digest: sha256:0954cc1af252d824860b2c5dc0a10720af2b7a3d3435581ca788dff8480c7b32
Status: Downloaded newer image for httpd:latest
77d339b89cb9f0f886049aa277925ec4d3c2302713a73168f4b29bc21d3f8686
[root@localhost ~]# docker ps
CONTAINER ID   IMAGE     COMMAND              CREATED          STATUS          PORTS                                     NAMES
77d339b89cb9   httpd     "httpd-foreground"   20 seconds ago   Up 19 seconds   0.0.0.0:49153->80/tcp, :::49153->80/tcp   t1
[root@localhost ~]# 

这里的-P是允许外部访问容器需要暴露的端口。

挂载一个主机目录作为数据卷

[root@localhost ~]# docker run -dit --name t2 -P -v /var/www/html:/web httpd
06db064e1a920c41a52a130628a51713f02bc529847287e54b331ea84161a2cc
[root@localhost ~]# docker ps
CONTAINER ID   IMAGE     COMMAND              CREATED          STATUS          PORTS                                     NAMES
06db064e1a92   httpd     "httpd-foreground"   11 seconds ago   Up 10 seconds   0.0.0.0:49154->80/tcp, :::49154->80/tcp   t2
77d339b89cb9   httpd     "httpd-foreground"   2 minutes ago    Up 2 minutes    0.0.0.0:49153->80/tcp, :::49153->80/tcp   t1
[root@localhost ~]# 

上面的命令加载主机的/var/www/html目录到容器的/webapp目录：
这个功能在进行测试的时候非常方便，比如用户可以放置一些程序或数据到本地目录中，然后在容器内运行和使用。另外，本地目录的路径必须是绝对路径，如果目录不存在，Docker会自动创建。

[root@localhost ~]# cd /var/www/html/
[root@localhost html]# ls
[root@localhost html]# mkdir l e g
[root@localhost html]# ls
e  g  l
[root@localhost html]# cd
[root@localhost ~]# docker exec -it t2 /bin/bash
root@06db064e1a92:/usr/local/apache2# cd /web/
root@06db064e1a92:/web# ls
e  g  l
root@06db064e1a92:/web# 

Docker挂载数据卷的默认权限是读写(rw)，用户也可以通过(ro)指定为只读：

[root@localhost ~]# docker run -dit --name t3 -P -v /var/www/html:/web:ro httpd
5cb4ef0c85b81795dae2427b7b5f79524510924eb4efea1d284b574826f4094f
[root@localhost ~]# docker exec -it t3 /bin/bash
root@5cb4ef0c85b8:/usr/local/apache2# cd /web/
root@5cb4ef0c85b8:/web# ls
e  g  l
root@5cb4ef0c85b8:/web# touch 1
touch: cannot touch '1': Read-only file system
root@5cb4ef0c85b8:/web# rm -rf  
root@5cb4ef0c85b8:/web# rm -rf l
rm: cannot remove 'l': Read-only file system
root@5cb4ef0c85b8:/web# exit
exit
[root@localhost ~]# 

加了:ro以后，容器内挂载的数据卷的数据就无法修改了。

挂载一个本地主机文件作为数据卷

-v选项也可以从主机挂载单个文件到容器中作为数据卷：

[root@localhost ~]# echo leg > /root/index.html
[root@localhost ~]# docker run -dit --rm --name t4 -v /root/index.html:/index.html httpd
00252ec42e0888da395994f57630c8bdd56df39af83e74f0bc4b319faaeb26b6
[root@localhost ~]# docker exec -it t4 /bin/bash
root@00252ec42e08:/usr/local/apache2# cd /
root@00252ec42e08:/# ls
bin   dev  home        lib    media  opt   root  sbin  sys  usr
boot  etc  index.html  lib64  mnt    proc  run	 srv   tmp  var
root@00252ec42e08:/# cat index.html
leg
root@00252ec42e08:/# 

这样就可以记录在容器输入过的命令历史了。

如果直接挂载一个文件到容器，使用文件编辑工具，包括vi或者sed去修改文件内容的时候，可能会造成inode的改变，这样将会导致错误。所以推荐的方式是直接挂载文件所在的目录。

数据卷容器

如果用户需要在容器之间共享一些持续更新的数据，最简单的方式是使用数据卷容器。数据卷容器其实就是一个普通的容器，专门用它提供数据卷供其他容器挂载使用，方法如下：

首先，创建一个数据卷容器dbdata，并在其中创建一个数据卷挂载到/dbdata：

[root@localhost ~]# docker run -dit --name hh1 -v /data centos
6cb1f9a09a1cff83fabf1616d67a6068a7436fd18c32dc59719809abe7a12c15
[root@localhost ~]# 

然后可以在其他容器中使用–volumes-from来挂载dbdata容器中的数据卷，例如创建db1和db2两个容器，并从dbdata容器挂载数据卷：

[root@localhost ~]# docker run -dit --name hh2 --volumes-from hh1 centos
de4228f1f98646ce9aee50a9257fc4c86b231fc2d520bfe3d40945e86fb0db1c
[root@localhost ~]# docker run -dit --name hh3 --volumes-from hh1 centos
6e660938a901ebb650f7b996a8e63a9088f33537faa24aa7142259975ec38c22
[root@localhost ~]# 

此时，容器db1和db2都挂载同一个数据卷到相同的/dbdata目录。三个容器任何一方在该目录下的写入，其他容器都可以看到。
例如，在db1容器中创建一个test文件：

[root@localhost ~]# docker exec -it hh2 /bin/bash
[root@de4228f1f986 /]# cd data/
[root@de4228f1f986 data]# ls
[root@de4228f1f986 data]# touch leg hh
[root@de4228f1f986 data]# ls
hh  leg
[root@de4228f1f986 data]# 

在db2容器中查看:

[root@localhost ~]# docker exec -it hh3 /bin/bash
[root@6e660938a901 /]# cd data/
[root@6e660938a901 data]# ls
hh  leg
[root@6e660938a901 data]# 

可以多次使用–volumes-from参数来从多个容器挂载多个数据卷。还可以从其他已挂载了容器卷的容器来挂载数据卷：

[root@localhost ~]# docker run -dit --name hh4 --volumes-from hh3 httpd
4acb17f4f3c455551a800700770902a1303ef6c47af954408ef6df7bb6d9f6af
[root@localhost ~]# docker exec -it hh4 /bin/bash
root@4acb17f4f3c4:/usr/local/apache2# ls /data/
hh  leg
root@4acb17f4f3c4:/usr/local/apache2# exit
exit
[root@localhost ~]# 

使用–volumes-from参数所挂载数据卷的容器自身并不需要保持在运行状态。

如果删除了挂载的容器（包括dbdata、db1和db2），数据卷并不会被自动删除。如果要删除一个数据卷，必须在删除最后一个还挂载着它的容器时显式使用docker rm -v命令来指定同时删除关联的容器。

利用数据卷容器迁移数据

可以利用数据卷容器对其中的数据卷进行备份、恢复，以实现数据的迁移。

备份

使用下面的命令来备份dbdata数据卷容器内的数据卷：

[root@localhost ~]# docker run -dit --name a1 -v /data centos
30bf3f9f82b6b89c119abdc4983ebd1b361e03157e415004b5c7110a5e32b7b5
[root@localhost ~]# docker ps
CONTAINER ID   IMAGE     COMMAND              CREATED          STATUS          PORTS                                     NAMES
30bf3f9f82b6   centos    "/bin/bash"          10 seconds ago   Up 9 seconds                                              a1

[root@localhost ~]# docker run -dit --name a2 -v $(pwd):/backup --volumes-from a1
 centos tar cvf /backup/backup.tar /data
dc469ddc098656a40e9052230632720bc3f6c0e043a08e8f5729e068ab0cc807
[root@localhost ~]# ls
anaconda-ks.cfg  backup.tar  index.html
[root@localhost ~]# 

这个命令稍微有点复杂，具体分析下。
首先利用centos镜像创建了一个容器worker。使用–volumes-from dbdata参数来让worker容器挂载dbdata容器的数据卷（即dbdata数据卷）；使用-v $(pwd):/backup参数来挂载本地的当前目录到worker容器的/backup目录。
worker容器启动后，使用了tar cvf /backup/backup.tar /dbdata命令来将/dbdata下内容备份为容器内的/backup/backup.tar，即宿主主机当前目录下的backup.tar。

恢复

如果要恢复数据到一个容器，可以按照下面的操作。首先创建一个带有数据卷的容器dbdata2：

[root@localhost ~]# docker run -dit --name a3 -v /data centos
e622578ab9b1d06ab003ffb88aa94df1356cfc7573d462dd848d75da500aa77a
[root@localhost ~]# docker ps
CONTAINER ID   IMAGE     COMMAND              CREATED          STATUS          PORTS                                     NAMES
e622578ab9b1   centos    "/bin/bash"          9 seconds ago    Up 8 seconds                                              a3
30bf3f9f82b6   centos    "/bin/bash"          5 minutes ago    Up 5 minutes                                              a1

然后创建另一个新的容器，挂载dbdata2容器，并使用untar解压备份文件到所挂载的容器卷中即可：

[root@localhost ~]# docker run -dit --name a4 --volumes-from a3 -v$(pwd):/backup centos tar cvf /backup/backup.tar
83b7d07a3367e04bff8de7f8fcf4b1d262c7a4c767d37a7031f494b3dda46690
[root@localhost ~]# docker ps -a
CONTAINER ID   IMAGE     COMMAND                  CREATED          STATUS                      PORTS                                     NAMES
83b7d07a3367   centos    "tar cvf /backup/bac…"   11 seconds ago   Exited (2) 10 seconds ago                                             a4
e622578ab9b1   centos    "/bin/bash"              2 minutes ago    Up 2 minutes                                                          a3