文件存储方案FastDFS和容器化方案Docker

最新推荐文章于 2021-01-19 10:06:38 发布

王涛涛.

最新推荐文章于 2021-01-19 10:06:38 发布

阅读量1k

点赞数 1

文章标签： FastDFS Docker

本文链接：https://blog.youkuaiyun.com/WangTaoTao_/article/details/100548069

版权

文件存储方案FastDFS

1. FastDFS介绍

用c语言编写的一款开源的轻量级分布式文件系统。
功能包括：文件存储、文件访问（文件上传、文件下载）、文件同步等，解决了大容量存储和负载均衡的问题。特别适合以文件为载体的在线服务，如相册网站、视频网站等等。
为互联网量身定制，充分考虑了冗余备份、负载均衡、线性扩容等机制，并注重高可用、高性能等指标。
可以帮助我们搭建一套高性能的文件服务器集群，并提供文件上传、下载等服务。

$[外链图片转存失败(img-ooQr76jb-1567604695009)(C:\Users\清风\AppData\Roaming\Typora\typora-user-images\1566548065805.png)]$

FastDFS架构包括 Client 、Tracker server 和 Storage server.
- Client请求Tracker进行文件上传、下载，Tracker再调度Storage完成文件上传和下载。
Client：客户端，业务请求的发起方，通过专有接口，使用TCP/IP协议与Tracker或Storage进行数据交互。FastDFS提供了upload、download、delete等接口供客户端使用。
Tracker server：跟踪服务器，主要做调度工作，起负载均衡的作用。在内存中记录集群中所有存储组和存储服务器的状态信息，是客户端和数据服务器交互的枢纽。
Storage server：存储服务器（存储节点或数据服务器），文件和文件属性都保存到存储服务器上。Storage server直接利用OS的文件系统调用管理文件。
- Storage群中的横向可以扩容，纵向可以备份。

2. FastDFS上传和下载流程

$[外链图片转存失败(img-H59aOvqL-1567604695012)(C:\Users\清风\Desktop\优快云素材\07FastDFS上传文件流程.png)]$

$[外链图片转存失败(img-2qQbVXYv-1567604695013)(C:\Users\清风\Desktop\优快云素材\08FastDFS下载文件流程.png)]$

3. FastDFS文件索引

FastDFS上传和下载流程可以看出都涉及到一个数据叫文件索引（file_id）
- **文件索引（file_id）**是客户端上传文件后Storage返回给客户端的一个字符串，是以后访问该文件的索引信息。
文件索引（file_id）信息包括：组名、虚拟磁盘路径、数据两级目录、文件名等信息。
- 组名：文件上传后所在的 Storage 组名称。
- 虚拟磁盘路径：Storage 配置的虚拟路径，与磁盘选项store_path*对应。如果配置了store_path0则是M00，如果配置了store_path1则是M01，以此类推。
- 数据两级目录：Storage 服务器在每个虚拟磁盘路径下创建的两级目录，用于存储数据文件。
- 文件名：由存储服务器根据特定信息生成，文件名包含:源存储服务器IP地址、文件创建时间戳、文件大小、随机数和文件拓展名等信息。

$[外链图片转存失败(img-40Tg0PVs-1567604695015)(C:\Users\清风\Desktop\优快云素材\10FDFS文件索引的使用.jpg)]$

容器化方案Docker

思考：

FastDFS的安装步骤非常的多，涉及的依赖包也很多，当新的机器需要安装FastDFS时，是否需要从头开始安装。

我们在学习时拿到ubuntu系统的镜像，在VM虚拟机中运行这个镜像后，为什么就可以直接进行开发，而不需要重新搭建开发环境。

在工作中，如何高效的保证开发人员写代码的开发环境与应用程序要部署的生产环境一致性。如果要部署一台新的机器，是否需要从头开始部署。

结论：

上述思考的问题，都涉及到相同的工作是否需要重复做。

避免相同的工作重复做是容器化技术应用之一。

容器化方案:

Docker

Docker的目标之一就是缩短代码从开发、测试到部署、上线运行的周期，让我们的应用程序具备可移植性、易于构建、并易于协作。

1. Docker介绍

最低0.47元/天解锁文章