文章目录
文件资料阿里云网盘 链接:https://www.aliyundrive.com/s/4tZv36dvmoU
一.Fastdfs简介
1.什么是fastdfs
- fastdfs是一个轻量级的开源分布式文件系统;
- fastdfs主要解决了大容量的文件存储和高并发访问的问题,文件存取时实现了负载均衡;
- fastdfs实现了软件方式的raid,可以使用廉价的ide硬盘进行存储支持存储服务器在线扩容支持相同内容的文件只保存一份,节约磁盘空间;
- fastdfs只能通过client api访问,不支持posix访问方式;
- fastdfs特别适合大中型网站使用,用来存储资源文件(如:图片、文档、音频、视频等等)。
2.fastdfs框架图
其中:
**tracker server:**跟踪服务器,主要做调度工作,在访问上起负载均衡的作用。记录storage server的状态,是连接client和storage server的枢纽。
storage server:存储服务器,文件和meta data都保存到存储服务器上
**group:**组,也可称为卷。同组内服务器上的文件是完全相同的文件标识:包括两部分:组名和文件名(包含路径)
**meta data:**文件相关属性,键值对(key value pair)方式,如:width=1024,heigth=768
3.上传下载文件流程
上传
(1)client询问tracker上传到的storage,不需要附加参数;
(2)tracker返回一台可用的storage;
(3)client直接和storage通讯完成文件上传。
下载
(1)client询问tracker下载文件的storage,参数为文件标识(组名和文件名);
(2)tracker返回一台可用的storage;
(3)client直接和storage通讯完成文件下载
4.同步机制
(1)同一组内的storage server之间是对等的,文件上传、删除等操作可以在任意一台storage server上进行;
(2)文件同步只在同组内的storage server之间进行,采用push方式,即源服务器同步给目标服务器;
(3)源头数据才需要同步,备份数据不需要再次同步,否则就构成环路了;
(4)上述第二条规则有个例外,就是新增加一台storage server时,由已有的一台storage server将已有的所有数据(包括源头数据和备份数据)同步给该新增服务器。
5.tracker server目录结构
(1)data
storage_groups.dat:存储分组信息
storage_servers.dat:存储服务器列表
(2)logs
trackerd.log:tracker server日志文件
6.storage server目录结构
1)data
.data_init_flag:当前storage server初始化信息
storage_stat.dat:当前storage server统计信息
sync:存放数据同步相关文件
binlog.index:当前的binlog文件索引号
binlog.###:存放更新操作记录(日志)
KaTeX parse error: Expected group after '_' at position 10: {ip_addr}_̲{port}.mark:存放同步的完成情况
(2)logs
storaged.log: