Fastdfs

最新推荐文章于 2025-04-22 11:04:08 发布
最新推荐文章于 2025-04-22 11:04:08 发布
阅读量184 收藏
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/weixin_45936641/article/details/112916068
版权
Fastdfs是一款轻量级的分布式文件系统，专为大数据量的小文件存储设计，适用于图片、文档等4KB至500M的文件。系统包括客户端、跟踪服务器和存储服务器三部分。每个存储组内的节点数据相同，实现冗余备份，确保数据安全。在环境部署中，所有主机都需要安装Fastdfs，特定主机安装Nginx。通过多步配置和启动服务，最终实现文件的上传、访问和删除功能。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

Fastdfs

定位：
分布式实时文件存储系统，适合存储图片、文档，文件大小是4KB<size<500M，效率最高
分布式，是多个主机

角色：
1、客户端：client
2、跟踪服务器：tracker server
3.存储服务器：storage server
在这里插入图片描述

上传流程图
在这里插入图片描述
在这里插入图片描述
Storage server：是以组的形式存在，每一组的节点数据完全一样，起到数据冗余备份的作用
不同组的节点数据不一样

在这里插入图片描述
在这里插入图片描述

环境：

主机ip
客户端192.168.10.10
tracher1192.168.10.20
tracher2192.168.10.30
group1-1192.168.10.40
group1-2192.168.10.50
group2-1192.168.10.60
group2-2192.168.10.70

安装fastdfs 所有主机都要安装

[root@localhost ~]# yum -y install gcc* automake autoconf zlib zlib-devel openssl openssl-devel pcre pcre-devel
[root@localhost ~]# tar -zxf fastdfs.tar.gz -C /usr/local/src/
[root@localhost ~]# cd /usr/local/src/libfastcommon/
[root@localhost libfastcommon]# ./make.sh && ./make.sh install && cd ..
[root@localhost src]# cd fastdfs 
[root@localhost fastdfs]# ./make.sh && ./make.sh install && cd ..
[root@localhost src]# cp /etc/fdfs/tracker.conf.sample /etc/fdfs/tracker.conf
[root@localhost src]# cp /etc/fdfs/storage.conf.sample /etc/fdfs/storage.conf
[root@localhost src]# cp /etc/fdfs/client.conf.sample /etc/fdfs/client.conf
[root@localhost src]# cp fastdfs/conf/http.conf /etc/fdfs/
[root@localhost src]# cp fastdfs/conf/mime.types /etc/fdfs/
[root@localhost src]# systemctl stop firewalld
[root@localhost src]# setenforce 0
[root@localhost src]# cp /usr/local/src/fastdfs-nginx-module/src/mod_fastdfs.conf /etc/fdfs/
[root@localhost src]# mkdir -p /home/yuqing/fastdfs

安装nginx 在第一台和最后四台上安装

[root@localhost ~]# tar -zxf nginx-1.15.4.tar.gz 
[root@localhost ~]# cd nginx-1.15.4/
[root@localhost nginx-1.15.4]# ./configure --add-module=/usr/local/src/fastdfs-nginx-module/src && make && make install
[root@localhost nginx-1.15.4]# ln -s /usr/local/nginx/sbin/nginx    /usr/sbin/
[root@localhost nginx-1.15.4]# nginx -v
nginx version: nginx/1.15.4

客户端：

[root@localhost ~]# vim /etc/fdfs/client.conf
10 base_path=/home/yuqing/fastdfs
#修改添加
14 tracker_server=192.168.10.20:22122  #指定tracker的ip
 15 tracker_server=192.168.10.30:22122

tracher1主机

[root@localhost ~]# vim /etc/fdfs/tracker.conf
8 bind_addr=192.168.10.20 #本机ip
11 port=22122
22 base_path=/home/yuqing/fastdfs

tracher2主机

 vim /etc/fdfs/tracker.conf
8 bind_addr=192.168.10.30
11 port=22122
22 base_path=/home/yuqing/fastdfs

group1-1主机

[root@localhost ~]# vim /etc/fdfs/storage.conf
11 group_name=group1
15 bind_addr=192.168.10.40 #本机ip
 41 base_path=/home/yuqing/fastdfs
 110 store_path0=/home/yuqing/fastdfs
119 tracker_server=192.168.10.20:22122  #tracher1的ip地址
120 tracker_server=192.168.10.30:22122   #tracher2的ip地址
285 http.server_port=8888

因为后面几台主机的修改内容一样，所以直接将配置文件拷贝到后面几台group主机上即可
[root@localhost ~]# scp /etc/fdfs/storage.conf root@192.168.10.50:/etc/fdfs/storage.conf
[root@localhost ~]# scp /etc/fdfs/storage.conf root@192.168.10.60:/etc/fdfs/storage.conf
[root@localhost ~]# scp /etc/fdfs/storage.conf root@192.168.10.70:/etc/fdfs/storage.conf

group1-2主机

[root@localhost ~]# vim /etc/fdfs/storage.conf
15 bind_addr=192.168.10.50

group2-1主机

[root@localhost ~]# vim /etc/fdfs/storage.conf
11 group_name=group2
15 bind_addr=192.168.10.60

group2-2主机

[root@localhost ~]# vim /etc/fdfs/storage.conf
11 group_name=group2
15 bind_addr=192.168.10.70 #本机ip

group1-1主机

[root@localhost ~]# vim /etc/fdfs/mod_fastdfs.conf 
10 base_path=/home/yuqing/fastdfs
40 tracker_server=192.168.10.20:22122
41 tracker_server=192.168.10.30:22122
48 group_name=group1
54 url_have_group_name = true  #路径当中是否包含组名
58 store_path_count=1
63 store_path0=/home/yuqing/fastdfs
114 group_count = 2

#取消119-123行的注释
119 [group1]
120 group_name=group1
121 storage_server_port=23000
122 store_path_count=1   #改为1
123 store_path0=/home/yuqing/fastdfs

#取消129-133行的注释
129 [group2]
130 group_name=group2
131 storage_server_port=23000
132 store_path_count=1
133 store_path0=/home/yuqing/fastdfs

将配置文件远程拷贝到后三台

[root@localhost ~]# scp /etc/fdfs/mod_fastdfs.conf root@192.168.10.50:/etc/fdfs/mod_fastdfs.conf
[root@localhost ~]# scp /etc/fdfs/mod_fastdfs.conf root@192.168.10.60:/etc/fdfs/mod_fastdfs.conf
[root@localhost ~]# scp /etc/fdfs/mod_fastdfs.conf root@192.168.10.70:/etc/fdfs/mod_fastdfs.conf

group2-1主机

[root@localhost ~]# vim /etc/fdfs/mod_fastdfs.conf
48 group_name=group2

group2-2主机

[root@localhost ~]# vim /etc/fdfs/mod_fastdfs.conf 
48 group_name=group2

客户端：

[root@localhost ~]# vim /etc/fdfs/mod_fastdfs.conf 
10 base_path=/home/yuqing/fastdfs
40 tracker_server=192.168.10.20:22122
 41 tracker_server=192.168.10.30:22122

group1-1主机 修改nginx配置文件

[root@localhost ~]# vim /usr/local/nginx/conf/nginx.conf
36         listen       8888;
#添加
42         location ~/group[0-9]/MOO/ {  #当访问的是storge里面的组
 43                  ngx_fastdfs_module;   #就进入到连接的fastdfs的模块中
 44         }

将配置文件拷贝到后三台主机

[root@localhost ~]# scp /usr/local/nginx/conf/nginx.conf root@192.168.10.50:/usr/local/nginx/conf/nginx.conf
[root@localhost ~]# scp /usr/local/nginx/conf/nginx.conf root@192.168.10.60:/usr/local/nginx/conf/nginx.conf
[root@localhost ~]# scp /usr/local/nginx/conf/nginx.conf root@192.168.10.70:/usr/local/nginx/conf/nginx.conf

客户端

[root@localhost ~]# vim /usr/local/nginx/conf/nginx.conf
#添加
34     upstream fdfs_group1{
 35         server 192.168.10.40:8888 max_fails=3 fail_timeout=20s;
 36         server 192.168.10.50:8888 max_fails=3 fail_timeout=20s;
 37     }
 38     upstream fdfs_group2{
 39         server 192.168.10.60:8888 max_fails=3 fail_timeout=20s;
 40         server 192.168.10.70:8888 max_fails=3 fail_timeout=20s;
 41     }

50         location ~/group1/ {
 51             proxy_pass http://fdfs_group1;
 52         }
 53         location ~/group2/ {
 54             proxy_pass http://fdfs_group2;
 55         }
[root@localhost ~]# nginx

tracher1主机和tracher2启动服务

[root@localhost ~]# /etc/init.d/fdfs_trackerd start
Reloading systemd:                                         [  确定  ]
Starting fdfs_trackerd (via systemctl):                    [  确定  ]

group1-1、group1-2和group2-1、group2-2主机启动服务

[root@localhost ~]# nginx 
ngx_http_fastdfs_set pid=26266
[root@localhost ~]# /etc/init.d/fdfs_storaged start
Reloading systemd:                                         [  确定  ]
Starting fdfs_storaged (via systemctl):                    [  确定  ]

客户端验证：
随便找一张图片拖拽到主机里

上传

[root@localhost ~]# fdfs_upload_file /etc/fdfs/client.conf /root/1.png 
group2/M00/00/00/wKgKPGAJa3eAMfBkAABDjkNSWOw829.png

可以通过192.168.10.10/group2/M00/00/00/wKgKPGAJa3eAMfBkAABDjkNSWOw829.png访问页面验证

下载：

[root@localhost ~]# fdfs_download_file /etc/fdfs/client.conf group2/M00/00/00/wKgKPGAJa3eAMfBkAABDjkNSWOw829.png

删除：

[root@localhost ~]# fdfs_delete_file /etc/fdfs/client.conf group2/M00/00/00/wKgKPGAJa3eAMfBkAABDjkNSWOw829.png
NuYoahr
关注
fastdfs-nginx-module-1.24
02-07
《FastDFS-Nginx-Module 1.24：高效文件服务器集成详解》 FastDFS-nginx-module 1.24 是一个针对 FastDFS 文件系统的 Nginx 模块，它使得 Nginx 可以无缝地与 FastDFS 集成，提供了高效的文件上传、下载服务。这一...
springboot整合FastDFS中间件，实现文件分布管理
06-24
一、FastDFS简介 1、FastDFS作用 FastDFS是一个开源的轻量级分布式文件系统，它对文件进行管理，功能包括：文件存储、文件同步、文件上传、文件下载等，解决了大容量存储和负载均衡的问题。 2、核心角色 FastDFS是...
FastDFS
浪漫的偷笑
10-07 197
FastDFS安装FastDFS是C语言开发，建议在linux上运行，本教程使用Centos6.5作为安装环境。安装FastDFS需要先将官网下载的源码进行编译，编译依赖gcc环境，如果没有gcc环境，需要安装gcc：yum install -y gcc-c++安装 trackerd 安装libeventFastDFS依赖libevent库，需要安装：yum -y install libevent...
FastDFS+nginx+php的完整应用
weixin_34150224的博客
08-09 252
FastDFS+nginx+php的完整应用FastDFS功能简介： FastDFS是一个开源的轻量级分布式文件系统，它对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题。特别适合以文件为载体的在线服务，如相册网站、视频网站等等。主页地址：http://code.google.com/p/fastdfs/ ...
《Linux系统下FastDFS分布式存储与Nginx整合部署全流程详解》
最新发布
weixin_56890603的博客
04-22 1224
​ FastDFS 是用 c 语言编写的一款开源的分布式文件系统。FastDFS 为互联网量身定制，充分考虑了冗余备份、负载均衡、线性扩容等机制，并注重高可用、高性能等指标，使用 FastDFS 很容易搭建一套高性能的文件服务器集群提供文件上传、下载等服务。
fastdfs
qq_43269949的博客
12-05 457
fastdfs 分布式文件系统(高可用)linux系统上操作 yum install net-tools -y (安装)查看端口进程插件 编程模型： 文件在文件系统存储的格式 先进行分组 组名：group，（如果不给group名字，他会按照group1，gruop2…来分） 如果某几个storage服务器是相同的组名 表示这些服务器是互为主从（备份） 每一个Storage服务器都有一个主从，用...
fastdfs安装包（fastdfs-6.06，fastdfs-nginx-module-1.22，nginx-1.16.1）
05-20
《搭建FastDFS分布式文件系统详解》 FastDFS是一款开源的高性能、轻量级的分布式文件系统，它对文件进行管理，包括文件存储、文件同步、文件访问（文件上传、文件下载）等功能，解决了大容量存储和负载均衡的问题。...
FastDFS分布式文件系统 v6.12.0.zip
03-21
《FastDFS分布式文件系统详解与应用》 FastDFS是一款开源的高性能、轻量级的分布式文件系统，由国人开发，专为互联网应用设计，尤其适用于存储海量小文件。FastDFS的最新版本为v6.12.0，该版本在前作的基础上进行了...
基于C#的FastDFS.Net客户端项目设计源码
05-27
本设计源码提供了一个基于C#的FastDFS.Net客户端项目，包含70个文件，其中包括57个cs源文件，4个csproj项目文件，2个resx资源文件，2个config配置文件，以及1个gitattributes文件，1个gitignore文件，1个tfignore...
fastDFS
qq_43226684的博客
11-18 1097
fastdfs安装部署、迁移、数据同步
FastDFS介绍和配置过程
weixin_34318956的博客
07-31 148
由于网站使用nfs共享方式保存用户上传的图片，附件等资料，然后通过apache下载的方式供用户访问，在网站架构初期，使用这种简单的方式实现了静态资源的读写分离，但随着网站数据量的增加，图片服务器渐渐成为整个网站的短板，缘次催生了使用fastfds的想法，故而先进行一番简单的测试！在开始之前还是先来看看fastfds的介绍信息： ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值