FastDFS与Nginx结合搭建文件服务器

野性酷女 2023-07-10 14:04 15阅读 0赞

## FastDFS介绍 ##

> FastDFS是一个开源的轻量级分布式文件系统，它对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题。特别适合以文件为载体的在线服务，如相册网站、视频网站等等。

在平时的学习和项目中，博主使用的是阿里云的OSS对象存储服务，毕竟是阿里云旗下的产品，有很全的API供你学习使用。当然，它是付费产品。其实就几顿外卖的钱就能包年了。  
第一次了解FastDFS是在博主上大学的时候，一门《云计算与大数据》里面讲了这个，还有Hadoop的HDFS。这里就不做过多的讲解了，毕竟博主也只是略知一二，感兴趣的读者可以使用各种方法去了解和学习。

上面说了阿里云OSS方便好用，那为什么还要自己去搭建一个文件服务器呢？  
①. 自己动手尝试一个从来没接触过得东西，如果成功了，会很有成就感；就算失败了，也会去找到解决的办法。  
②. OSS用来存储一些快速访问的东西，就很便捷。例如：博主将博文中的图片存储到里面，可以直接访问，还能通过CDN来加速。当然FastDFS也可以直接访问，但是中间需要借助其他云服务器的支持。如果使用本地的服务器，是没办法让其他人访问的。  
③. 毕竟OSS是收费的，博主使用的是最小存储容量的套餐。所以，在学习中使用FastDFS就足够了。

上面三条因人而异，主要是指博主使用FastDFS的原因。

## 搭建过程 ##

### 准备工具 ###

所有环境都是基于Linux的，没有安装Linux的读者，自行查阅安装方法，博主这里就不做讲解了。  
首先下载好所需的压缩包，上传到Linux服务器上。  
1.FastDFS\_v5.05.tar.gz  
2.fastdfs-nginx-module\_v1.16.tar.gz  
3.libfastcommon-1.0.7.tar.gz  
4.nginx-1.16.1.tar.gz

通过使用Xshell软件中的Xftp工具将上述压缩包上传至Linux服务器。

### 安装编译工具和准备工作 ###

没有修改镜像源地址的读者，可以修改下Linux的镜像源，博主这里使用的是阿里的镜像源。如何配置，可以参考下面地址，找到自己对应的版本配置即可。博主这里使用的是Centos 8。

> [https://developer.aliyun.com/mirror/centos?spm=a2c6h.13651102.0.0.3e221b11ium3oX][https_developer.aliyun.com_mirror_centos_spm_a2c6h.13651102.0.0.3e221b11ium3oX]

镜像配置好就可以下载编译所需要的一些库了，执行下面的命令：

yum -y install make zlib zlib-devel gcc-c++ libtool openssl openssl-devel

下载FastDFS所需要的依赖

yum -y install libevent

安装完所需依赖，开始解压libfastcommon-1.0.7.tar.gz

tar -zxvf libfastcommon-1.0.7.tar.gz -C /usr/local/software

进入解压完的目录。

cd /usr/local/software/libfastcommon-1.0.7

这里的software是博主自己创建的，主要存放解压后的软件，读者根据自己的习惯，创建目录即可。  
![format_png][]  
接下来就是编译、安装了

./make.sh   # 编译
    ./make.sh install   # 安装

完成后，进入lib64目录，通过 ll 命令查看

cd /usr/lib64
    ll libfast**    # 查看所有以libfast开头的内容

![format_png 1][]  
这里需要执行的操作是，将libfastcommon.so拷贝到lib目录下，因为lib是32位的。

cp libfastcommon.so /usr/lib

### 安装编译FastDFS ###

第一步还是解压

tar -zxvf FastDFS_v5.05.tar.gz -C /usr/local/software/

解压完进入目录进行编译和安装。

./make.sh
    ./make.sh install

然后查看相应的配置

cd /usr/bin
    ll fdfs*    # 查看所有以fdfs开头的内容

![format_png 2][]  
有部分配置在/etc/fdfs这个目录，如图所示  
![format_png 3][]  
将FastDFS的配置文件拷贝到当前目录中。

cd /usr/local/software/FastDFS/

![format_png 4][]  
这里conf目录中的内容，都需要拷贝到/etc/fdfs/目录下。

cp * /etc/fdfs/

### 配置tracker服务 ###

/etc/fdfs/这个目录下有一个tracker.conf文件，需要进行修改。

vim tracker.conf

在文件中修改日志路径为：base\_path=/fastdfs/tracker  
![format_png 5][]  
因为不存在/fastdfs/tracker这个文件夹，所以进行创建。

mkdir /fastdfs/tracker -p   # -p是递归创建

进入bin目录，fdfs\_trackerd就是启动tracker服务的命令。  
![format_png 6][]  
使用如下命令启动。

fdfs_trackerd /etc/fdfs/tracker.conf    # 后面跟的是刚才修改的配置文件的路径
    fdfs_trackerd /etc/fdfs/tracker.conf restart    # 重启服务

查看服务启动是否成功

ps aux|grep tracker

![format_png 7][]

### 配置storage服务 ###

刚才给tracker服务配置了日志目录，storage也是同样需要日志目录，所以，首先创建日志目录。在刚才的fastdfs目录下创建

mkdir storage/log -p

修改配置文件

vim storage.conf

![format_png 8][]  
将base\_path修改为如图。  
这里还需要修改group\_name，group\_name=group1是组织名，例如，访问图片时，需要将当前的group\_name作为前缀加到地址中。

group_name=qfcwx    # 这里根据自己习惯修改

store\_path0=/home/yuqing/fastdfs这个指实际图片存储的路径，首先在刚才日志的上级storage目录中创建一个存储路径

mkdir file

![format_png 9][]  
然后修改配置文件  
![format_png 10][]  
将store\_path0修改为刚才创建的目录。  
可以看到上面还有一个tracker\_server，这个是tracker服务的地址，根据自己的虚拟机的ip地址进行修改即可。博主这里修改为：

tracker_server=192.168.0.104:22122  # 只用修改前面的ip，端口号不需要修改

配置文件的修改，这里就完成了，下面就进入bin目录，fdfs\_storaged这个就是启动storage服务的命令。  
使用如下命令启动

cd /usr/bin
    fdfs_storaged /etc/fdfs/storage.conf    # 后面跟的是刚才修改的配置文件的路径
    fdfs_storaged /etc/fdfs/storage.conf restart    # 重启

查看服务启动是否成功

ps aux|grep storage

![format_png 11][]

### 配置client ###

/etc/fdfs目录下有一个client.conf的文件，这个可以作为客户端进行测试。  
修改文件

vim client.conf

同样需要修改日志的地址，在fastdfs目录下创建一个client目录。  
![format_png 12][]  
上面的tracker\_server就是tracker服务的地址，读者根据自己虚拟机的ip地址进行修改。

### 测试 ###

进入bin目录

cd /usr/bin/
    ll fdfs*    # 查看

fdfs\_test就是用于客户端测试的，测试命令为

fdfs_test /etc/fdfs/client.conf upload /usr/local/image/mvvm.png

/etc/fdfs/client.conf: 是配置文件的地址。  
upload: 是需要加的命令。  
/usr/local/image/mvvm.png：是需要上传的图片的地址。

这里就会返回成功的地址了。  
![format_png 13][]  
目前还不能通过地址来访问，这里需要配置Nginx，但是如果使用Xftp就能查看，此时，文件存储的目录为：`/fastdfs/storage/file/data/00/00`。  
/fastdfs/storage/file 是刚才配置storage服务时，文件的存放路径。  
![format_png 14][]

### 解压FastDFS和Nginx关联的压缩包 ###

这里需要对Nginx的FastDFS模块进行解压。

tar -zxvf fastdfs-nginx-module_v1.16.tar.gz -C /usr/local/software/

进入解压完的目录，到src目录，修改config文件，将文件路径中存在的local删掉。  
![format_png 15][]

### 编译安装Nginx ###

前面已经安装了编译所需要的依赖库了，所以这里再安装一个Nginx所支持的正则表达式库。

yum install pcre pcre-devel

解压Nginx的压缩包

tar -zxvf nginx-1.16.1.tar.gz -C /usr/local/software/

首先到刚刚解压的fastdfs-nginx-module的src目录，拷贝当前路径

pwd    # 查看当前所在完整路径

博主这里的路径是:/usr/local/software/fastdfs-nginx-module/src  
然后到解压后的Nginx目录下，执行

./configure \
    --prefix=/usr/local/nginx \
    --pid-path=/var/run/nginx/nginx.pid \
    --lock-path=/var/lock/nginx.lock \
    --error-log-path=/var/log/nginx/error.log \
    --http-log-path=/var/log/nginx/access.log \
    --with-http_gzip_static_module \
    --http-client-body-temp-path=/var/temp/nginx/client \
    --http-proxy-temp-path=/var/temp/nginx/proxy \
    --http-fastcgi-temp-path=/var/temp/nginx/fastcgi \
    --http-uwsgi-temp-path=/var/temp/nginx/uwsgi \
    --http-scgi-temp-path=/var/temp/nginx/scgi \
    --add-module=/usr/local/software/fastdfs-nginx-module/src

注意：这里的–add-module后面的值就是刚刚拷贝的fastdfs-nginx-module的src目录

之后再执行 make 进行编译；make install 进行安装。

### 配置FastDFS ###

将fastdfs-nginx-module模块下的mod\_fastdfs.conf文件拷贝到 /etc/fdfs/目录

cp mod_fastdfs.conf /etc/fdfs/

进入/etc/fdfs/目录，修改这个文件

vim mod_fastdfs.conf

找到下面的配置进行修改：  
1、base\_path=/tmp用户存储日志的，将其改为/fastdfs/temp  
2、tracker\_server=tracker:22122修改为当前服务器的ip地址  
3、group\_name=groupname1 修改为之前storage中同样的名字  
4、url\_have\_group\_name = false 这个表示是否需要增加一个上述自定义名字的需要，改为true

### 配置Nginx ###

这里需要配置Nginx，进入刚刚编译时，–prefix所指定的目录，可以看到nginx目录下面有这几个文件夹。  
![format_png 16][]  
进入conf目录，修改nginx.conf文件，在http指令块中新增如下配置。

server{
            listen      88;
            server_name 192.168.0.104;
            location /qfcwx/M00 {
                    ngx_fastdfs_module;
            }
        }

注意，这里不用删除默认的80端口的server指令，重新添加一个server指令即可。  
server\_name：指服务器的ip或者域名。  
location：指访问/qfcwx/M00下的所有东西。

### 启动Nginx ###

在启动之前，对Nginx进行测试

./sbin/nginx -t

如果出现:2: No such file or directory 按照提示创建目录即可。  
再次测试，没问题了，就可以启动Nginx了。

./sbin/nginx    # 启动命令

访问之前。保证Linux的防火墙是关闭状态。  
查看防火墙状态:

firewall-cmd --state

如果显示 running ，则需要关闭。

systemctl start firewalld.service   #启动防火墙
    systemctl stop firewalld.service    #停止防火墙
    systemctl reloadt firewalld.service #重载配置

### 访问图片 ###

博主这里的路径是:

http://192.168.0.104:88/qfcwx/M00/00/00/wKgAaF5KAXyAFt-fABCbbRHQLlU939.png

如果出现 404，是因为FastDFS和Nginx之间配置还未完成。  
需要修改/etc/fdfs/目录下的mod\_fastdfs.conf文件

store_path0=/home/yuqing/fastdfs    # 需要和storage.conf配置文件的路径一致

博主这里是：/fastdfs/storage/file  
修改完成后，需要重新启动tracker服务、storage服务以及Nginx服务。

重启所有服务

/usr/bin/fdfs_trackerd tracker.conf restart
    /usr/bin/fdfs_storaged storage.conf restart
    ./sbin/nginx -s reload

再次访问上面的路径，就能看到图片成功上传了。  
![format_png 17][]

这就证明FastDFS的文件服务器搭建完成了。

## 总结 ##

本来很早就想着写这篇文章的，但是博主都在忙些别的事，不然就是偷懒，玩游戏去了。没办法，2020年是多灾的一年。要问为什么？这还要从一只蝙蝠说起！

总之，希望大家都能平平安安，开开心心的面对新的一年。

> 愿你努力工作，也愿你享受生活;愿你脚踏实地，也愿你仰望星空。

[https_developer.aliyun.com_mirror_centos_spm_a2c6h.13651102.0.0.3e221b11ium3oX]: https://developer.aliyun.com/mirror/centos?spm=a2c6h.13651102.0.0.3e221b11ium3oX
[format_png]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9maWxlLnFmY3d4LmNvbS9MaW51eC8xLzEuanBn?x-oss-process=image/format,png
[format_png 1]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9maWxlLnFmY3d4LmNvbS9MaW51eC8xLzIuanBn?x-oss-process=image/format,png
[format_png 2]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9maWxlLnFmY3d4LmNvbS9MaW51eC8xLzMucG5n?x-oss-process=image/format,png
[format_png 3]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9maWxlLnFmY3d4LmNvbS9MaW51eC8xLzQuanBn?x-oss-process=image/format,png
[format_png 4]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9maWxlLnFmY3d4LmNvbS9MaW51eC8xLzUuanBn?x-oss-process=image/format,png
[format_png 5]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9maWxlLnFmY3d4LmNvbS9MaW51eC8xLzYuanBn?x-oss-process=image/format,png
[format_png 6]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9maWxlLnFmY3d4LmNvbS9MaW51eC8xLzcucG5n?x-oss-process=image/format,png
[format_png 7]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9maWxlLnFmY3d4LmNvbS9MaW51eC8xLzguanBn?x-oss-process=image/format,png
[format_png 8]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9maWxlLnFmY3d4LmNvbS9MaW51eC8xLzkuanBn?x-oss-process=image/format,png
[format_png 9]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9maWxlLnFmY3d4LmNvbS9MaW51eC8xLzEwLmpwZw?x-oss-process=image/format,png
[format_png 10]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9maWxlLnFmY3d4LmNvbS9MaW51eC8xLzExLmpwZw?x-oss-process=image/format,png
[format_png 11]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9maWxlLnFmY3d4LmNvbS9MaW51eC8xLzEyLmpwZw?x-oss-process=image/format,png
[format_png 12]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9maWxlLnFmY3d4LmNvbS9MaW51eC8xLzEzLmpwZw?x-oss-process=image/format,png
[format_png 13]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9maWxlLnFmY3d4LmNvbS9MaW51eC8xLzE0LnBuZw?x-oss-process=image/format,png
[format_png 14]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9maWxlLnFmY3d4LmNvbS9MaW51eC8xLzE1LnBuZw?x-oss-process=image/format,png
[format_png 15]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9maWxlLnFmY3d4LmNvbS9MaW51eC8xLzE1ODMxNTYwMDAlMjgxJTI5LnBuZw?x-oss-process=image/format,png
[format_png 16]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9maWxlLnFmY3d4LmNvbS9MaW51eC8xLzE2LnBuZw?x-oss-process=image/format,png
[format_png 17]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9maWxlLnFmY3d4LmNvbS9MaW51eC8xLzE3LnBuZw?x-oss-process=image/format,png