Linux下玩转FastDFS

柔情只为你懂 2023-05-30 14:58 5阅读 0赞

### Linux下玩转FastDFS ###

*   *   *   *  引言
             *  FastDFS环境搭建
             *   *   *  安装环境准备
                     *  安装libfastcommon
                     *  安装tracker（FastDFS\_v5.05.tar.gz）
                     *  配置tracker和storage的启动服务
                     *  测试
                     *  安装FastDFS-nginx-module插件
                     *  安装nginx
                     *  设置开机启动nginx

#### 引言 ####

> FastDFS是一个开源的轻量级分布式文件系统，它对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题。特别适合以文件为载体的在线服务，如相册网站、视频网站等等。  
> FastDFS为互联网量身定制，充分考虑了冗余备份、负载均衡、线性扩容等机制，并注重高可用、高性能等指标，使用FastDFS很容易搭建一套高性能的文件服务器集群提供文件上传、下载等服务。

#### FastDFS环境搭建 ####

###### 安装环境准备 ######

> FastDFS是C语言开发，建议在**linux**上运行，本教程使用**Centos6.8**作为安装环境。

1.  安装gcc 依赖环境（`yum install gcc-c++ -y`）
2.  安装libevent（`yum -y install libevent`）
3.  安装perl库（`yum install perl*`）
4.  安装zlib（`yum -y install zlib zlib-devel pcre pcre-devel gcc gcc-c++ openssl openssl-devel libevent libevent-devel perl unzip net-tools wget`）

> **以上4个命令依次执行即可**

###### 安装libfastcommon ######

> 将要用到的工具包上传到centos的**opt**目录下  
> ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw_size_16_color_FFFFFF_t_70]  
> 可通过命令查看opt目录下的文件  
> ![在这里插入图片描述][20191110234254275.png]  
> 使用命令chmod +x 对刚刚传输过来的文件进行授权

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw_size_16_color_FFFFFF_t_70 1]

*  解压libfastcommonV1.0.7.tar.gz（`tar -zxvf libfastcommonV1.0.7.tar.gz`）
 *  进入到解压后的文件夹中（`cd libfastcommon-1.0.7/`）
 *  进行编译（`./make.sh`）
 *  安装（`./make.sh install`）
 *  注意：libfastcommon安装好后会自动将库文件拷贝至/usr/lib64下，由于FastDFS程序引用usr/lib目录所以需要将/usr/lib64下的库文件拷贝至/usr/lib下（`cp /usr/lib64/libfastcommon.so /usr/lib/`）

> 以上命令无需截图，按顺序执行下来就行了，亲测有效.

###### 安装tracker（FastDFS\_v5.05.tar.gz） ######

*  在opt目录下新建一个目录fastdfs用于存储文件（`mkdir /opt/fastdfs`）
 *  解压FastDFS\_v5.05.tar.gz（`tar -zxvf FastDFS_v5.05.tar.gz`）
 *  进入目录（`cd FastDFS`）
 *  进行编译（`./make.sh`）
 *  安装（`./make.sh install`）
 *  进入conf配置目录将文件都拷贝到/etc/fdfs（安装时自动生成）（`cd /FastDFS/conf` ）（ `cp * /etc/fdfs`）
 *  进入/etc/fdfs/，配置tracker.conf（`vi /etc/fdfs/tracker.conf`）  
    ![在这里插入图片描述][20191111000213423.png]  
    替换成以下配置(`base_path=/opt/fastdfs`)  
    ![在这里插入图片描述][20191111000331780.png]
 *  storage的配置(storage不需要安装，因为安装tracker时已经同时安装)(`vi storage.conf`)这个文件也在/etc/fdfs目录下  
    ![在这里插入图片描述][20191111000634769.png]  
    ![在这里插入图片描述][20191111000903155.png]
 *  fdfs\_storage这个目录需要新建  
    ![在这里插入图片描述][20191111001021897.png]

> base\_path=/opt/fastdfs  
> store\_path0=/opt/fastdfs/fdfs\_storage  
> tracker\_server=192.168.219.130:22122（换成自己的Ip即可)  
> **别忘了在/opt/fastdfs/目录下新建fdfs\_storage目录**

###### 配置tracker和storage的启动服务 ######

*  进入/etc/init.d启动脚本目录，默认fastdfs已经生成(`cd /etc/init.d`)
 *  编辑fdfs\_trackerd脚本文件(`vi fdfs_trackerd`)  
    ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw_size_16_color_FFFFFF_t_70 2]

![在这里插入图片描述][20191111002043983.png]

*  因为启动脚本还在安装目录下，所以我们新建/usr/local/fdfs目录，并且将启动脚本cp到该目录(`mkdir /usr/local/fdfs`)
 *  进入安装目录/opt/FastDFs(`cd /opt/FastDFS`)
 *  `cp restart.sh /usr/local/fdfs`
 *  `cp stop.sh /usr/local/fdfs`
 *  配置storage启动服务(restart和stop脚本已经拷贝到/usr/local/fdfs下，所以storage只需要配置/etc/init.d/fdfs\_storage脚本就可以了`cd /etc/init.d`)
 *  `vi fdfs_storaged`  
    ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw_size_16_color_FFFFFF_t_70 3]  
    ![在这里插入图片描述][201911110026484.png]
 *  将启动脚本加入linux服务

> `chkconfig --add fdfs_trackerd`  
> `chkconfig --add fdfs_storaged`

*  启动脚本

> `service fdfs_trackerd start`  
> `service fdfs_storaged start`

*  输入`ps -ef|grep fdfs`查看进程!  
    ![在这里插入图片描述][20191111003016399.png]

###### 测试 ######

*  编辑/etc/fdfs/目录下client.conf文件
 *  `vi /etc/fdfs/client.conf`  
    ![在这里插入图片描述][20191111003403796.png]

> `base_path=/opt/fastdfs`  
> `tracker_server=192.168.216.130:22122`

> 传输一张图片到root目录下

*  进入root目录`cd /root`
 *  执行`/usr/bin/fdfs_test /etc/fdfs/client.conf upload /root/1.jpg`  
    ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw_size_16_color_FFFFFF_t_70 4]

> 可以看到上传后的图片地址,现在到windows上是不能访问的。  
> 要想windows能访问，需要借助nginx  
> 可以到`cd /opt/fastdfs/fdfs_storage/data`目录下看到文件  
> ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw_size_16_color_FFFFFF_t_70 5]

###### 安装FastDFS-nginx-module插件 ######

*  进入opt目录（`cd /opt`）
 *  解压fastdfs-nginx-module\_v1.16.tar.gz(`tar -zxvf fastdfs-nginx-module_v1.16.tar.gz`)
 *  进入目录(`cd fastdfs-nginx-module`)
 *  进入src目录（`cd src`）
 *  编辑config文件（`vi config`）  
    ![在这里插入图片描述][20191111005043368.png]

> CORE\_INCS="$CORE\_INCS /usr/include/fastdfs /usr/include/fastcommon/"

*  将FastDFS-nginx-module插件整合fdfs的配置文件拷贝到fdfs的配置目录下(整合fdfs的配置文件)  
    FastDFS-nginx-module/src下的mod\_fastdfs.conf拷贝至/etc/fdfs/下(这里面是两个路径)
 *  `cp mod_fastdfs.conf /etc/fdfs`
 *  编辑`/etc/fdfs/mod_fastdfs.conf`文件（`vi /etc/fdfs/mod_fastdfs.conf`）  
    ![软件安装目录][20191111005555602.png]  
    ![Tracker\_server地址][Tracker_server]  
    ![Web的url是否包含group的路径名][Web_url_group]  
    ![上传文件存储目录][2019111100562443.png]

> base\_path=/opt/fastdfs  
> tracker\_server=192.168.216.129:22122  
> url\_have\_group\_name = true  
> store\_path0=/opt/fastdfs/fdfs\_storage

###### 安装nginx ######

*  创建nginx/client目录（`mkdir -p /var/temp/nginx/client`）
 *  进入opt目录（`cd /opt`）
 *  解压nginx-1.12.2.tar.gz（`tar -zxvf nginx-1.12.2.tar.gz`）
 *  进入解压目录（`cd nginx-1.12.2`）

> 一次性执行

./configure \
    --prefix=/usr/local/nginx \
    --pid-path=/var/run/nginx/nginx.pid \
    --lock-path=/var/lock/nginx.lock \
    --error-log-path=/var/log/nginx/error.log \
    --http-log-path=/var/log/nginx/access.log \
    --with-http_gzip_static_module \
    --http-client-body-temp-path=/var/temp/nginx/client \
    --http-proxy-temp-path=/var/temp/nginx/proxy \
    --http-fastcgi-temp-path=/var/temp/nginx/fastcgi \
    --http-uwsgi-temp-path=/var/temp/nginx/uwsgi \
    --http-scgi-temp-path=/var/temp/nginx/scgi \
    --add-module=/opt/fastdfs-nginx-module/src

看到以下界面就说明执行成功了  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw_size_16_color_FFFFFF_t_70 6]

*  编译（`make`）
 *  安装（`make install`）
 *  修改nginx配置文件（`vi /usr/local/nginx/conf/nginx.conf`）  
    ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw_size_16_color_FFFFFF_t_70 7]
 *  进入/usr/local/nginx目录（`cd /usr/local/nginx`）
 *  进入sbin（`cd sbin`）
 *  启动nginx（`./nginx`）

> 需要关闭防火墙  
> `service iptables stop`  
> 永久关闭 `chkconfig iptables off`  
> 到windows访问  
> ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw_size_16_color_FFFFFF_t_70 8]

###### 设置开机启动nginx ######

> vi /etc/rc.d/rc.local  
> touch /var/lock/subsys/local  
> /usr/local/nginx/sbin/nginx

下期再见。。。

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw_size_16_color_FFFFFF_t_70]: https://img-blog.csdnimg.cn/2019111023423444.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw==,size_16,color_FFFFFF,t_70
[20191110234254275.png]: https://img-blog.csdnimg.cn/20191110234254275.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw_size_16_color_FFFFFF_t_70 1]: https://img-blog.csdnimg.cn/20191110234502511.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw==,size_16,color_FFFFFF,t_70
[20191111000213423.png]: https://img-blog.csdnimg.cn/20191111000213423.png
[20191111000331780.png]: https://img-blog.csdnimg.cn/20191111000331780.png
[20191111000634769.png]: https://img-blog.csdnimg.cn/20191111000634769.png
[20191111000903155.png]: https://img-blog.csdnimg.cn/20191111000903155.png
[20191111001021897.png]: https://img-blog.csdnimg.cn/20191111001021897.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw_size_16_color_FFFFFF_t_70 2]: https://img-blog.csdnimg.cn/20191111002007498.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw==,size_16,color_FFFFFF,t_70
[20191111002043983.png]: https://img-blog.csdnimg.cn/20191111002043983.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw_size_16_color_FFFFFF_t_70 3]: https://img-blog.csdnimg.cn/20191111002640471.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw==,size_16,color_FFFFFF,t_70
[201911110026484.png]: https://img-blog.csdnimg.cn/201911110026484.png
[20191111003016399.png]: https://img-blog.csdnimg.cn/20191111003016399.png
[20191111003403796.png]: https://img-blog.csdnimg.cn/20191111003403796.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw_size_16_color_FFFFFF_t_70 4]: https://img-blog.csdnimg.cn/20191111004147678.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw==,size_16,color_FFFFFF,t_70
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw_size_16_color_FFFFFF_t_70 5]: https://img-blog.csdnimg.cn/20191111004554104.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw==,size_16,color_FFFFFF,t_70
[20191111005043368.png]: https://img-blog.csdnimg.cn/20191111005043368.png
[20191111005555602.png]: https://img-blog.csdnimg.cn/20191111005555602.png
[Tracker_server]: https://img-blog.csdnimg.cn/20191111005604928.png
[Web_url_group]: https://img-blog.csdnimg.cn/20191111005616626.png
[2019111100562443.png]: https://img-blog.csdnimg.cn/2019111100562443.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw_size_16_color_FFFFFF_t_70 6]: https://img-blog.csdnimg.cn/20191111010048891.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw==,size_16,color_FFFFFF,t_70
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw_size_16_color_FFFFFF_t_70 7]: https://img-blog.csdnimg.cn/20191111013017827.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw==,size_16,color_FFFFFF,t_70
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw_size_16_color_FFFFFF_t_70 8]: https://img-blog.csdnimg.cn/20191111013652405.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mjg0MTQzMw==,size_16,color_FFFFFF,t_70