Linux安装FastDFS – 源码巴士

什么是FastDFS：

FastDFS是用C语言编写的一款开源的分布式文件系统，它是由淘宝资深架构师余庆编写并开源。FastDFS专为互联网量身定制，充分考虑了冗余备份、负载均衡、线性扩容等机制，并注重高可用、高性能等指标，使用FastDFS很容易搭建一套高性能的文件服务器集群提供文件上传、下载等服务。为什么要选择FastDFS呢？

FastDFS非常适合存储图片等那些小文件，FastDFS不对文件进行分块，所以它就没有分块合并的开销，FastDFS网络通信采用 Socket(套接字)，通信速度很快。

FastDFS架构：

FastDFS架构包括 Tracker Server和Storage Server。客户端请求Tracker Server进行文件上传、下载，通过Tracker Server调度最终由Storage Server完成文件上传和下载。

Tracker Server: 作用是负载均衡和调度，通过Tracker Server在文件上传时可以根据一些策略找到Storage Server提供文件上传服务。可以将Tracker称为追踪服务器或调度服务器。FastDFS集群中的Tracker Server可以有多台，Tracker Server之间是相互平等关系同时提供服务，在执行某些特殊操作时，Tracker Server之前也会发起选举，选举出一个领导者，然后由领导者去完成这个特殊操作。Tracker Server不存在单点故障。客户端请求Tracker Server采用轮询方式，如果请求的Tracker无法提供服务则换另一个Tracker。
Storage Server:作用是文件存储，客户端上传的文件最终存储在Storage服务器上，Storage Server没有实现自己的文件系统而是使用操作系统的文件系统来管理文件。可以将Storage称为存储服务器。Storage集群采用了分组存储方式。Storage集群由一个或多个组构成，集群存储总容量为集群中所有组的存储容量之和。一个组由一台或多台存储服务器组成，组内的Storage Server之间是平等关系，不同组的Storage Server之间不会相互通信，同组内的Storage Server之间会相互连接进行文件同步，从而保证同组内每个Storage上的文件完全一致的。一个组的存储容量为该组内存储服务器容量最小的那个，由此可见组内存储服务器的软硬件配置最好是一致的。采用分组存储方式的好处是灵活、可控性较强。比如上传文件时，可以由客户端直接指定上传到的组也可以由 Tracker进行调度选择。一个分组的存储服务器访问压力较大时，可以在该组增加存储服务器来扩充服务能力（纵向扩容）。当系统容量不足时，可以增加组来扩充存储容量（横向扩容）。
Storage状态收集: Storage Server会连接集群中所有的Tracker Server，定时向他们报告自己的状态，IP地址、端口号、还有磁盘剩余空间、文件同步状况、文件上传下载次数等统计信息。

Linux安装FastDFS：

安装gcc

gcc是linux下的编译器在此不多做解释，感兴趣的小伙伴可以去查一下相关资料，它可以编译 C,C++,Ada,Object C和Java等语言

命令：查看gcc版本

gcc -v

一般阿里云的centOS7里面是都有的，没有安装的话会提示命令找不到，

安装命令:

 yum -y install gcc

pcre、pcre-devel安装

pcre是一个perl库，包括perl兼容的正则表达式库，nginx的http模块使用pcre来解析正则表达式，所以需要安装pcre库。

安装命令：

yum install -y pcre pcre-devel

zlib安装(为了解压nginx压缩包时使用)

zlib库提供了很多种压缩和解压缩方式nginx使用zlib对http包的内容进行gzip，所以需要安装

安装命令：

yum install -y zlib zlib-devel

安装openssl(为了保证http通信安全)

openssl是web安全通信的基石，没有openssl，可以说我们的信息都是在裸奔。。。。。。

安装命令：

yum install -y openssl openssl-devel

安装 libevent

yum install -y libevent

安装 libfastcommon

libfastcommon 没有 yum 源，通过上传的安装包进行编译与安装

链接：https://pan.baidu.com/s/1ViLmfTbHn8a7Fjg65VD24g
提取码：fast

 tar -zxvf libfastcommon-1.0.41.tar.gz

进入libfastcommon

 ./make.sh && ./make.sh install

libfastcommon 安装好后会在 /usr/lib64 目录下生成 libfastcommon.so 库文件

由于 FastDFS 程序引用 usr/lib 目录所以需要将 /usr/lib64 下的库文件拷贝至 /usr/lib 下

cp /usr/lib64/libfastcommon.so /usr/lib

安装 tracker

链接：https://pan.baidu.com/s/1ViLmfTbHn8a7Fjg65VD24g
提取码：fast

tar -zxvf fastdfs-5.12.tar.gz

进入tracker

./make.sh && ./make.sh install

安装成功将安装目录下的 conf 下的文件拷贝到 /etc/fdfs/ 下

cp conf/* /etc/fdfs/

配置和启动 tracker

切换到 /etc/fdfs 目录下

cd /etc/fdfs

修改 tracker.conf

vi tracker.conf

base_path = /home/fastdfs
http.server_port = 80

创建 /home/fastdfs 目录

mkdir -p /home/fastdfs

启动 tracker

/usr/bin/fdfs_trackerd /etc/fdfs/tracker.conf restart

启动成功后，在 /home/fastdfs/ 目录下生成两个目录，一个是数据，一个是日志

配置和启动 storage

切换到 /etc/fdfs 目录下

修改 storage.conf

vi storage.conf

base_path = /home/fastdfs
store_path0 = /home/fdfs_storage
tracker_server = x.x.x.x:22122 (根据实际情况改)
http.server_port = 88

创建 /home/fdfs_storage 目录

mkdir -p /home/fdfs_storage

启动 storage

/usr/bin/fdfs_storaged /etc/fdfs/storage.conf restart

启动成功后，在 /home/fdfs_storage/data 目录下生成以下显示目录

测试FastDFS上传文件

切换到 /etc/fdfs 目录下

cd /etc/fdfs

修改 client.conf

vi client.conf

base_path = /home/fastdfs
tracker_server = x.x.x.x:22122 (根据实际情况改)

拷贝一张图片 test.jpg 到Centos服务器上的 /tmp 目录下

进行上传测试

/usr/bin/fdfs_test /etc/fdfs/client.conf upload /tmp/2.jpg

由于现在还没有和nginx整合无法使用http下载

FastDFS 和Nginx整合

安装fastdfs-nginx-module

链接：https://pan.baidu.com/s/1ViLmfTbHn8a7Fjg65VD24g
提取码：fast

 tar -zxvf fastdfs-nginx-module-1.20.tar.gz

进入 fastdfs-nginx-module-1.20

 cd fastdfs-nginx-module-1.20/src/

修改config文件

vi config

将文件中的所有 /usr/local/ 路径改为 /usr/

复制当前目录下的 mod_fastdfs.conf 文件到 /etc/fdfs/ 目录下

cp mod_fastdfs.conf /etc/fdfs/

切换到 /etc/fdfs 目录，修改 mod_fastdfs.conf 文件

vi mod_fastdfs.conf

base_path=/home/fastdfs
tracker_server=x.x.x.x:22122(根据实际情况改) 
url_have_group_name=true #url中包含group名称
store_path0=/home/fdfs_storage #指定文件存储路径（上面配置的store路径）

将 /usr/lib64 目录下的 libfdfsclient.so 文件拷贝至 /usr/lib 目录下

cp /usr/lib64/libfdfsclient.so /usr/lib

Nginx 的安装

链接：https://pan.baidu.com/s/1ViLmfTbHn8a7Fjg65VD24g
提取码：fast

 tar -zxvf nginx-1.8.0.tar.gz

创建 /var/temp/nginx/client 目录

mkdir -p /var/temp/nginx/client

切换到 nginx 解压的目录nginx-1.8.0

执行以下配置命令：

 ./configure \
 --prefix=/usr/local/nginx \
 --pid-path=/var/run/nginx/nginx.pid \
 --lock-path=/var/lock/nginx.lock \
 --error-log-path=/var/log/nginx/error.log \
 --http-log-path=/var/log/nginx/access.log \
 --with-http_gzip_static_module \
 --http-client-body-temp-path=/var/temp/nginx/client \
 --http-proxy-temp-path=/var/temp/nginx/proxy \
 --http-fastcgi-temp-path=/var/temp/nginx/fastcgi \
 --http-uwsgi-temp-path=/var/temp/nginx/uwsgi \
 --http-scgi-temp-path=/var/temp/nginx/scgi \
 --add-module=/opt/fastdfs-nginx-module-1.20/src/

编译并安装

make && make install

安装成功后查看生成的目录

创建 /usr/local/nginx/logs 目录

mkdir /usr/local/nginx/logs

切换到 /usr/local/nginx/conf/ 目录

cd /usr/local/nginx/conf/

修改 nginx.conf 文件

vi nginx.conf

pid         /usr/local/nginx/logs/nginx.pid;

server_name  192.168.150.135;

location ~/group([0-9]) {
             root /home/fdfs_storage/data;
             ngx_fastdfs_module;
}

切换到 /usr/local/nginx/sbin/ 目录

 cd /usr/local/nginx/sbin/

启动 nginx

./nginx

出现这个启动成功

[root@bogon sbin]# ./nginx
ngx_http_fastdfs_set pid=55709

查看一下进程

放通防火墙80(nginx)、22122(tracker)、23000(storage)端口

firewall-cmd --zone=public --add-port=80/tcp --permanent

firewall-cmd --zone=public --add-port=22122/tcp --permanent

firewall-cmd --zone=public --add-port=23000/tcp --permanent

firewall-cmd --reload

这时已经可以通过浏览器访问刚刚测试上传的图片

FastDFS 和 Nginx 开机自启配置

不想开机自启的可以不用设置

编辑 /etc/rc.d/rc.local 文件，增加启动项

vi /etc/rc.d/rc.local

# fastdfs start
/usr/bin/fdfs_trackerd /etc/fdfs/tracker.conf restart
/usr/bin/fdfs_storaged /etc/fdfs/storage.conf restart

# nginx start
/usr/local/nginx/sbin/nginx

给rc.local 文件增加可执行的权限

chmod +x /etc/rc.d/rc.local

原文链接：https://blog.csdn.net/m0_63840217/article/details/125421701