一、前言
FastDFS是用c语言编写的一款开源的分布式文件系统。FastDFS为互联网量身定制,充分考虑了冗余备份、负载均衡、线性扩容等机制,并注重高可用,高性能等指标。使用FastDFS很容易搭建一套高性能的文件服务器集群提供文件上传、下载等服务。具体有关FastDFS的知识点,欢迎猛戳我的博客。
二、基本环境说明
跟踪服务器(Tracker Server): 192.168.224.200
存储服务器(Storage Server):192..168.224.201
操作系统:CentOS7
安装包:
libfastcommon-master.zip:公共C函数库
fastdfs-master-V5.05.zip:FastDFS源码
fastdfs-nginx-module-master.zip:FastDFS的nginx模块
nginx-1.10.0.tar.gz:Nginx安装包
将文件下载到/usr/local/src目录下面。
三、安装基本环境
在tracker和storage服务器上执行相同的操作。
1、安装所需的依赖包
yum install make cmake gcc gcc-c++
2、安装libfastcommon
cd /usr/local/src
unzip libfastcommon-master.zip
cd libfastcommon-master
## 编译、安装
./make.sh
./make.sh install
3、安装FastDFS
cd /usr/local/src
unzip fastdfs-master-V5.05.zip
cd fastdfs-master
## 编译、安装
./make.sh
./make.sh install
四、配置tracker服务器
1、复制tracker配置文件,重命名
cp /etc/fdfs/tracker.conf.sample /etc/fdfs/tracker.conf
2、修改tracker.conf配置文件
vim /etc/fdfs/tracker.conf
# 修改的内容如下:
disabled=false # 启用配置文件
port=22122 # tracker服务器端口(默认22122)
base_path=/fastdfs/tracker # 存储日志和数据的根目录
3、创建base_path指定的目录
mkdir -p /fastdfs/tracker
4、在防火墙中打开tracker服务器的端口
由于操作系统选用的是CnetOS7。默认的防火墙为firewall。相关命令如下
查看当前防火墙状态:
firewall-cmd --state
开启状态---running
关闭状态---not runing
将某个端口(在此以22122为例)开放
firewall-cmd --zone=public --add-port=22122/tcp --permanent
重启防火墙
service firewalld restart
查看开放端口列表:
firewall-cmd --permanent --list-port
5、启动tracker服务器
/etc/init.d/fdfs_trackerd start
初次启动,会在/fastdfs/tracker目录下生成logs、data两个目录:
检查tracker server是否成功启动
ps -ef | grep fdfs_trackerd
6、设置tracker开机自启
chkconfig fdfs_trackerd on
五、配置storage服务器
1、复制storage配置文件
cp /etc/fdfs/storage.conf.sample /etc/fdfs/storage.conf
2、编辑配置文件
vi /etc/fdfs/storage.conf
# 修改的内容如下:
disabled=false # 启用配置文件
port=23000 # storage服务端口
group_name=group1 # 组名(第一组为group1,第二组为group2,依次类推...)
base_path=/fastdfs/storage # 数据和日志文件存储根目录
store_path0=/fastdfs/storage # 第一个存储目录,第二个存储目录起名为:store_path1=xxx,其它存储目录名依次类推...
store_path_count=1 # 存储路径个数,需要和store_path个数匹配
tracker_server=192.168.224.200:22122 # tracker服务器IP和端口
http.server_port=8888 # http访问文件的端口
3、创建基础数据目录
mkdir -p /fastdfs/storage
4、防火墙中打开storage服务器端口
具体操作步骤参考 防火墙打开tracker服务器端口
5、启动storage端口
/etc/init.d/fdfs_storaged start
6、初次启动,会在/fastdfs/storage目录下生成logs、data两个目录。
7、检查FastDFS Tracker Server是否启动成功
ps -ef | grep fdfs_storaged
8、设置storage服务开机启动
chkconfig fdfs_storaged on
六、使用Client文件文件上传
1、复制tracker服务器client.conf并重命名
cp /etc/fdfs/client.conf.sample /etc/fdfs/client.conf
vi /etc/fdfs/client.conf
base_path=/fastdfs/tracker
tracker_server=192.168.224.200:22122
2、执行上传文件命令
/usr/bin/fdfs_upload_file /etc/fdfs/client.conf /usr/local/src/fastdfs-master-V5.05.zip
返回文件id:group1/M00/00/00/xxxxxxxxxxxxxxxxxxxxxxx 说明文件上传成功
七、Storage节点安装Nginx和fastdfs-nginx-module模块
fastdfs-nginx-module 可以重定向文件连接到源服务器(192.168.224.201)上取文件,避免客户端由于同步文件延迟导致的文件无法访问错误。
1、安装nginx和fastdfs-nginx-module模块
## 安装nginx所需的依赖包
yum install gcc gcc-c++ make automake autoconf libtool pcre pcre-devel zlib zlib-devel openssl openssl-devel
## 编译安装nginx(添加fastdfs-nginx-module模块)
cd /usr/local/src
tar -zxvf nginx-1.10.0.tar.gz
unzip fastdfs-nginx-module-master.zip
cd nginx-1.10.0
./configure --prefix=/opt/nginx --sbin-path=/usr/bin/nginx --add-module=/usr/local/src/fastdfs-nginx-module-master/src
make && make install
2、复制fastdfs-nginx-module 源码中的配置文件到/etc/fdfs 目录,并修改。
cp /usr/local/src/fastdfs-nginx-module-master/src/mod_fastdfs.conf /etc/fdfs/
vi /etc/fdfs/mod_fastdfs.conf
3、复制fastdfs-nginx-module 源码中的配置文件到/etc/fdfs 目录,并修改
cp /usr/local/src/fastdfs-nginx-module-master/src/mod_fastdfs.conf /etc/fdfs/
vi /etc/fdfs/mod_fastdfs.conf
配置如下图所示:
connect_timeout=10 # 客户端访问文件连接超时时长(单位:秒)
base_path=/tmp # 临时目录
tracker_server=192.168.0.200:22122 # tracker服务IP和端口
storage_server_port=23000 # storage服务端口
group_name=group1 # 组名
url_have_group_name=true # 访问链接前缀加上组名
store_path0=/fastdfs/storage # 文件存储路径
4、复制FastDFS源文件目录中HTTP相关的配置文件到/etc/fdfs目录
cd /usr/local/src/fastdfs-master/conf
cp http.conf mime.types /etc/fdfs/
5、创建数据存放目录的软链接
ln -s /fastdfs/storage/data/ /fastdfs/storage/data/M00
6、配置fastdfs-nginx-module
vi /opt/nginx/conf/nginx.conf
user nobody;
worker_processes 1;
events {
worker_connections 1024;
}
http {
include mime.types;
default_type application/octet-stream;
sendfile on;
keepalive_timeout 65;
server {
listen 8888;
server_name localhost;
# FastDFS 文件访问配置(fastdfs-nginx-module模块)
location ~/group([0-9])/M00 {
ngx_fastdfs_module;
}
error_page 500 502 503 504 /50x.html;
location = /50x.html {
root html;
}
}
}
注意事项:
8888 端口值要与/etc/fdfs/storage.conf中的http.server_port=8888 相对应,因为 http.server_port 默认为 8888
防火墙中打开nginx的8888端口。方式参考上文。
7、启动nginx
/usr/bin/nginx
8、设置nginx开机自启
vi /etc/rc.local
# 加入
/usr/bin/nginx
chmod +x /etc/rc.local # centos7
注:在这里nginx的作用是:充当http服务器。用来访问静态资源。
9、通过浏览器访问之前上传的文件
http://192.168.1.202:8888/group1/M00/00/00/wKgBh1Xtr9-AeTfWAAVFOL7FJU4.tar.gz
此时就能在浏览器中下载文件啦。