一步步搭建FastDFS服务器&三种方式整合FastDFS和Nginx&依赖和错误解决

一步步搭建FastDFS服务器&三种方式整合FastDFS和Nginx&依赖和错误解决

安装参考

分布式文件系统FastDFS安装教程
Nginx和FastDfs完整配置过程
最佳参考–用FastDFS一步步搭建文件管理系统

问题解决参考

No such file or directory错误

彻底删除CentOS上的Nginx

1.安装libfastcommon

1. 在线下载(可选)

   wget https://github.com/happyfish100/libfastcommon/archive/V1.0.38.tar.gz

2. 上传libfastcommon-master.zip到home目录(自己下载然后上传下载地址)

3. 解压 unzip libfastcommon-master.zip

4. 进入目录编译 ./make.sh

5. 安装 sudo ./make.sh install

2.安装FastDFS

1. 在线在下载(可选)

   wget https://github.com/happyfish100/fastdfs/archive/V5.11.tar.gz

2. 上传fastdfs-master.zip到home目录(自己下载然后上传下载地址)

3. 解压 unzip fastdfs-master.zip

4. 进入fastdfs-master 目录 cd fastdfs-master

5. 执行编译 ./make.sh

6. 安装 ./make.sh install

7. 查看可执行的命令

   ls -la /usr/bin/fdfs*

3.配置Tracker服务

PS：最好使用root权限进行安装

1. 创建tracker目录

   mkdir /usr/fastdfs cd /usr/fastdfs/ mkdir tracker

2. 进入fdfs目录 cd /etc/fdfs

3. 拷贝tracker.conf.sample去掉.sample后缀

   cp tracker.conf.sample tracker.conf

4. 修改tracker.conf配置文件 vi tracker.conf

   #base_path
   base_path=/usr/fastdfs/tracker
   #port
   port=22122#默认
   #http端口，需要和nginx相同
   http.server_port=80
   

5. 启动tracker(支持start|stop|restart)

   /usr/bin/fdfs_trackerd /etc/fdfs/tracker.conf start

6. 查看启动日志

   cat /usr/fastdfs/tracker/logs/trackerd.log

7. 查看端口

   netstat -apn|grep fdfs

4.配置Storage服务

1. 创建storage目录

   mkdir /usr/fastdfs/storage

2. cd /etc/fdfs

3. 拷贝storage.conf.sample去掉.sample后缀

   cp storage.conf.sample storage.conf

4. 修改storage.conf配置文件 vi storage.conf

   #storage存储data和log的跟路径，必须提前创建好
   base_path=/usr/fastdfs/storage
   #storge默认23000，同一个组的storage端口号必须一致
   port=23000
   #默认组名，根据实际情况修改
   group_name=group1
   #存储路径个数，需要和store_path个数匹配
   store_path_count=1
   #如果为空，则使用base_path
   store_path0=/usr/fastdfs/storage
   #配置该storage监听的tracker的ip和port
   tracker_server=193.112.41.124:22122
   

   :wq 保存

5. 启动storage(支持start|stop|restart)

   /usr/bin/fdfs_storaged /etc/fdfs/storage.conf start

6. 查看storage启动日志

   cat /usr/fastdfs/storage/logs/storaged.log

   再次查看tracker日志

   `tail -f /usr/fastdfs/tracker/logs/trackerd.log` 
   

7. 查看启动端口

   netstat -apn|grep fdfs

8. 通过monitor来查看storage是否成功绑定

   /usr/bin/fdfs_monitor /etc/fdfs/storage.conf

   #显示以下则成功
   Storage 1:
        id = 193.112.41.124
        ip_addr = 193.112.41.124  ACTIVE
   

5.安装Nginx和fastdfs-nginx-module模块

准备：依赖安装

Linux Nginx安装以及可能出现错误

出现什么错误再按相应的安装依赖

1. PCRE

   直接使用以下命令即可： yum -y install pcre-devel or yum -y install pcre pcre-devel

   Linux 安装 nginx 安装PCRE库（1）

   #下载
   wget    https://netix.dl.sourceforge.net/project/pcre/pcre/8.40/pcre-8.40.tar.gz
   
   #解压安装包:
   tar -zxvf pcre-8.40.tar.gz
   
   #进入安装包目录
   cd pcre-8.40
   
   #编译安装  需要root权限
   ./configure
   make && make install
   
   #查看pcre版本
   pcre-config --version
   pcre2-config --version#我安装的是pcre2版本
   

2. SSL

   yum -y install openssl openssl-devel

3. gcc-c++

   yum -y install gcc-c++ autoconf automake

4. zlib

   yum install -y zlib-devel

5. libxml2

   yum -y install libxml2 libxml2-dev yum -y install libxslt-devel

6. gd-devel(GD library)

   yum -y install gd-devel

7. ExtUtils

   yum -y install perl-devel perl-ExtUtils-Embed

8. GeoIP

   yum -y install GeoIP GeoIP-devel GeoIP-data

方式一：安装新的Nginx再整合

1. 在线下载Nginx

   wget http://nginx.org/download/nginx-1.15.2.tar.gz

2. 在线下载fastdfs-nginx-module

   wget https://github.com/happyfish100/fastdfs-nginx-module/archive/V1.20.tar.gz

3. 这里使用文件上传，需要自己下载

   Nginx官方下载地址 --选择了1.8的

   fastdfs-nginx-module官方下载

4. 解压两个压缩包

   tar -zxvf nginx-1.8.0.tar.gz unzip fastdfs-nginx-module-master.zip

5. 将解压的目录都移动到 /usr文件夹（为了确保路径的安全，只要不带中文或&之类的就行）

   mv fastdfs-nginx-module-master nginx-1.8.0 /usr/

6. 安装依赖的库（这里参考上文依赖安装）

7. 配置Nginx的configure

   1. cd nginx-1.8.0

   2. 可能会报的错误

      #错误
      /usr/include/fastdfs/fdfs_define.h:15:27: fatal error: common_define.h: No such file or directory
      #解决
      cd /usr/fastdfs-nginx-module-master
      cp src/config src/config.bak
      vi src/config
      #修改以下内容
      ngx_module_incs="/usr/include/fastdfs /usr/include/fastcommon/"
      CORE_INCS="$CORE_INCS /usr/include/fastdfs /usr/include/fastcommon/"
      

   3. 配置，并加载fastdfs-nginx-module模块

      ./configure --prefix=/usr/local/nginx --add-module=/usr/fastdfs-nginx-module-master/src
      

   4. 编译安装

      make make install

   5. 查看安装路径 whereis nginx

   6. 启动、停止

      cd /usr/local/nginx/sbin/
      ./nginx 
      ./nginx -s stop #此方式相当于先查出nginx进程id再使用kill命令强制杀掉进程
      ./nginx -s quit #此方式停止步骤是待nginx进程处理任务完毕进行停止
      ./nginx -s reload
      

   7. 验证启动状态

      wget "http://127.0.0.1"

   8. 查看nginx版本

      /usr/local/nginx/sbin/nginx -V

方式二：修改已有的nginx再整合

nginx——安装和配置详解
已安装nginx动态添加模块

必须保证已安装的nginx和要设置的nginx版本一致，我这里是1.8

1. 查看nginx的版本信息

   /usr/local/nginx/sbin/nginx -V

   #信息内容
   nginx version: nginx/1.8.0
   built by gcc 4.4.7 20120313 (Red Hat 4.4.7-11) (GCC) 
   built with OpenSSL 1.0.1e-fips 11 Feb 2013
   TLS SNI support enabled
   configure arguments: --with-http_stub_status_module --with-http_ssl_module --with-pcre --with-http_realip_module --with-http_image_filter_module
   #可以看出编译安装使用了 --with-http_stub_status_module --with-http_ssl_module --with-pcre --with-http_realip_module --with-http_image_filter_module 这些参数。
   

2. 加入需要安装的模块，重新编译

   1. cd /usr/nginx-1.8.0 #进入nginx安装包目录

   2. 添加模块

      # --prefix=/usr/local/nginx代表安装目录
      # 需要加上原先已有的内容
      # --add-module=···表示添加的模块
      ./configure --prefix=/usr/local/nginx --with-http_stub_status_module --with-http_ssl_module --with-pcre --with-http_realip_module --with-http_image_filter_module --add-module=/usr/fastdfs-nginx-module-master/src
      

   3. 编译 make 注意：千万不要 make install ，不然就真的覆盖了

   4. 可能的错误

      确保路径的安全性，路径名不要有&、中文等符号，我这里直接将两个文件夹移动到了/usr目录下

      mv fastdfs-nginx-module-master nginx-1.8.0 /usr/

   5. 替换nginx二进制文件

      1. 先关闭nginx

         cd /usr/local/nginx/sbin/ ./nginx -s stop

      2. 备份

         cp /usr/local/nginx/sbin/nginx /usr/local/nginx/sbin/nginx.bak

      3. 覆盖替换

         cp ./objs/nginx /usr/local/nginx/sbin/

      4. 查看nginx版本

         /usr/local/nginx/sbin/nginx -V

      5. 启动/重启

         /usr/local/nginx/sbin/nginx or /usr/local/nginx/sbin/nginx -s reload

6.配置Nginx和fastdfs-nginx-module模块

1. 配置mod-fastdfs.conf，并拷贝到/etc/fdfs文件目录下

   cd /usr/fastdfs-nginx-module-master/src
   cp mod_fastdfs.conf /etc/fdfs/
   

2. 进入/etc/fdfs修改mod-fastdfs.conf

   vim /etc/fdfs/mod_fastdfs.conf

   #修改以下内容
   base_path=/usr/fastdfs#这里是你前面设置的路径
   tracker_server=193.112.41.124:22122 #tracker的地址
   url_have_group_name=true #url是否包含group名称
   
   [group1]
   group_name=group1
   storage_server_port=23000 #需要和storage配置的相同
   store_path_count=1  #存储路径个数，需要和store_path个数匹配
   store_path0=/usr/fastdfs/storage #文件存储的位置
   

3. 配置nginx，80端口server增加location

   vi /usr/local/nginx/conf/nginx.conf

   #添加以下内容
           location ~/M00{
                   root /usr/fastdfs/storage/data;
                   ngx_fastdfs_module;
           }
   

4. 后需要拷贝fastdfs解压目录中的http.conf和mime.types：

   #这里是你FastDFS安装包下载的路径
   cd /yjdata/www/www/FastDFS&Nginx/fastdfs-master/conf
   cp mime.types http.conf /etc/fdfs/
   

5. 重启所有服务

   /usr/bin/fdfs_trackerd /etc/fdfs/tracker.conf restart#重启tracker
   /usr/bin/fdfs_storaged /etc/fdfs/storage.conf restart#重启storage
   netstat -apn|grep fdfs#查看端口
   /usr/bin/fdfs_monitor /etc/fdfs/storage.conf#查看fdfs启动状态
   /usr/local/nginx/sbin/nginx -s reload #重启nginx
   netstat -apn | grep nginx#查看端口
   ps -ef | grep nginx#查看进程，是否有两个，如果没有，可能无法访问，解决见下文
   

7.方式三：Yum方式安装Nginx并整合FastDFS

1. 直接通过yum安装Nginx

   yum install nginx

2. service nginx start 若发现启动失败

   1. cd /etc/nginx/conf.d

   2. 修改default.conf

      vi default.conf

      #将第二行注释
      server {
          listen       80 default_server;
          #listen       [::]:80 default_server;#注释
          server_name  localhost;#修改
          root         /usr/share/nginx/html;
      	#...省略内容
      }
      

3. 再次启动nginx service nginx start 查看启动状态 service nginx status

4. 访问（可能依旧访问不了，解决参考下文）

   wget localhost

5. 查看yum安装的nginx版本

   #查看
   whereis nginx
   #查看版本信息
   /usr/sbin/nginx -V
   #以下都是版本信息
   nginx version: nginx/1.10.3
   built by gcc 4.4.7 20120313 (Red Hat 4.4.7-23) (GCC) 
   built with OpenSSL 1.0.1e-fips 11 Feb 2013
   TLS SNI support enabled
   configure arguments: --prefix=/usr/share/nginx --sbin-path=/usr/sbin/nginx --modules-path=/usr/lib64/nginx/modules --conf-path=/etc/nginx/nginx.conf --error-log-path=/var/log/nginx/error.log --http-log-path=/var/log/nginx/access.log --http-client-body-temp-path=/var/lib/nginx/tmp/client_body --http-proxy-temp-path=/var/lib/nginx/tmp/proxy --http-fastcgi-temp-path=/var/lib/nginx/tmp/fastcgi --http-uwsgi-temp-path=/var/lib/nginx/tmp/uwsgi --http-scgi-temp-path=/var/lib/nginx/tmp/scgi --pid-path=/var/run/nginx.pid --lock-path=/var/lock/subsys/nginx --user=nginx --group=nginx --with-file-aio --with-ipv6 --with-http_ssl_module --with-http_v2_module --with-http_realip_module --with-http_addition_module --with-http_xslt_module=dynamic --with-http_image_filter_module=dynamic --with-http_geoip_module=dynamic --with-http_sub_module --with-http_dav_module --with-http_flv_module --with-http_mp4_module --with-http_gunzip_module --with-http_gzip_static_module --with-http_random_index_module --with-http_secure_link_module --with-http_degradation_module --with-http_slice_module --with-http_stub_status_module --with-http_perl_module=dynamic --with-mail=dynamic --with-mail_ssl_module --with-pcre --with-pcre-jit --with-stream=dynamic --with-stream_ssl_module --with-debug --with-cc-opt='-O2 -g -pipe -Wall -Wp,-D_FORTIFY_SOURCE=2 -fexceptions -fstack-protector --param=ssp-buffer-size=4 -m64 -mtune=generic' --with-ld-opt=' -Wl,-E'
   

6. 准备相应版本的nginx Nginx所有版本下载地址

   1. 键入命令上传 rz 选择 nginx-1.10.3.tar.gz 到 home目录

      或者直接下载 wget http://nginx.org/download/nginx-1.10.3.tar.gz

   2. 解压 tar -zxvf nginx-1.10.3.tar.gz

   3. 准备 fastdfs-nginx-module 模块 fastdfs-nginx-module官方下载

      1. 在线下载

         wget https://github.com/happyfish100/fastdfs-nginx-module/archive/V1.20.tar.gz

      2. 解压（建议自己从git上下载最新版本的）

         unzip fastdfs-nginx-module-master.zip

   4. 将解压的目录都放到到 /usr文件夹（为了确保路径的安全，只要不带中文或&之类的就行）

      mv fastdfs-nginx-module-master nginx-1.10.3 /usr/

   5. 安装依赖的库（缺什么安什么）

      1. PCRE

         yum -y install pcre-devel or yum -y install pcre pcre-devel

      2. SSL

         yum -y install openssl openssl-devel

      3. gcc-c++

         yum -y install gcc-c++ autoconf automake

      4. zlib

         yum install -y zlib-devel

      5. libxml2

         yum -y install libxml2 libxml2-dev yum -y install libxslt-devel

      6. gd-devel(GD library)

         yum -y install gd-devel

      7. ExtUtils

         yum -y install perl-devel perl-ExtUtils-Embed

      8. GeoIP

         yum -y install GeoIP GeoIP-devel GeoIP-data

   6. 进入目录 cd /usr/nginx-1.10.3/

   7. 配置Nginx的configure ，加载fastdfs-nginx-module模块
      (直接复制整行)

      # --prefix=/usr/share/nginx代表安装目录，这里需要和yum安装的nginx相同
      # 需要加上原先已有的内容
      # --add-module=···表示添加的模块，这里就是fastdfs-nginx-module模块
      ./configure --prefix=/usr/share/nginx --sbin-path=/usr/sbin/nginx --modules-path=/usr/lib64/nginx/modules --conf-path=/etc/nginx/nginx.conf --error-log-path=/var/log/nginx/error.log --http-log-path=/var/log/nginx/access.log --http-client-body-temp-path=/var/lib/nginx/tmp/client_body --http-proxy-temp-path=/var/lib/nginx/tmp/proxy --http-fastcgi-temp-path=/var/lib/nginx/tmp/fastcgi --http-uwsgi-temp-path=/var/lib/nginx/tmp/uwsgi --http-scgi-temp-path=/var/lib/nginx/tmp/scgi --pid-path=/var/run/nginx.pid --lock-path=/var/lock/subsys/nginx --user=nginx --group=nginx --with-file-aio --with-ipv6 --with-http_ssl_module --with-http_v2_module --with-http_realip_module --with-http_addition_module --with-http_xslt_module=dynamic --with-http_image_filter_module=dynamic --with-http_geoip_module=dynamic --with-http_sub_module --with-http_dav_module --with-http_flv_module --with-http_mp4_module --with-http_gunzip_module --with-http_gzip_static_module --with-http_random_index_module --with-http_secure_link_module --with-http_degradation_module --with-http_slice_module --with-http_stub_status_module --with-http_perl_module=dynamic --with-mail=dynamic --with-mail_ssl_module --with-pcre --with-pcre-jit --with-stream=dynamic --with-stream_ssl_module --with-debug --with-cc-opt='-O2 -g -pipe -Wall -Wp,-D_FORTIFY_SOURCE=2 -fexceptions -fstack-protector --param=ssp-buffer-size=4 -m64 -mtune=generic' --with-ld-opt=' -Wl,-E' --add-module=/usr/fastdfs-nginx-module-master/src
      

      可能会报的错误

      #错误
      /usr/include/fastdfs/fdfs_define.h:15:27: fatal error: common_define.h: No such file or directory
      #解决
      cd /usr/fastdfs-nginx-module-master
      cp src/config src/config.bak
      vi src/config
      #修改以下内容
      ngx_module_incs="/usr/include/fastdfs /usr/include/fastcommon/"
      CORE_INCS="$CORE_INCS /usr/include/fastdfs /usr/include/fastcommon/"
      

   8. 执行编译 make 注意：不要执行 make install

   9. 替换nginx二进制文件

      1. 先关闭nginx

         service nginx stop

      2. 备份

         cp /usr/sbin/nginx /usr/sbin/nginx.bak

      3. 覆盖替换

         cp ./objs/nginx /usr/sbin/nginx

      4. 查看nginx版本

         /usr/sbin/nginx -V

      5. 启动/重启

         service nginx start or service nginx restart

      6. 查看nginx进程是否有2个

         ps -ef | grep nginx

   10. 配置Nginx和fastdfs-nginx-module模块见第6步

   11. 重启所有服务

       /usr/bin/fdfs_trackerd /etc/fdfs/tracker.conf restart#重启tracker
       /usr/bin/fdfs_storaged /etc/fdfs/storage.conf restart#重启storage
       netstat -apn|grep fdfs#查看端口
       /usr/bin/fdfs_monitor /etc/fdfs/storage.conf#查看启动状态
       service nginx restart #重启nginx
       netstat -apn | grep nginx#查看端口
       ps -ef | grep nginx#查看进程
       

8.Permission denied问题解决

PS：先确保所有防火墙/安全组策略/配置文件 都是正确设置！

1. 查看日志

   cd /var/log/nginx/ cat error.log 传统方式安装的话 cat /usr/local/nginx/logs/error.log

2. 发现错误日志显示Permission denied

   ERROR - file: shared_func.c, line: 1073, stat /etc/fdfs/mod_fastdfs.conf fail, errno: 13, error info: Permission denied
   ERROR - file: /usr/fastdfs-nginx-module-master/src/common.c, line: 163, load conf file "/etc/fdfs/mod_fastdfs.conf" fail, ret code: 13
   

3. 打开nginx配置文件 vi /etc/nginx/nginx.conf 传统方式 vi /usr/local/nginx/conf/nginx.conf

4. 在开头第一行修改

   #原先
   ##yum安装的情况
     user nginx;
   ##传统方式安装的情况
     #user nobody;
   
   #修改成
   user root;
   

   :wq 保存

5. 重启nginx

   yum方式 service nginx restart 传统方式 /usr/local/nginx/sbin/nginx -s reload

6. 查看进程 ps -ef | grep nginx ，如果是有两个nginx的相关进程，就没问题了。

   root     31503     1  0 16:49 ?        00:00:00 nginx: master process /usr/sbin/nginx -c /etc/nginx/nginx.conf
   root     31505 31503  0 16:49 ?        00:00:00 nginx: worker process