小白入门-分布式文件系统（FastDFS ）

FastDFS 是一个开源的高性能分布式文件系统（DFS）。 它的主要功能包括：文件存储，文件同步和文件访问，以及高容量和负载平衡。

FastDFS 系统有三个角色：跟踪服务器(Tracker Server)、存储服务器(Storage Server)和客户端(Client)。

• Tracker Server: 跟踪服务器，主要做调度工作，起到均衡的作用；负责管理所有的 storage server
  和 group，每个 storage 在启动后会连接 Tracker，告知自己所属 group 等信息，并保持周期性心跳。
• Storage Server：存储服务器，主要提供容量和备份服务；以 group 为单位，每个 group 内可以有多台 storage server，数据互为备份。
• Client:客户端，上传下载数据的服务器，也就是我们自己的项目所部署在的服务器。

上述架构优点：1.高可靠性：无单点故障 2.高吞吐性：只要 Group 足够多，数据流量将足够分散。

那么怎么上传下载以及同步文件这么操作呢？我在这就不详细说全部流程了，大概上传流程就是客户端发送上传请求到Tracker Server服务器，接着Tracker Server服务器分配group和Storage Server，当然这是有一定规则的，选择好Storage Server后再根据一定规则选择存储在这个服务器会生成一个file_id，这个file_id 包含字段包括：storage server ip、文件创建时间、文件大小、文件 CRC32 校验码和随机数；每个存储目录下有两个 256 * 256 个子目录，后边你会知道一个Storage Server存储目录下有好多个文件夹的，storage 会按文件file_id进行两次 hash ，路由到其中一个子目录，然后将文件存储到该子目录下，最后生成文件路径：group 名称、虚拟磁盘路径、数据两级目录、file_id和文件后缀就是一个完整的文件地址。

环境搭建：

我的搭建环境是：

• 操作系统： CentOS 7 
• FastDFS： fastdfs-5.05 、 fastdfs-nginx-module-v1.16 、 libfastcommon-v1.0.7
• Nginx ： nginx-1.10.1

• 分布式文件系统 - FastDFS 在 CentOS 下配置安装部署

• 分布式文件系统 - FastDFS 配置 Nginx 模块及上传测试

总结：

FastDFS 是一个由 C 语言实现的开源轻量级分布式文件系统，作者余庆(happyfish100)，支持 Linux、FreeBSD、AID 等 Unix 系统，解决了大数据存储和读写负载均衡等问题，适合存储 4KB~500MB 之间的小文件，如图片网站、短视频网站、文档、app 下载站等，UC、京东、支付宝、迅雷、酷狗等都有使用。