NFS介绍与使用

NFS介绍与使用

1. nfs简介

• nfs：存储系统，共享文件系统
• 将系统上的某一个文件目录的空间给另外一台主机使用

1.1 nfs特点

• NFS（Network File System）即网络文件系统，是FreeBSD支持的文件系统中的一种，它允许网络中的计算机之间通过TCP/IP网络共享资源（共享资源包括： 目录）
• 在NFS的应用中，本地NFS的客户端应用可以透明地读写位于远端NFS服务器上的文件，就像访问本地文件一样
• nfs适用于Linux与Unix之间实现文件共享，不能实现Linux与Windows间的文件共享功能
• nfs是运行在应用层的协议，其监听于2049/tcp和2049/udp套接字上
• nfs服务只能基于IP进行认证

1.2 nfs的应用场景

• 多个机器共享一台CDROM（光盘）或其他设备。这对于在多台机器中安装软件来说更加便宜与方便
• 在大型网络中，配置一台中心NFS服务器用来放置所有用户的home目录可能会带来便利。这些目录能被输出到网络以便用户不管在哪台工作站上登录，总能得到相同的home目录
• 不同客户端可在NFS上观看影视文件，节省本地空间
• 在客户端完成的工作数据，可以备份保存到NFS服务器上用户自己的路径下

1.3 nfs的体系组成

• nfs体系至少有两个主要部分：

  • 一台nfs服务器，提供空间
  • 若干台客户机，使用空间

• nfs体系的架构图如下：

• 客户机通过TCP/IP网络远程访问存放在NFS服务器上的数据
• 在NFS服务器正式启用前，需要根据实际环境和需求，配置一些NFS参数

2. nfs工作机制

• nfs是基于rpc来实现网络文件系统共享的

2.1 RPC

• RPC（Remote Procedure Call Protocol），远程过程调用协议，它是一种通过网络从远程计算机程序上请求服务，而不需要了解底层网络技术的协议。
• RPC协议假定某些传输协议的存在，如TCP或UDP，为通信程序之间携带信息数据。在OSI网络通信模型中，RPC跨越了传输层和应用层。
• RPC采用客户机/服务器模式。请求程序就是一个客户机，而服务提供程序就是一个服务器。

2.2 rpc工作机制描述

• 客户端程序发起一个RPC系统调用基于TCP协议发送给另一台主机（服务端）
• 服务端监听在某个套接字（ip+端口）上，当收到客户端的系统调用请求以后，将收到的请求和其所传递的参数通过本地的系统调用执行一遍，并将结果返回给本地的服务进程
• 服务端的服务进程收到返回的执行结果后将其封装成响应报文，再通过rpc协议返回给客户端
• 客户端调用进程接收答复信息，获得进程结果，然后调用执行继续进行

2.3 nfs工作机制

//NFS服务器端运行着四个进程：
    nfsd
    mountd
    idmapd
    portmapper


idmapd  //实现用户帐号的集中映射，把所有的帐号都映射为NOBODY，但是在访问时却能以本地用户的身份去访问
id：用户
map：映射
d:守护


mountd  //用于验证客户端是否在允许访问此NFS文件系统的客户端列表中，在则允许访问（发放一个令牌，持令牌去找nfsd），否则拒绝访问
        //mountd的服务端口是随机的，由rpc服务（portmapper）提供随机端口号


nfsd    //nfs的守护进程，监听在2049/tcp和2049/udp端口上
        //不负责文件存储（由NFS服务器本地内核负责调度存储），用于理解客户端发起的rpc请求，并将其转交给本地内核，而后存储在指定的文件系统上


portmapper  //NFS服务器的rpc服务，其监听于111/TCP和111/UDP套接字上，用于管理远程过程调用（RPC）

2.4 NFS的简单工作流程

需求：查看file文件的信息，此file存储在远程NFS服务端主机上（挂载在本地目录/shared/nfs中）

• 客户端发起查看file信息的指令（ls file）给内核，内核通过NFS模块得知此文件并不是本地文件系统中的文件，而是在远程NFS主机上的一个文件
• 客户端主机的内核通过RPC协议把查看file信息的指令（系统调用）封装成rpc请求通过TCP的111端口发送给NFS服务端主机的portmapper
• NFS服务端主机的portmapper（RPC服务进程）告诉客户端说NFS服务端的mountd服务在某某端口上，你去找它验证

因为mountd在提供服务时必须要向portmapper注册一个端口号，所以portmapper是知道其工作于哪个端口的

• 客户端得知服务端的mountd进程端口号后，通过已知的服务端mountd端口号请求验证
• mountd收到验证请求后验证发起请求的客户端是否在允许访问此NFS文件系统的客户端列表中，在则允许访问（发放一个令牌，持令牌去找nfsd），否则拒绝访问
• 验证通过后客户端持mountd发放的令牌去找服务端的nfsd进程，请求查看某文件
• 服务端的nfsd进程发起本地系统调用，向内核请求查看客户端要查看的文件的信息
• 服务端的内核执行nfsd请求的系统调用，并将结果返回给nfsd服务
• nfsd进程收到内核返回的结果后将其封装成rpc请求报文并通过tcp/ip协议返回给客户端

3. exports文件的格式

• nfs的主配置文件是/etc/exports，在此文件中，可以定义NFS系统的输出目录（即共享目录）、访问权限和允许访问的主机等参数。该文件默认为空，没有配置输出任何共享目录，这是基于安全性的考虑，如此即使系统启动了NFS服务也不会输出任何共享资源。
• exports文件中每一行提供了一个共享目录的设置，其命令格式为

<输出目录> [客户端1(选项1,选项2,...)] [客户端2(选项1,选项2,...)]

• 其中，除输出目录是必选参数外，其他参数均是可选项。另外，格式中的输出目录和客户端之间、客户端与客户端之间都使用空格分隔，但客户端与选项之间不能有空格。
• 客户端是指网络中可以访问这个NFS共享目录的计算机。客户端的指定非常灵活，可为单个主机的IP或域名，亦可为某个子网或域中的主机等。

3.1 客户端常用的指定方式

客户端	说明
172.16.12.129	指定IP地址的主机
172.16.12.0/24(或172.16.12.*)	指定子网中的所有主机
www.wangqing.com	指定域名的主机，本地域名
*.wangqing.com	指定wangqing.com域中的所有主机
*(或缺省)	所有主机

• 选项用来设置共享目录的访问权限、用户映射等。exports文件中的选项比较多，一般可分为三类：
  • 访问权限选项（用于控制共享目录的访问权限）
  • 用户映射选项
    • 默认情况下，当客户端访问NFS服务器时，若远程访问的用户是root用户，则NFS服务器会将其映射成一个本地的匿名用户（该用户为nobody），并将其所属的用户组也映射成匿名用户组（该用户组也为nobody），如此有助于提高系统的安全性。
  • 其他选项

3.2 访问权限选项

访问权限选项	说明
ro	设置输出目录只读
rw	设置输出目录可读写

3.3 用户映射选项

用户映射选项	说明
all_squash	将远程访问的所有普通用户及所属组都映射为匿名用户或用户组(nobody)，将所有的用户映射成nobody
no_all_squash	不将远程访问的所有普通用户及所属用户组都映射为匿名用户或用户组(默认设置)
root_squash	将root用户及所属用户组都映射为匿名用户或用户组(默认设置)，root用户映射成nobody
no_root_squash	不将root用户及所属用户组都映射为匿名用户或用户组
anonuid=xxx	将远程访问的所有用户都映射为匿名用户，并指定该匿名用户为本地用户帐户(UID=xxx)
anongid=xxx	将远程访问的所有用户组都映射为匿名用户组，并指定该匿名用户组为本地用户组(GID=xxx)

• anon：匿名

3.4 常用的其他选项：

其他选项	说明
secure，安全	限制客户端只能从小于1024的TCP/IP端口连接NFS服务器(默认设置)
insecure，不安全	允许客户端从大于1024的TCP/IP端口连接NFS服务器
sync，同步	将数据同步写入内存缓冲区或磁盘中，效率较低，但可保证数据一致性
async，异步	将数据先保存在内存缓冲区中，必要时才写入磁盘
wdelay，写入延迟	检查是否有相关的写操作，如果有则这些写操作一起执行，可提高效率(默认设置)
no_wdelay，写入不延迟	若有写操作则立即执行，应与sync配置使用
subtree_check，检查	若输出目录是一个子目录，则NFS服务器将检查其父目录的权限(默认设置)
no_subtree_check，不检查	即使输出目录是一个子目录，NFS服务亦不检查其父目录的权限，可提高效率
nohide，不隐藏	若将一个目录挂载到另一个目录之上，则原来的目录通常就被隐藏起来或看起来像空的一样。要禁用这种行为，需启用hide选项

4. nfs管理

	IP
客户端	192.168.232.128
服务端	192.168.232.130

4.1 安装nfs

服务端防火墙和selinux关闭

客户端：
[root@client ~]# dnf -y install nfs-utils

服务端：
[root@server ~]# systemctl status rpcbind
鈼� rpcbind.service - RPC Bind
   Loaded: loaded (/usr/lib/systemd/system/rpcbind.service; enabled;>
   Active: inactive (dead)
     Docs: man:rpcbind(8)
[root@server ~]# systemctl status nfs-server
鈼� nfs-server.service - NFS server and services
   Loaded: loaded (/usr/lib/systemd/system/nfs-server.service; disab>
   Active: inactive (dead)
[root@server ~]# systemctl enable --now nfs-server
Created symlink /etc/systemd/system/multi-user.target.wants/nfs-server.service 鈫� /usr/lib/systemd/system/nfs-server.service.
[root@server ~]#
    
    
启动nfs，rpcbind也会启动    

4.2 使用shoumount命令测试NFS服务器的输出目录状态

//语法：showmount [选项] [NFS服务器名称或地址]
//常用的选项有：
    -a  //显示指定NFS服务器的所有客户端主机及其所连接的目录
    -d  //显示指定的NFS服务器中已被客户端连接的所有输出目录
    -e  //显示指定的NFS服务器上所有输出的共享目录

clnt_create: RPC: Unable to receive
出现这个将服务端防火墙和selinux关闭

[root@client ~]# showmount -e 192.168.232.130
Export list for 192.168.232.130:


[root@server ~]# vim /etc/exports
[root@server ~]# cat /etc/exports
/media
[root@server ~]# systemctl restart nfs-server


[root@client ~]# showmount -e 192.168.232.130
Export list for 192.168.232.130:
/media *
[root@client ~]#


[root@client ~]# showmount -a 192.168.232.130
All mount points on 192.168.232.130:
所有挂载点
[root@client ~]# 

永久挂载：
在客户端挂载NFS文件系统
[root@client ~]# vim /etc/fstab 
[root@client ~]# tail -1 /etc/fstab 
192.168.232.130:/media /mnt nfs defaults,_netdev 0 0
[root@client ~]# mount -a 
[root@client ~]# df -h
Filesystem              Size  Used Avail Use% Mounted on
devtmpfs                877M     0  877M   0% /dev
tmpfs                   896M     0  896M   0% /dev/shm
tmpfs                   896M  8.8M  887M   1% /run
tmpfs                   896M     0  896M   0% /sys/fs/cgroup
/dev/mapper/rhel-root    17G  1.8G   16G  11% /
/dev/sda1              1014M  212M  803M  21% /boot
tmpfs                   180M     0  180M   0% /run/user/0
192.168.232.130:/media   17G  1.9G   16G  12% /mnt
[root@client ~]# 

创建文件：
[root@server ~]# cd /media/
[root@server media]# ls
[root@server media]# touch abc
[root@server media]# touch 123
[root@server media]# ls
123  abc
[root@server media]#


[root@client ~]# cd /mnt/
[root@client mnt]# ls
123  abc
[root@client mnt]# rm -f abc 
rm: cannot remove 'abc': Read-only file system
[root@client mnt]#


[root@server ~]# vim /etc/exports
[root@server ~]# cat /etc/exports
/media *(rw)
[root@server ~]# systemctl restart nfs-server
[root@server ~]#

给权限：
[root@server ~]# ll -d /media/
drwxr-xr-x. 2 root root 28 Sep 28 16:44 /media/
[root@server ~]# setfacl -m u:nobody:rwx /media/
[root@server ~]# getfacl /media/
getfacl: Removing leading '/' from absolute path names
# file: media/
# owner: root
# group: root
user::rwx
user:nobody:rwx
group::r-x
mask::rwx
other::r-x

[root@server ~]#

再次删除：
[root@client mnt]# rm -f abc 
[root@client mnt]# ls
123
[root@client mnt]#

4.3 在客户端挂载NFS文件系统

mount -t nfs SERVER:/path/to/sharedfs /path/to/mount_point

4.4 在客户端设置开机自动挂载nfs：编辑/etc/fstab文件，添加如下格式的内容

SERVER:/PATH/TO/EXPORTED_FS /mnt_point nfs defaults,_netdev 0 0


_netdev：

• 客户端挂载时可以使用的特殊选项：
  • rsize：其值是从服务器读取的字节数（缓冲）。默认为1024。若使用比较高的值，如8192，可以提高传输速度
  • wsize：其值是写入到服务器的字节数（缓冲）。默认为1024。若使用比较高的值，如8192，可以提高传输速度

exportfs        //维护exports文件导出的文件系统表的专用工具
    -a      //输出在/etc/exports文件中所设置的所有目录
    -r      //重新读取/etc/exports文件中的设置，并使其立即生效，无需重启服务
    -u      //停止输出某一目录
    -v      //在输出目录时将目录显示到屏幕上

• 创建文件或目录自动成为Tom用户

[root@server ~]# id tom
uid=1000(tom) gid=1000(tom) groups=1000(tom)
[root@server ~]# vim /etc/exports
[root@server ~]# cat /etc/exports
/media *(rw,anonuid=1000)
[root@server ~]# exportfs -r 
[root@server ~]# cd /media/
[root@server media]# ls
123
[root@server media]# ll
total 0
-rw-r--r--. 1 root root 0 Sep 28 16:44 123
[root@server media]#
[root@server media]# setfacl -m u:tom:rwx /media/

[root@client mnt]# mkdir abc
[root@client mnt]# ll
total 0
drwxr-xr-x. 2 1000 nobody 6 Sep 28 17:04 abc
[root@client mnt]# 
[root@client mnt]# id 1000
id: '1000': no such user
[root@client mnt]# 

4.5 检查输出目录所使用的选项

• 在配置文件/etc/exports中，即使在命令行中只设置了一两个选项，但在真正输出目录时，实际上还带有很多默认的选项。通过查看/var/lib/nfs/etab文件，可以看到具体使用了何选项

[root@server media]# cat /var/lib/nfs/etab
/media  *(rw,sync,wdelay,hide,nocrossmnt,secure,root_squash,no_all_squash,no_subtree_check,secure_locks,acl,no_pnfs,anonuid=1000,anongid=65534,sec=sys,rw,secure,root_squash,no_all_squash)
[root@server media]#
[root@server media]# id 65534
uid=65534(nobody) gid=65534(nobody) groups=65534(nobody)
[root@server media]#

5. 作业

5.1 手动搭建一个nfs服务器

• 开放/nfs/shared目录，供所有用户查阅资料
• 开放/nfs/upload目录为192.168.232.0/24网段的数据上传目录，并将所有用户及所属的用户组都映射为nfs-upload，其UID与GID均为300

5.2 开放/nfs/shared目录，供所有用户查阅资料

[root@server ~]# vim /etc/exports
[root@server ~]# head -2 /etc/exports
/media *(rw,anonuid=1000)
/nfs/shared *(ro)
[root@server ~]# 
[root@server ~]# systemctl restart nfs-server

创建目录
[root@server ~]# mkdir -pv /nfs/shared
mkdir: created directory '/nfs'
mkdir: created directory '/nfs/shared'
[root@server ~]# cd /nfs/shared
[root@server shared]# ls
[root@server shared]# mkdir abc
[root@server shared]# touch 1233
[root@server shared]# ll
total 0
-rw-r--r--. 1 root root 0 Sep 28 18:22 1233
drwxr-xr-x. 2 root root 6 Sep 28 18:22 abc
[root@server shared]# 

5.1.2 添加用户

[root@server ~]# useradd -u 111 mushuang
[root@server ~]# id 111
uid=111(mushuang) gid=1112(mushuang) groups=1112(mushuang)
[root@server ~]# 

5.1.3 挂载nfs

[root@client ~]# tail -2 /etc/fstab 
192.168.232.130:/media /mnt nfs defaults 0 0
192.168.232.130:/nfs/shared /nfs nfs defaults 0 0
[root@client ~]# mount -a
mount.nfs: mount point /nfs does not exist
[root@client ~]# mkdir /nfs
[root@client ~]# mount -a
[root@client ~]# df -h
Filesystem                   Size  Used Avail Use% Mounted on
devtmpfs                     877M     0  877M   0% /dev
tmpfs                        896M     0  896M   0% /dev/shm
tmpfs                        896M  8.8M  887M   1% /run
tmpfs                        896M     0  896M   0% /sys/fs/cgroup
/dev/mapper/rhel-root         17G  1.8G   16G  11% /
/dev/sda1                   1014M  212M  803M  21% /boot
tmpfs                        180M     0  180M   0% /run/user/0
192.168.232.130:/media        17G  2.0G   16G  12% /mnt
192.168.232.130:/nfs/shared   17G  2.0G   16G  12% /nfs
[root@client ~]# 

5.1.4 进入到nfs目录里就能看到服务器共享的资料了

[root@client ~]# cd /nfs/
[root@client nfs]# ls
1233  abc
[root@client nfs]# 

5.3 开放/nfs/upload目录为192.168.232.0/24网段的数据上传目录，并将所有用户及所属的用户组都映射为nfs-upload，其UID与GID均为300

5.3.1 创建目录/nfs/upload和编辑/etc/exports文件

编辑/etc/exports文件并且将目录/nfs/upload共享出来，让他只允许192.168.232.0/24网段访问并且所有用户及所属的用户组都映射为nfs-upload
[root@server ~]# head -3 /etc/exports
/media *(rw,anonuid=1000)
/nfs/shared *(ro)
/nfs/upload 192.168.232.0/24(rw,anonuid=300,anongid=300)
[root@server ~]# mkdir -p /nfs/upload

用 exportfs -r读取/etc/exports文件中的设置，并使其立即生效
[root@server ~]# exportfs -r
[root@server ~]# 

5.3.2 创建用户

[root@server ~]# useradd -r -u 300 nfs-upload
[root@server ~]# id 300
uid=300(nfs-upload) gid=300(nfs-upload) groups=300(nfs-upload)
[root@server ~]# 
//创建用户且uid和gid均为300

5.3.3 更改属主

[root@server ~]# setfacl -m u:nfs-upload:rwx /nfs/upload/
[root@server ~]# getfacl /nfs/upload/
getfacl: Removing leading '/' from absolute path names
# file: nfs/upload/
# owner: root
# group: root
user::rwx
user:nfs-upload:rwx
group::r-x
mask::rwx
other::r-x

5.3.4 挂载nfs

[root@client ~]# tail -3 /etc/fstab 
192.168.232.130:/media /mnt nfs defaults 0 0
192.168.232.130:/nfs/shared /nfs nfs defaults 0 0
192.168.232.130:/nfs/upload /opt nfs defaults 0 0
[root@client ~]# mount -a
[root@client ~]# df -h
Filesystem                   Size  Used Avail Use% Mounted on
devtmpfs                     877M     0  877M   0% /dev
tmpfs                        896M     0  896M   0% /dev/shm
tmpfs                        896M  8.8M  887M   1% /run
tmpfs                        896M     0  896M   0% /sys/fs/cgroup
/dev/mapper/rhel-root         17G  1.8G   16G  11% /
/dev/sda1                   1014M  212M  803M  21% /boot
tmpfs                        180M     0  180M   0% /run/user/0
192.168.232.130:/media        17G  2.0G   16G  12% /mnt
192.168.232.130:/nfs/shared   17G  2.0G   16G  12% /nfs
192.168.232.130:/nfs/upload   17G  2.0G   16G  12% /opt
[root@client ~]#

5.3.5 验证

[root@server ~]# cd /nfs/upload/
[root@server upload]# ls
[root@server upload]# touch abc
[root@server upload]# mkdir ab
[root@server upload]# ls
ab  abc
[root@server upload]# ls
ab
[root@server upload]# 


[root@client opt]# ll
total 0
drwxr-xr-x. 2 root root 6 Sep 28 21:48 ab
-rw-r--r--. 1 root root 0 Sep 28 21:48 abc
[root@client opt]# ls
ab  abc
[root@client opt]# rm -f ab
rm: cannot remove 'ab': Is a directory
[root@client opt]# rm -f abc
[root@client opt]# ls
ab

在客户端创建文件及目录
[root@client opt]# mkdir 123
[root@client opt]# touch 456
[root@client opt]# ll
total 0
drwxr-xr-x. 2  300  300 6 Sep 28 21:52 123
-rw-r--r--. 1  300  300 0 Sep 28 21:52 456
drwxr-xr-x. 2 root root 6 Sep 28 21:48 ab
[root@client opt]# 

查看
root@server upload]# ll
total 0
drwxr-xr-x. 2 nfs-upload nfs-upload 6 Sep 28 21:52 123
-rw-r--r--. 1 nfs-upload nfs-upload 0 Sep 28 21:52 456
drwxr-xr-x. 2 root       root       6 Sep 28 21:48 ab
[root@server upload]# ls
123  456  ab
[root@server upload]#