网络块设备(nbd)的安装与使用
参考文档http://www.turbolinux.com.cn/turbo/wiki/doku.php?do=export_xhtml&id=%E7%B3%BB%E7%BB%9F%E7%AE%A1%E7%90%86:nbd_%E7%BD%91%E7%BB%9C%E5%9D%97%E8%AE%BE%E5%A4%87_%E7%9A%84%E4%BD%BF%E7%94%A8
1.NBD的安装
在linux的10以上的版本中,nbd已经被编译成模块。保存在/lib/modules/$version/kernel/driver/block/下。除此之外你还需要在服务器端和客户端上安装nbd-server和nbd-client工具。
(1)安装的第一步:
从http://sourceforge.net/projects/nbd下载nbd的源码包 nbd-3.2.tar.bz2。之后按照一下步骤进行安装:
# tar jxf nbd-3.2.tar.bz2
# cd nbd-3.2
# ./configure
# make
# make install
2.NBD的使用方法
这里本人将服务器和客户端都设置在一个机器上:
首先服务器端的配置方法如下:
$ cd /var/tmp
$ dd if=/dev/zero of=nbd-disk0 bs=104857600 count=3
以上的目的是建立一个磁盘映像文件,作为提供给客户端使用的块设备。我们制作一个300M大小的文件当作块设备。
nbd-server 1234 /var/tmp/nbd-disk0 //启动nbd-server,监听1234端口,使用nbd-disk0映像文件。
ps -ef | grep nbd //查看nbd进程。
root 11292 1 0 15:02 ? 00:00:00 nbd-server 1234 /var/tmp/nbd-disk0
nbd的使用后面的参数分别是:
nbd-server port file [size][kKmM] [-l authorize_file] [-r] [-m] [-c] [-a timeout_sec]
port nbd-server监听端口.
file 绑定的映像文件.
size 在客户端所见的块设备大小(单位可以是: k,K,m,M).
-r|--read-only
只读模式,客户端无法在块设备上进行写操作.
-m|--multi-file
多个文件,可以将多个映像文件作为一个块设备提供给客户端.
-c|--copy-on-write
所有客户端的写操作被会另存为一个文件,连接断开后,这个文件会被删除.
可以保证映像文件内容不会被修改.
-l|--authorize-file file 一个允许访问此nbd的主机列表文件.
-a|--idle-time
服务器断开与客户端连接前的最大空闲时间.
以上是服务器端的配置,接下来是客户端的配置:
客户端需加载nbd模块:
modprobe nbd
lsmod | grep nbd
nbd 17427 3
察看nbd设备是否建立:
sushan@sushan-G31M-ES2C:/$ ls /dev/nbd* -hl
brw-rw---- 1 root disk 43, 0 12月 4 18:12 /dev/nbd0
brw-rw---- 1 root disk 43, 16 12月 4 18:55 /dev/nbd1
brw-rw---- 1 root disk 43, 160 12月 4 17:49 /dev/nbd10
brw-rw---- 1 root disk 43, 176 12月 4 17:49 /dev/nbd11
brw-rw---- 1 root disk 43, 192 12月 4 17:49 /dev/nbd12
brw-rw---- 1 root disk 43, 208 12月 4 17:49 /dev/nbd13
brw-rw---- 1 root disk 43, 224 12月 4 17:49 /dev/nbd14
brw-rw---- 1 root disk 43, 240 12月 4 17:49 /dev/nbd15
brw-rw---- 1 root disk 43, 32 12月 4 18:46 /dev/nbd2
brw-rw---- 1 root disk 43, 48 12月 4 17:49 /dev/nbd3
brw-rw---- 1 root disk 43, 64 12月 4 17:49 /dev/nbd4
brw-rw---- 1 root disk 43, 80 12月 4 17:49 /dev/nbd5
brw-rw---- 1 root disk 43, 96 12月 4 17:49 /dev/nbd6
brw-rw---- 1 root disk 43, 112 12月 4 17:49 /dev/nbd7
brw-rw---- 1 root disk 43, 128 12月 4 17:49 /dev/nbd8
brw-rw---- 1 root disk 43, 144 12月 4 17:49 /dev/nbd9
sushan@sushan-G31M-ES2C:/$
将/dev/nbd0设备与主机连接:
sushan@sushan-G31M-ES2C:/mnt$ sudo nbd-client localhost 1234 /dev/nbd0
[sudo] password for sushan:
Negotiation: ..size = 300MB
bs=1024, sz=314572800 bytes
nbd-client用法:
nbd-client [bs=blocksize] host port nbd_device [-swap]
bs 用于设置块大小,默认是1024,可以是512,1024.2048,4096
host 服务器的主机名或IP
port 服务器的监听端口
nbd_device 映射到本地的哪个nbd设备(如: /dev/nbd0)
-swap 指定nbd设备将用做swap空间
nbd-client -d nbd_device 用于断开连接
ps -ef | grep nbd //连接建立之后,可以看到nbd-client的进程如下:
root 5243 1 0 18:44 ? 00:00:00 nbd-client localhost 1234 /dev/nbd0
在使用这个设备之前,需要格式化这个设备:
sushan@sushan-G31M-ES2C:/var/tmp$ sudo mkfs.ext3 /dev/nbd0
mke2fs 1.42 (29-Nov-2011)
文件系统标签=
OS type: Linux
块大小=1024 (log=0)
分块大小=1024 (log=0)
Stride=0 blocks, Stripe width=0 blocks
76912 inodes, 307200 blocks
15360 blocks (5.00%) reserved for the super user
第一个数据块=1
Maximum filesystem blocks=67633152
38 block groups
8192 blocks per group, 8192 fragments per group
2024 inodes per group
Superblock backups stored on blocks:
8193, 24577, 40961, 57345, 73729, 204801, 221185
Allocating group tables: 完成
正在写入inode表: 完成
Creating journal (8192 blocks): 完成
Writing superblocks and filesystem accounting information: 完成
在客户端本地挂载这个设备:
mkdir /mnt/nbd0
mount /dev/nbd0 /mnt/nbd0
cd /mnt/nbd0
ls
lost+found
复制/root目录下的东东到这里来:
cp /root . -rf
ls
lost+found root
卸载这个块设备,umount /mnt/nbd0
nbd-client -d /dev/nbd0 断开连接
2.服务器端提供多个映像文件到客户端
(1)服务器端的配置:
sushan@sushan-G31M-ES2C:/var/tmp$ dd if=/dev/zero of=nbd-disk1 bs=104857600 count=3
记录了3+0 的读入
记录了3+0 的写出
314572800字节(315 MB)已复制,3.48269 秒,90.3 MB/秒
sushan@sushan-G31M-ES2C:/var/tmp$ dd if=/dev/zero of=nbd-disk2 bs=104857600 count=3
记录了3+0 的读入
记录了3+0 的写出
314572800字节(315 MB)已复制,3.81813 秒,82.4 MB/秒
sushan@sushan-G31M-ES2C:/var/tmp$ nbd-server 1234 /var/tmp/nbd-disk0
sushan@sushan-G31M-ES2C:/var/tmp$ nbd-server 1235 /var/tmp/nbd-disk1 sushan@sushan-G31M-ES2C:/var/tmp$ nbd-server 1236 /var/tmp/nbd-disk2
在服务器端查看:
ps -ef | grep nbd
root 5217 1 0 18:43 ? 00:00:00 nbd-server 1234 /var/tmp/nbd-disk0
root 5220 1 0 18:43 ? 00:00:00 nbd-server 1235 /var/tmp/nbd-disk1
root 5223 1 0 18:43 ? 00:00:00 nbd-server 1236 /var/tmp/nbd-disk2
(2)客户端的配置:
sushan@sushan-G31M-ES2C:/$ lsmod | grep nbd
nbd 17427 3
sushan@sushan-G31M-ES2C:/$ ls /dev/nbd*
/dev/nbd0 /dev/nbd10 /dev/nbd12 /dev/nbd14 /dev/nbd2 /dev/nbd4 /dev/nbd6 /dev/nbd8
/dev/nbd1 /dev/nbd11 /dev/nbd13 /dev/nbd15 /dev/nbd3 /dev/nbd5 /dev/nbd7 /dev/nbd9
sushan@sushan-G31M-ES2C:/mnt$ sudo nbd-client localhost 1234 /dev/nbd0
[sudo] password for sushan:
Negotiation: ..size = 300MB
bs=1024, sz=314572800 bytes
sushan@sushan-G31M-ES2C:/mnt$ sudo nbd-client localhost 1235 /dev/nbd1
Negotiation: ..size = 300MB
bs=1024, sz=314572800 bytes
sushan@sushan-G31M-ES2C:/mnt$ sudo nbd-client localhost 1236 /dev/nbd2
Negotiation: ..size = 300MB
bs=1024, sz=314572800 bytes
将nbd1格式化为vfat的格式:
sushan@sushan-G31M-ES2C:/mnt$ sudo mkfs.vfat /dev/nbd1
mkfs.vfat 3.0.12 (29 Oct 2011)
unable to get drive geometry, using default 255/63
将nbd2格式化为ext2的格式:
sudo mkfs.ext2 /dev/nbd2
挂在这三个设备:
mkdir nbd1 nbd2
sushan@sushan-G31M-ES2C:/mnt$ sudo mount /dev/nbd0 nbd0
sushan@sushan-G31M-ES2C:/mnt$ sudo mount /dev/nbd1 nbd1
sushan@sushan-G31M-ES2C:/mnt$ sudo mount /dev/nbd2 nbd2
sushan@sushan-G31M-ES2C:/$ df -h
文件系统 容量 已用 可用 已用% 挂载点
...
/dev/nbd0 291M 263M 14M 96% /mnt/nbd0
/dev/nbd2 291M 2.1M 274M 1% /mnt/nbd2
/dev/nbd1 300M 0 300M 0% /mnt/nbd1
sushan@sushan-G31M-ES2C:/$ mount
...
/dev/nbd0 on /mnt/nbd0 type ext3 (rw)
/dev/nbd2 on /mnt/nbd2 type ext2 (rw)
/dev/nbd1 on /mnt/nbd1 type vfat (rw)