一切皆文件: open(),read(),write(),close()
设备文件:关联至一个设备驱动程序,进而能够跟与之对应硬件设备进行通信
设备号码:
设备类型:
磁盘设备的设备文件命名
虚拟磁盘:
不同磁盘标识: a-z,aa,ab…
示例:
/dev/sda,/dev/sdb ,...
同一设备上的不同分区: 1,2,…
例:创建设备文件
[root@CentOS8 ~]#mknod /data/partation-sda1 b 8 1
[root@CentOS8 ~]#ll /data/partation-sda1
brw-r--r-- 1 root root 8, 1 Aug 1 12:41 /data/partation-sda1
[root@CentOS8 ~]#mount /data/partation-sda1 /mnt/
[root@CentOS8 ~]#ls /mnt/
config-4.18.0-348.el8.x86_64
efi
grub2
[root@CentOS8 ~]#ls /boot
config-4.18.0-348.el8.x86_64
efi
grub2
例2
[root@CentOS8 ~]#ll /dev/zero
crw-rw-rw- 1 root root 1, 5 Jul 30 14:43 /dev/zero
[root@CentOS8 ~]#mknod /data/zero c 1 5
[root@CentOS8 ~]#ll /data/zero
crw-r--r-- 1 root root 1, 5 Aug 1 12:44 /data/zero
硬盘接口类型
注意:速度不是只由接口类型决定,支持Nvme协议的速度目前最快
服务器硬盘大小
L、S分别是大、小的意思,目前服务器或者盘柜采用sff规格的硬盘主要是考内虑增大单位密度内的磁盘容量、增强散热、减小功耗
机械硬盘(HDD):Hard Disk Drive,即是传统普通硬盘,主要由:盘片,磁头,盘片转轴及控制电机,磁头控制器,数据转换器,接口,缓存等几个部分组成。
机械硬盘中所有的盘片都装在一个旋转轴上,每张盘片之间是平行的,在每个盘片的存储面上有一个磁头,磁头与盘片之间的距离比头发丝的直径还小,所有的磁头联在一个磁头控制器上,由磁头控制器负责各个磁头的运动。磁头可沿盘片的半径方向运动,加上盘片每分钟几千转的高速旋转,磁头就可以定位在盘片的指定位置上进行数据的读写操作。数据通过磁头由电磁流来改变极性方式被电磁流写到磁盘上,也可以通过相反方式读取。
硬盘为精密设备,进入硬盘的空气必须过滤
固态硬盘(SSD): Solid State Drive,用固态电子存储芯片阵列而制成的硬盘,由控制单元和存储单元(FLASH芯片、DRAM芯片)组成。
固态硬盘在接口的规范和定义、功能及使用方法上与普通硬盘的完全相同,在产品外形和尺寸上也与普通硬盘一致
相较于HDD,SSD在防震抗摔、传输速率、功耗、重量、噪音上有明显优势,SSD传输速率性能是HDD的2倍
相较于SSD,HDD在价格、容量占有绝对优势
硬盘有价,数据无价,目前SSD不能完全取代HHD
硬盘存储术语CHS
head 磁头,磁头数 = 盘面数 三个盘片,六个盘面,六个磁头
track 磁道,磁道 = 柱面数 盘面各1个0磁道
sector 扇区,固定512bytes
cvlinder 柱面 一列0磁道,即6个0磁道,为0柱面
1柱面512sector数/trackhead数=51263255=7.84M
C5之前版本Linux以柱面的整数倍划分分区,Centos 6之后可以支持以扇区划分分区
要想更快地读取机械硬盘的数据,应把数据放在低磁道,1,2…即硬盘外圈
ZBR(Zoned Bit Recording):区位记录磁盘扇区结构
CHS
LBA (logical block addressing)
由于CHS寻址方式的寻址空间在大概8GB以内,所以在磁盘容量小于大概8GB时,可以使用CHS寻址方式或是LBA寻址方式,在磁盘容量大于大概8GB时,则只能使用LBA寻址方式
[root@CentOS8 ~]#lsblk -d -o name,rota rota即旋转,1则代表机械硬盘,0固态
NAME ROTA
sda 1
sr0 1
[root@CentOS8 ~]#cat /sys/block/*/queue/rotational 同上,*代表不同的磁盘
1
1
使用磁盘空间过程
优化I/O性能
实现磁盘空间配额限制
提高修复速度
隔离系统和程序
安装多个OS
采用不同文件系统
两种:
MBR
GPT
MBR:Master Boot Record,1982年,使用32位表示扇区数,分区不超过2T=2048G
划分分区的单位:
Centos 5之前按整柱面划分
Centos 6版本后可以按Sector划分
0磁道0扇区 512bytes=446+64+2
446bytes boot loader,启动计算机
64bytes 分区表,其中每16bytes标识一个分区
2bytes 55AA
MBR分区中一块硬盘最多有4个主分区,也可以3主分区+1扩展(N个逻辑分区)
MBR分区: 主和扩展分区对应的1–4,/dev/sda3,逻辑分区从5开始,/dev/sda5
硬盘主引导记录MBR由4个部分组成:
0000-0088 | ]aster Boot Record主引导程序 | 主引导程序 |
---|---|---|
0089-01BD | 出错信息数据区 | 数据区 |
01BE-01CD | 分区项1(16字节) | 分区表 |
01CE-01DD | 分区项2(16字节) | |
01DE-01ED | 分区项3(16字节) | |
01EE-01FD | 分区项4(16字节) | |
01FE | 55 | |
0lFF | AA | 结束标志 |
主引导程序(偏移地址0000H–0088H),它负责从活动分区中装载,并运行系统引导程序
出错信息数据区,偏移地址0089H–00E1H为出错信息,00E2H–01BDH全为0字节
分区表(DPT,Disk Partition Table) 含4个分区项,偏移地址01BEH–01FDH,每个分区表项长16个字节,共64字节为分区项1、分区项2、分区项3、分区项4结束标志字,偏移地址01FE–01FF的2个字节值为结束标志55AA
MBR中DPT结构:
存贮字节位 | 内容及含义 |
---|---|
第1字节 | 引导标志。若值为80H表示活动分区,若值为00H表示非活动分区。 |
第2、3、4字节 | 本分区的起始磁头号、扇区号、柱面号。其中: 磁头号一一第2字节; 扇区号一一第3字节的低6位; 柱面号一一为第3字节高2位+第4字节8位。 |
第5字节 | 分区类型符。 00H一一表示该分区未用(即没有指定); 06H一一FAT16基本分区; OBH一一FAT32基本分区; 05H一一扩展分区; 07H-一NTFS分区; OFH–(LBA模式)扩展分区(83H为Linux分区等)。 |
第6、7、8字节 | 本分区的结束磁头号、扇区号、柱面号。其中: 磁头号一一第6字节; 扇区号一一第7字节的低6位; 柱面号一一第7字节的高2位+第8字节。 |
第9、10、11、12字节 | 本分区之前已用了的扇区数。 |
第13、14、15、16字节 | 本分区的总扇区数。 |
例:备份MBR的分区表,破坏后恢复
#备份MBR分区表
[rootacentos8~]#dd if=/dev/sda of=/data/dpt.img bs=1 count=64 skip=446
[root@centos8 ~]#scp /data/dpt.img 10.0.0.8:
#破坏MBR分区表,将分区表里446字节开始后的64个字节清空为0
[root@centos8 ~]#dd if=/dev/zero of=/dev/sda bs=1 count=64 seek=446
#无法启动
[root@centos8 ~]#reboot
#用光盘启动,进入rescue mode,选第3项skip to shell
#配置网络
[root@centos8 ~]#ifconfig ens160 10.0.0.201/24
或
[root@centos8 ~]#ip a a 10.0.0.201/24 /dev/ens160
[root@centos8 ~]#scp 10.0.0.8:/data/dpt.img
#恢复MBR分区表
[root@centos8 ~]#dd if=dpt.img of=/dev/sda bs=1 seek=446
[root@centos8 ~]#exit
ps:如果未备份,可以将分区策略相同的其他主机的分区表来恢复和还原当前主机被破坏的分区表
GPT: GUID (Globals Unique ldentifiers) partition table 支持128个分区,使用64位,支持8Z(512Bvte/block)64Z (4096Bvte/block)
使用128位UUID(Universally Unique ldentifier)表示磁盘和分区 GPT分区表自动备份在头和尾两份,并有CRC校验位
UEFI(Unified Extensible Firmware lnterface 统一可扩展固件接口)硬件支持GPT,使得操作系统可以启动
GPT分区结构分为4个区域
BIOS是固化在电脑主板上的程序,主要用于开机系统自检和引导操作系统。目前新式的电脑基本上都是UEFI启动
BIOS(Basic nput Output System 基本输入输出系统)主要完成系统硬件自检和引导操作系统,操作系统开始启动之后,BIOS的任务就完成了。
系统硬件自检:如果系统硬件有故障,主板上的扬声器就会发出长短不同的"滴滴"音,可以简单的判断硬件故障,比如“1长1短”通常表示内存故障,“1长3短”通常表示显卡故障
BIOS在1975年就诞生了,使用汇编语言编写,当初只有16位,因此只能访问1M的内存,其中前640K称为基本内存,后384K内存留给开机和各类BIOS本身使用。
BIOS只能识别到主引导记录(MBR)初始化的硬盘,最大支持2T的硬盘,4个主分区(逻辑分区中的扩展分区除外),而目前普遍实现了64位系统,
传统的BIOS已经无法满足需求了,这时英特尔主导的EFI就诞生了
EFI(Extensible Firmware nterface) 可扩展固件接口,是 Intel为PC 固件的体系结构、接口和服务提出的建议标准。
其主要目的是为了提供一组在 OS 加载之前(启动前在所有平台上一致的、正确指定的启动服务,被看做是BIOS的继任者,或者理解为新版BIOS。
UEFI是由EFI1.10为基础发展起来的,它的所有者已不再是lntel,而是一个称作Unified EFI Form的国际组织
UEFI(Unified Extensible Firmware nterface)统一的可扩展固件接口,是一种详细描术类型接口的标准。UEFI相当于一个轻量化的操作系统,
提供了硬件和操作系统之间的一个接口,提供了图形化的操作界面。最关键的是引入了GPT分区表,支持2T以上的硬盘,硬盘分区不受限制
BIOS和UEFI区别:
BIOS采用了16位汇编语言编写,只能运行在实模式(内存寻址方式由16位段寄存器的内容乘以16(10H)当做段基地址,加上16位偏移地址形成20位的物理地址)下,
可访问的内存空间为1MB,只支持字符操作界面UEFI采用32位或者64位的C语言编写,突破了实模式的限制,可以达到最大的寻址空间,
支持图形操作界面,使用文件方式保存信息,支持GPT分区启动,适合和较新的系统和硬件的配合使用
BIOS+MBR与UEFI+GPT
列出块设备
lsblk
创建分区命令
fdisk 管理MBR分区
gdisk 管理GPT分区
parted 高级分区操作,可以是交互或非交互式方式
重新设置内存中的内核分区表版本(即同步内存和硬盘中的分区表,C5/7/8均支持,除了C6)
partprobe
对于C6,强行同步内存和硬盘的分区表(以sda硬盘为例,且是增加分区后,非删除分区)
partx -a /dev/sda
强行同步内存和硬盘的分区表(以sda硬盘的sda6,sda7,sda8为例,且删除分区)
partx -d --nr 6-8 /dev/sda
格式:
panted [选项]... [设备 [命令 [参数]...]...]
注意parted的操作实时生效,小心使用
范例:
parted /dev/sdb mklabel gpt|msdos 修改分区类型
parted /dev/sdb print
parted /dev/sdb mkpart primary 1 200(默认M) 创建新的分区
parted /dev/sdb rm 1 删除分区1
parted -l 列出所有硬盘分区信息
不会立即生效
gdisk [device...] 类fdisk的GPT分区工具
fdisk -l[-u][device...] 查看分区
fdisk [device...] 管理MBR分区
子命令:
- p 分区列表
- t 更改分区类型,然后使用L可以查看所有的分区类型
- n 创建新分区
- d 删除分区
- v 校验分区
- u 转换单位
- w 保存并退出
- q 不保存并退出
查看内核是否已经识别新的分区
fdisk -l 查看硬盘上的
lsblk 查看内存上的
cat /proc/partitions 内存上的
C6 通知内核重新读取硬盘分区表:
partx -a /dev/sda (以sda硬盘为例,且是增加分区后,非删除分区)
或kpartx -a /dev/sda -f: force
partx -d --nr 6-8 /dev/sda (以sda硬盘的sda6,sda7,sda8为例,且删除分区)
范例:非交互式创建分区,创建一个2G的分区
echo -e 'n\np\n\n\n+2G\nw\n' | fdisk /dev/sdc
文件系统是操作系统用于明确存储设备或分区上的文件的方法和数据结构;即在存储设备上组织文件的方法。
操作系统中负责管理和存储文件信息的软件结构称为文件管理系统,简称文件系统
从系统角度来看,文件系统是对文件存储设备的空间进行组织和分配,负责文件存储并对存入的文件进行保护和检索的系统。
具体地说,它负责为用户建立文件,存入、读出、修改、转储文件,控制文件的存取,安全控制,日志,压缩,加密等
查看支持的文件系统:
[root@CentOS8 ~]#ls /lib/modules/`uname -r`/kernel/fs
binfmt_misc.ko.xz cifs ext4 fuse jbd2 nfs nls squashfs
cachefiles cramfs fat gfs2 lockd nfs_common overlayfs udf
ceph dlm fscache isofs mbcache.ko.xz nfsd pstore xfs
各种文件系统: https://en.wikipedia.org/wiki/Comparison_of_file_systems
帮助: man 5fs
Linux常用文件系统
Windows常用文件系统
Unix:
网络文件系统:
集群文件系统:
分布式文件系统
RAW:
未经处理或者未经格式化产生的文件系统
常用的文件系统特性:
FAT32
最多只能支持16TB的文件系统和4GB的文件
NTFS
最多只能支持16EB的文件系统和16EB的文件
EXT3
EXT4:
XFS
查前支持的文件系统:
cat /proc/filesystems
内核中的模块:ext4xfs,vfat
Linux的虚拟文件系统:VFS(virtual file system)
用户空间的管理工具:mkfs.ext4,mkfs.xfs,mkfs.vfat
创建文件管理工具
mkfs命令
(1) mkfs.FS_TYPE /dev/DEVICE
TYPE:
ext4
xfs
btrfs
vfat
(2) mkfs -t FS_TYPE /dev/DEVICE
-L 'LABEL' 设定卷标
mke2fs:ext系列文件系统专用管理工具
常用选项:(tune2fs也可以使用)
-t {ext2|ext3|ext4|xfs} 指定文件系统类型
-b {1024|2048|4096|1K} 指定块 block 大小
-L 'LABEL' 设置卷标
-j 相当于 -t ext3,mkfs.ext3 = mkfs -t ext3 = mke2fs j= mke2fs -t ext3
-i # 为数据空间中每多少个字节创建一个inode;不应该小于block大小
-N # 指定分区中创建多少个inode
-l 一个inode记录占用的磁盘空间大小,128---4096
-m # 默认5%,为管理人员预留空间占总空间的百分比
-O FEATURE[,...] 启用指定特性
-O ^FEATURE 关闭指定特性
格式:
blkid [OPTION]...[DEVICE]
常用选项:
-U UUID 根据指定的UUID来查找对应的设备
-L LABEL 根据指定的LABEL来查找对应的设备
e2label:管理ext系列文件系统的LABEL
e2Tabel DEVICE [LABEL]
findfs:查找分区
findfs [options] LABEL=<label>
findfs [options] UUID=<uuid>
tune2fs:重新设定ext系列文件系统可调整参数的值
-I 查看指定文件系统超级块信息;super block
-L 'LABEL' 修改卷标
-m # 预留给管理员的空间百分比reserved
-j 将ext2升级为ext3
-O 文件系统属性启用或禁用-O ^has_journal
-o 调整文件系统的默认挂载选项,-o/ac
-U UUID 修改UUID号
dumpe2fs:显示ext文件系统信息,将磁盘块分组管理
-h:查看超级块信息,不显示分组信息
xfsinfo:显示挂载或已挂载的xfs文件系统信息
xfs_info mountpoint|devname
块组描述符表(GDT)
ext文件系统每一个块组信息使用32字节描述,这32个字节称为块组描述符,所有块组的块组描术符组成块组描术符表GDT(group descriptor table)。
虽然每个块组都需要块组描述符来记录块组的信息和属性元数据,但是不是每个块组中都存放了块组描述符。
将所有块组的块组信息组成一个GDT保存并将该GDT存放于某些块组中,类似存放superblock和备份superblock的块
例:
[root@CentOS8 ~]#xfs_info /dev/sda3 查看xfs文件系统的数据
meta-data=/dev/sda3 isize=512 agcount=4, agsize=3276800 blks
= sectsz=512 attr=2, projid32bit=1
= crc=1 finobt=1, sparse=1, rmapbt=0
= reflink=1
data = bsize=4096 blocks=13107200, imaxpct=25
= sunit=0 swidth=0 blks
naming =version 2 bsize=4096 ascii-ci=0, ftype=1
log =internal log bsize=4096 blocks=6400, version=2
= sectsz=512 sunit=0 blks, lazy-count=1
realtime =none extsz=4096 blocks=0, rtextents=0
[root@CentOS8 ~]#dumpe2fs /dev/sda1 查看ext文件系统信息
dumpe2fs 1.45.6 (20-Mar-2020)
Filesystem volume name: <none>
Last mounted on: /boot
Filesystem UUID: 54ead45a-7577-4b54-9de2-501aef04207a
Filesystem magic number: 0xEF53
Filesystem revision #: 1 (dynamic)
Filesystem features: has_journal ext_attr resize_inode dir_index filetype needs_recovery extent 64bit flex_bg sparse_super large_file huge_file dir_nlink extra_isize metadata_csum
Filesystem flags: signed_directory_hash
Default mount options: user_xattr acl
Filesystem state: clean
Errors behavior: Continue
Filesystem OS type: Linux
Inode count: 65536
Block count: 262144
Reserved block count: 13107 预留块数量,默认是5%,创建时可以指定
Free blocks: 201341
Free inodes: 65219
First block: 0
Block size: 4096
Fragment size: 4096
Group descriptor size: 64
Reserved GDT blocks: 127
Blocks per group: 32768
Fragments per group: 32768
Inodes per group: 8192
Inode blocks per group: 512
Flex block group size: 16
Filesystem created: Tue May 30 23:28:40 2023
Last mount time: Tue Aug 1 12:59:56 2023
Last write time: Tue Aug 1 12:59:56 2023
Mount count: 26
Maximum mount count: -1
Last checked: Tue May 30 23:28:40 2023
Check interval: 0 (<none>)
Lifetime writes: 363 MB
Reserved blocks uid: 0 (user root)
Reserved blocks gid: 0 (group root)
First inode: 11
Inode size: 256
Required extra isize: 32
Desired extra isize: 32
Journal inode: 8
Default directory hash: half_md4
Directory Hash Seed: ddab75df-d9e9-4a68-87fd-de316f1c554c
Journal backup: inode blocks
Checksum type: crc32c
Checksum: 0xb2b01099
Journal features: journal_incompat_revoke journal_64bit journal_checksum_v3
Journal size: 32M
Journal length: 8192
Journal sequence: 0x000001aa
Journal start: 0
Journal checksum type: crc32c
Journal checksum: 0x8efdc7e4
Group 0: (Blocks 0-32767) csum 0x7c0c [ITABLE_ZEROED]
Primary superblock at 0, Group descriptors at 1-1
Reserved GDT blocks at 2-128
Block bitmap at 129 (+129), csum 0x0f6fb285
Inode bitmap at 137 (+137), csum 0xc57429e2
Inode table at 145-656 (+145)
28511 free blocks, 7877 free inodes, 8 directories, 7874 unused inodes
Free blocks: 4257-32767
Free inodes: 312, 317-8192
Group 1: (Blocks 32768-65535) csum 0x97c8 [ITABLE_ZEROED]
Backup superblock at 32768, Group descriptors at 32769-32769
Reserved GDT blocks at 32770-32896
Block bitmap at 130 (bg #0 + 130), csum 0xedd9dd9d
Inode bitmap at 138 (bg #0 + 138), csum 0x262496e3
Inode table at 657-1168 (bg #0 + 657)
13514 free blocks, 8190 free inodes, 2 directories, 8189 unused inodes
Free blocks: 34446-34705, 34709-34815, 36864-37887, 37889-38911, 38914-49151, 51660-51711, 52042-52223, 52611-52735, 52745-53247
Free inodes: 8195-16384
Group 2: (Blocks 65536-98303) csum 0x53c2 [INODE_UNINIT, ITABLE_ZEROED]
Block bitmap at 131 (bg #0 + 131), csum 0xf08f643a
Inode bitmap at 139 (bg #0 + 139), csum 0x00000000
Inode table at 1169-1680 (bg #0 + 1169)
14554 free blocks, 8192 free inodes, 0 directories, 8192 unused inodes
Free blocks: 80990-80991, 81017-81407, 81920-94495, 94518-94527, 94567-94719, 94834-96255
Free inodes: 16385-24576
Group 3: (Blocks 98304-131071) csum 0x2057 [INODE_UNINIT, ITABLE_ZEROED]
Backup superblock at 98304, Group descriptors at 98305-98305
Reserved GDT blocks at 98306-98432
Block bitmap at 132 (bg #0 + 132), csum 0x8667e55b
Inode bitmap at 140 (bg #0 + 140), csum 0x00000000
Inode table at 1681-2192 (bg #0 + 1681)
22140 free blocks, 8192 free inodes, 0 directories, 8192 unused inodes
Free blocks: 98433-100351, 110851-131071
Free inodes: 24577-32768
Group 4: (Blocks 131072-163839) csum 0xa83b [INODE_UNINIT, ITABLE_ZEROED]
Block bitmap at 133 (bg #0 + 133), csum 0x1cf11b2d
Inode bitmap at 141 (bg #0 + 141), csum 0x00000000
Inode table at 2193-2704 (bg #0 + 2193)
24576 free blocks, 8192 free inodes, 0 directories, 8192 unused inodes
Free blocks: 139264-163839
Free inodes: 32769-40960
Group 5: (Blocks 163840-196607) csum 0xf707 [INODE_UNINIT, ITABLE_ZEROED]
Backup superblock at 163840, Group descriptors at 163841-163841
Reserved GDT blocks at 163842-163968
Block bitmap at 134 (bg #0 + 134), csum 0x07eabc99
Inode bitmap at 142 (bg #0 + 142), csum 0x00000000
Inode table at 2705-3216 (bg #0 + 2705)
32639 free blocks, 8192 free inodes, 0 directories, 8192 unused inodes
Free blocks: 163969-196607
Free inodes: 40961-49152
Group 6: (Blocks 196608-229375) csum 0xda29 [INODE_UNINIT, ITABLE_ZEROED]
Block bitmap at 135 (bg #0 + 135), csum 0x14dbff1e
Inode bitmap at 143 (bg #0 + 143), csum 0x00000000
Inode table at 3217-3728 (bg #0 + 3217)
32768 free blocks, 8192 free inodes, 0 directories, 8192 unused inodes
Free blocks: 196608-229375
Free inodes: 49153-57344
Group 7: (Blocks 229376-262143) csum 0xcf6b [INODE_UNINIT, ITABLE_ZEROED]
Backup superblock at 229376, Group descriptors at 229377-229377
Reserved GDT blocks at 229378-229504
Block bitmap at 136 (bg #0 + 136), csum 0x07eabc99
Inode bitmap at 144 (bg #0 + 144), csum 0x00000000
Inode table at 3729-4240 (bg #0 + 3729)
32639 free blocks, 8192 free inodes, 0 directories, 8192 unused inodes
Free blocks: 229505-262143
Free inodes: 57345-65536
文件系统夹故障常发生于死机或者非正常关机之后,挂载为文件系统标记为“noclean”
注意:一定不要在挂载状态下执行下面命令修复
fsck: File System Check
fsck.FS_TYPE
fsck -t FS_TYPE
注意:FS_TYPE一定要与分区上已经文件类型相同
常用选项:
-a 自动修复
-r 交互式修复错误
e2fsck ext系列文件专用的检测修复工具:
-y 自动回答为yes
-f 强制修复
-p 自动进行安全的修复文件系统问题
xfs_repair xfs文件系统专用检测修复工具
常用选项:
-f 修复文件,而设备
-n 只检查
-d 允许修复只读的挂载设备,在单用户下修复/时使用,然后立即reboot
挂载:将额外文件系统与根文件系统某现存的目录建立起关联关系,进而使得此目录做为其它文件访问入口的行为
卸载:为解除此关联关系的过程
把设备关联挂载点:mount Point
挂载点下原有文件在挂载完成后会被临时隐藏,因此,挂载点目录一般为空
进程正在使用中的设备无法被卸载
格式:
mount [-fnrsvw] [-t vfstype] [-o options] device mountpoint
device:指明要挂载的设备
设备文件 例如:/dev/sda5
卷标 -L 'LABEL' 例如mount LABEL=test mountpoint
UUID -U 'UUID' 例如-U 0c50523C-43f1-45e7-85c0-a126711d406e
伪文件系统名称: proc,sysfs,devtmpfs,configfs
mountpoint:挂载点目录必须事先存在,建议使用空目录
mount常用命令选项:
-t vsftype 指定要挂载的设备上的文件系统类型
-r readonly,只读挂载
-w read and write,读写挂载,默认就是,一般不写
-n 不更新/etc/mtab,mount不可见
-a 自动挂载所有支持自动挂载的设备(定义在了/etc/fstab文件中,且挂载选项中有auto功能)
-L 'LABEL' 以卷标指定挂载设备
-U 'UUID' 以UUID指定要挂载的设备
-B,--bind 绑定目录到另一个目录上
-o options:(挂载文件系统的选项),多个选项使用逗号分隔
async 异步模式,内存更改时,写入缓存区buffer,过一段时间再写到磁盘中,效率高但不安全
sync 同步模式,内存更改时,同时写磁盘,安全但效率低
atime/noatime 包含目录和文件,noatime使文件被访问或修改时不再修改atime,可以减少磁盘IO,提升性能
diratime/nodiratime 目录的访问时间戳
auto/noauto 是否支持开机自动挂载,是否支持-a选项
exec/noexec 是否支持将文件系统上运行应用程序
dev/nodev 是否支持在此文件系统上使用设备文件
suid/nosuid 是否支持suid和sgid权限
remount 重新挂载
ro只读 rw读写
user/nouser 是否允许普通用户挂载此设备,/etc/fstab使用
acl/noacl 启用或关闭此文件系统上的acl功能
loop 使用loop设备,回环,将文件挂载
_netdev 当网络可用时才对网络资源进行挂载,如:NFS文件系统
defaults 默认值,相当于rw,suid,dev,exec,auto,nouser,async
例:
mount -o remount,rw /dev/sdb2 重新以rw方式挂载sdb2
挂载规则:
卸载时:可使用设备,也可以使用挂载点
umount 设备名|挂载点
查看挂载:
#通过查看/etc/mtab 文件显示当前已挂载的所有设备
mount
#查看内核追踪到的已挂载的所有设备
cat /proc/mounts
查看挂载点情况,是返回0
findmnt MOUNT_POINT|device
查看正在访问指定文件系统的进程
lsof MOUNT_POINT
fuser -V MOUNT_POINT
终止所有在正访问指定的文件系统的进程
fuser -km MOUNT_POINT
注意:以上挂载均为临时挂载,重启设备后恢复
将挂载保存到 /etc/fstab 中可以下次开机时,自动启用挂载
/etc/fstab格式帮助:
man 5 fstab
每行定义一个要挂载的文件系统,其中包括共 6 项:
设备文件
LABEL: LABEL="
UUID: UUID="
伪文件系统名称: proc,sysfs
挂载点 必须是事先存在的目录
文件系统类型 ext4,xfs,iso9660,nfs,none
挂载选项 defaults,acl,bind
转储频率 0:不做备份 1: 每天转储 2: 每隔一天转储
fsck检查的文件系统的顺序 允许的数字是0 1 2,0: 不自检,1: 首先自检;一般只有rootfs才用 2: 非rootfs使用
添加新的挂载项,需要执行下面命令生效
mount -a
范例: C8/C7 /etc/fstab 的分区UUID错误,无法启动
自动进入emergency mode,输入root 密码
#vim /etc/fstab 直接将错误的UUID行#注释。因为第六项是否为0都无法忽略错误,都无法启动
#reboot 后修改UUID
范例: centos6 /etc/fstab 的分区UUID错误,无法启动
如果/etc/fatab 的挂载设备出错,比如文件系统故障,并且文件系统检测项(即第6项为非0),将导致无法启动
自动进入emergency mode 输入root 密码
#cat /proc/mounts 可以查看到/ 以ro方式挂载,无法直接修改配置文件
#mount -o remount .rw
#vim /etc/fstab
将故障行的最后1项,即第6项修改为0,开机不检测此项挂载设备的健康性,从而忽略错误,能实现启动 | 或将错误的UUID行#注释
启动后将UUID修改为真实的UUID即可
挂载文件时,C7/C8在fstab里不能写UUID,因为文件太多UUID无法找到,而要写文件名才能挂。且C6要加 -o loop 才能挂上文件
fstab:
/filename /mountpoint type defaults 0 0
C6:
/filename /mountpoint type loop 0 0
挂载目录时,在fstab里文件类型要写none,选项写bind
fstab:
/dirname /mountpoint none bind 0 0
swap交换分区是系统RAM的补充,swap 分区支持虚拟内存。当没有足够的 RAM 保存系统处理的数据时会将数据写入 swap 分区,当系统缺乏 swap 空间时,
内核会因 RAM 内存耗尽而终止进程。配置过多 swap 空间会造成存储设备处于分配状态但闲置,造成浪费,过多 swap 空间还会掩盖内存泄露
注意:为优化性能,可以将swap 分布存放,或高性能磁盘存放
官方推荐推荐系统 swap 空间
https://accessredhat.com/documentation/zh-cn/red_hat_enterprise_linux/7/html/installation_guide/sect-disk-partitioning-setup-ppc#sect-recommended-partitioning-scheme-ppc
系统中的 RAM 量 | 推荐的 swap 空间 | 允许休眠的建议 swap 空间大小 |
---|---|---|
低于 2 GB | RAM 量的2倍数 | RAM 容量的三倍 |
2 GB 8 GB | 等于 RAM 量 | RAM 量的倍数 |
8 GB - 64 GB | 4 GB 到 RAM 容量的 0.5 倍 | RAM 容量的 1.5 倍 |
超过 64 GB | 独立负载 (至少 4GB) | 不建议使用休眠功能 |
缓冲区:buffer | buffer cache | write cache
缓存:cache | read cache
创建swap文件系统
mkswap [DEVICE]
启用swap分区 on
swapon [OPTION]... [DEVICE]
选项:
-a:激活所有的交换分区
-p PRIORITY: 指定优先级,也可在/etc/fstab 在第4列指定: pri=value
范例:创建swap分区
禁用swap分区 off
swapoff [OPTION]... [DEVICE]
范例:禁用swap分区
[root@centos8 ~]#sed -i.bak '/swap/d' /etc/fstab
[root@centos8 ~]#swapoff -a
Priorty:SWAP的优先级
可以指定swap分区0到32767的优先级,值越大优先级越高
如果用户没有指定,那么核心会自动给swap指定一个优先级,这个优先级从-1开始,每加入一个新的没有用户指定优先级的swap,会给这个优先级减一
先添加的swap的缺省优先级比较高,除非用户自己指定一个优先级,而用户指定的优先级(是正数)永远高于核心缺省指定的优先级(是负数)
/proc/sys/vm/swappiness 的值决定了当内存占用达到一定的百分比时,会启用swap分区的空间
范例:
[root@centos8 ~]#cat /proc/sys/vm/swappiness
30
说明: 内存在使用到100-30=70%的时候,就开始出现有交换分区的使用。简单地说这个参数定义了系统对swap的使用倾向,默认值为30,值越大表示越倾向于使用swap。可以设为0,这样做并不会禁止对swap的使用,只是最大限度地降低了使用swap的可能性
修改swappiness的值
[root@CentOS8 ~]#echo 0 > /proc/sys/vm/swappiness
[root@CentOS8 ~]#cat /proc/sys/vm/swappiness
0
挂载意味着使外来的文件系统看起来如同是主目录树的一部分,所有移动介质也需要挂载,挂载点通常在/media或/mnt下
访问前,介质必须被挂载
摘除时,介质必须被卸载
按照默认设置,非根用户只能挂载某些设备(光盘、DVD、软盘、USB等等)
在图形环境下自动启动挂载/run/media//
手工挂载
mount /dev/cdrom /mnt
DEVICE mountpoint
[root@CentOS8 ~]#ll /dev/cdrom
lrwxrwxrwx 1 root root 3 Aug 1 12:59 /dev/cdrom -> sr0
操作光盘
eject 弹出光盘
eject -t 弹入光盘
创建ISO文件(相当于打包,并不压缩)
cp /dev/cdrom /root/centos.iso 将cdrom光盘内容制作为iso文件
mkisofs -r -o /root/etc.iso /etc
刻录光盘
wodim -v -eject centos.iso
查看USB设备是否识别,来源于usbutils包
1susb
被内核探测为SCSI设备
/dev/sdaX、/dev/sdbX或类似的设备文件
在图形环境中自动挂载在/run/media/<user>/<label>
手动挂载
mount /dev/sdX# /mnt
范例:格式化U盘为FAT32文件系统
[root@centos8 ~]#dnf -y instal1 dosfstools
[root@centos8 ~]#mkfs.vfat /dev/sdd1
mkfs.fat 4.1 (2017-01-24)
[root@centos8 ~]#mount /dev/sdd1 /mnt
df [OPTION]...[FILE]...
常用选项
-H 以10为单位,10的多少次方
-T 文件系统类型
-h human-readable,以2为单位,2的多少次方
-i inodes instead of blocks,inode节点
-P 以Posix兼容的格式输出,格式整齐
例:显示文件系统类型等
[root@CentOS8 ~]#df -T
Filesystem Type 1K-blocks Used Available Use% Mounted on
devtmpfs devtmpfs 970012 0 970012 0% /dev
tmpfs tmpfs 998404 0 998404 0% /dev/shm
tmpfs tmpfs 998404 9256 989148 1% /run
tmpfs tmpfs 998404 0 998404 0% /sys/fs/cgroup
/dev/sda2 xfs 104806400 21520536 83285864 21% /
/dev/sda3 xfs 52403200 398544 52004656 1% /data
/dev/sda1 ext4 999320 193956 736552 21% /boot
tmpfs tmpfs 199680 0 199680 0% /run/user/0
[root@CentOS8 ~]#lsblk -f
NAME FSTYPE LABEL UUID MOUNTPOINT
sda
├─sda1 ext4 54ead45a-7577-4b54-9de2-501aef04207a /boot
├─sda2 xfs f2c173be-7848-43e9-9d0b-da0f1841f93f /
├─sda3 xfs 499afcaa-85a4-4b87-9223-20497b0bcf94 /data
├─sda4
└─sda5 swap 80ee59c8-b184-4f49-9039-5150257143b8 [SWAP]
sr0 iso9660 CentOS-8-5-2111-x86_64-dvd 2021-11-13-01-04-26-00
du [OPTION]... DIR
常用选项
-h human-readable
-s summary
--max-depth=# 指定最大目录层级
dd 命令: convert and copy a file
格式:
dd if=/PATH/FROM/SRC of=/PATH/TO/DEST bs=# count=#
常用选项
if=file 从所命名文件读取而不是从标准输入
of=file 写到所命名的文件而不是到标准输出
ibs=size 一次读size个byte
obs=size 一次写size个byte
bs=size block size,指定块大小(既是是ibs也是obs)
cbs=size 一次转化size个byte
skip=b1ocks 从开头忽略b1ocks个ibs大小的块
seek=b1ocks 从开头忽略b1ocks个obs大小的块
count=n 复制n个bs
conv=conversion[,conversion...] 用指定的参数转换文件
conversion 转换参数:
ascii 转换 EBCDIC 为 ASCII
ebcdic 转换 ASCII 为 EBCDIC
lcase 把大写字符转换为小写字符
ucase 把小写字符转换为大写字符
nocreat 不创建输出文件
noerror 出错时不停止
notrunc 不截短输出文件
sync 把每个输入块填充到ibs个字节,不足部分用空(NUL)字符补文
fdatasync 写完成前,物理写入输出文件
例:
#备份MBR
dd if=/dev/sda of=/tmp/mbr.bak bs=512 count=1
#破坏MBR中的bootoader
dd if=/dev/zero of=/dev/sda bs=64 count=1 seek=446
#有一个大与2K的二进制文件fileA。现在想从第64个字节位置开始读取,需要读取的大小是128Byts。
又有fileB,想把上面读取到的128Bytes写到第32个字节开始的位置,替换128Bytes,实现如下
dd if=fileA of=fileB bs=1 count=128 skip=63 seek=31 conv=notrunc
#将本地的/dev/sdx整盘备份到/dev/sdy
dd if=/dev/sdx of=/dev/sdy
#将/dev/sdx全盘数据备份到指定路径的image文件
dd if=/dev/sdx of=/path/to/image
#备份/dev/sdx全盘数据,并利用gzip压缩,保存到指定路径
dd if=/dev/sdx | gzip >/path/to/image.gz
#将备份文件恢复到指定盘
dd if=/path/to/image of=/dev/sdx
#将压缩的备份文件恢复到指定盘
gzip -dc /path/to/image.gz | dd of=/dev/sdx
#将内存里的数据拷贝到root目录下的mem.bin文件
dd if=/dev/mem of=/root/mem.bin bs=1024
#拷贝光盘数据到root文件夹下,并保存为cdrom.iso文件
dd if=/dev/cdrom of=/root/cdrom.iso
#销毁磁盘数据
dd if=/dev/urandom of=/dev/sdal
#通过比较dd指令输出中命令的执行时间,即可确定系统最佳的b1ock size大小
dd if=/dev/zero of=/root/1Gb.file bs=1024 count=1000000
dd if=/dev/zero of=/root/1Gb.file bs=2048 count=500000
dd if=/dev/zero of=/root/1Gb.file bs=4096 count=250000
#测试硬盘写速度
dd if=/dev/zero of=/root/1Gb.file bs=1024 count=1000000
#测试硬盘读速度
dd if=/root/1Gb.file bs=64k | dd of=/dev/null
RAID: Redundant Arrays of lnexpensive (lndependent) Disks 廉价磁盘冗余阵列,现称独立磁盘冗余阵列
1988年由加利福尼亚大学伯克利分校 (University of California-Berkeley)“A Case for Redundant Arrays of expensive Disks”多个磁盘合成一个“阵列”来提供更好的性能、几余,或者两者都提供
RAID功能实现
RAID实现的方式
级别:多块磁盘组织在一起的工作方式有所不同
RAID-0:条带卷,strip
RAID-1:镜像卷,mirror
RAID-2
…
RAID-5
RAID-6
RAID-10
RAID-01
RAID级别
以chunk为单位,读写数据
读、写性能提升
可用空间:N*min(S1,S2,…)
无容错能力
最少磁盘数: 2,2+
利用率:能达到100%
读性能提升、写性能略有下降
可用空间:1*min(S1,S2,…)
有冗余能力
最少磁盘数: 2,2N
利用率:能达到50%
多块数据盘异或运算值存于专用校验盘
磁盘利用率(N-1)/N
有冗余能力: 允许最多1块磁盘损坏
至少3块硬盘才可以实现
读、写性能提升
可用空间:(N-1)*min(S1,S2,…)
有容错能力: 允许最多1块磁盘损坏
最少磁盘数: 3,3+
读、写性能提升
可用空间:(N-2)*min(S1,S2,…)
有容错能力:允许最多2块磁盘损坏
最少磁盘数: 4,4+
多块磁盘先实现RAID1,再组合成RAID0
读、写性能提升
可用空间: N*min(S1,S2,…)/2
有容错能力: 每组镜像最多只能坏一块
最少磁盘数: 4,4+
利用率:50%
容错性大于01
多块磁盘先实现RAID0,再组合成RAID1
利用率:50%
多块磁盘先实现RAID5,再组合成RAID0
JBOD: Just a Bunch Of Disks
功能:将多块磁盘的空间合并一个大的连续空间使用
可用空间: sum(S1,S2…)
RAID7
可以理解为一个独立存储计算机,自身带有操作系统和管理工具,可以独立运行,理论上性能最高的RAID模式
常用级别:
RAID-0,RAID-1,RAID-5,RAID-10,RAID-50,JBOD
mdadm工具: 为软RAID提供管理界面,为空余磁盘添加几余,结合内核中的md(multi devices)
RAID设备可命名为/dev/md0、/dev/md1、/dev/md2、/dev/md3等
mdadm:模式化的工具,支持的RAID级别: LINEAR,RAIDO,RAID1,RAID4,RAID5,RAID6,RAID10
命令的语法格式:
mdadm [mode] <raiddevice> [options] <component-devices>
常用选项说明:
模式:
创建:-C
装配:-A
监控:-F
管理: -f,-r,-a
<raiddevice>: /dev/md#
<component-devices>: 任意块设备
创建模式
-n #: 使用#个块设备来创建此RAID
-l #: 指明要创建的RAID的级别
-a {yes|no} 自动创建目标RAID设备的设备文
-C CHUNK_SIZE 指明块大小,单位k
-x #: 指明空闲盘的个数
-D:显示raid的详细信息
mdadm -D /dev/md#
管理模式:
-f:标记指定磁盘为损坏
-a:添加磁盘
-r:移除磁盘
观察md的状态:
cat /proc/mdstat
范例:
#使用mdadm创建并定义RAID设备
mdadm -C /dev/md0 -a yes -1 5 -n 3 -x 1 /dev/sd{b,c,d,e}1
#用文件系统对每个RAID设备进行格式化
mkfs .xfs /dev/md0
#使用mdadm检查RAID设备的状况
mdadm --detail|D /dev/md0
#增加新的成员
mdadm -G /dev/md0 -n4 -a /dev/sdf1
#模拟磁盘故障
mdadm /dev/md0 -f /dev/sda1
#移除磁盘
mdadm /dev/md0 -r /dev/sda1
#在备用驱动器上重建分区
mdadm /dev/md0 -a /dev/sdal
#系统日志信息
cat /proc/mdstat
生成配置文件
mdadm -D -s >> /etc/mdadm.conf
停止设备
mdadm -s /dev/md0
激活设备:
mdadm -A -s /dev/md0
强制启动:
mdadm -R /dev/md0
删除raid信息
mdadm --zero-superblock /dev/sdb1
LVM: Logical Volume Manager 可以允许对卷进行方便操作的抽象层,包括重新设定文件系统的大小,允许在多个物理设备间重新组织文件系统
LVM可以弹性的更改LVM的容量
通过交换PE来进行资料的转换,将原来LV内的PE转移到其他的设备中以降低LV的容量,或将其他设备中的PE加到LV中以加大容量
实现过程
第一个逻辑卷对应设备名:/dev/dm-#
dm: device mapper,将一个或多个底层块设备组织成一个逻辑设备的模块
dm不便记忆与分辨,可以使用软链接:
/dev/mapper/VG_NAME-LV_NAME
/dev/VG_NAME/LV_NAME
范例
/dev/mapper/vol0-root
/dev/vol0/root
显示pv信息
pvs: 简要pv信息显示
pvdisplay
创建pv
pvcreate /dev/DEVICE
删除pv
pvmove /dev/sdb1 将sdb1里使用的PE转移到同卷组VG下其他物理卷PV,释放sdb1的PE
显示vg信息
vgs: 简要pv信息显示
vgdisplay
创建卷组
vgcreate [-s #[kKmMgGtTpPeE]] VolumeGroupName PhysicalDevicePath [physicalDevicePath...]
管理卷组
vgextend VolumeGroupName PhysicalDevicePath [physicalDevicePath...]
vgreduce VolumegroupName PhysicalDevicePath [physicalDevicePath...]
删除卷组
先做pvmove
再做vgremove
显示逻辑卷
lvs
Lvdisplay
创建逻辑卷
lvcreate -L #[mMgGtT] -n NAME VolumeGroup
范例:
lvcreate -l 60%VG -n mylv testvg 取卷组中的60%制作为逻辑卷
lvcreate -l 100%FREE -n yourlv testvg 取卷组中剩余空间的60%制作逻辑卷
删除逻辑卷
lvremove /dev/VG_NAME/LV_NAME
重设文件系统大小
fsadm [options] resize device [new_size[BKMGTEP]]
resize2fs [-f] [-F] [-M] [-P] [-p] device [new_size]
xfs_growfs /mountpoint
lvextend -L [+]#[mMgGtT] /dev/VG_NAME/LV_NAME
#针对ext
resize2fs /dev/VG_NAME/LV_NAME
#针对xfs
xfs_growfs MOUNTPOINT
lvresize -r -l +100%FREE /dev/VG_NAME/LV_NAME
缩减数据有风险损坏,建议提前备份
umount /dev/VG_NAME/LV_NAME 取消挂载
e2fsck -f /dev/VG_NAME/LV_NAME 或 fsck -f /dev/VG_NAME/LV_NAME 检查文件系统完整性
resize2fs /dev/VG_NAME/LV_NAME #[mMgGtT] 缩减文件系统
lvreduce -L [-]#[mMggtT] /dev/VG_NAME/LV_NAME 缩减逻辑卷
mount 重新挂载
注意:xfs文件系统不支持缩减
源计算机上
1在旧系统中,umount所有卷组上的逻辑卷
2禁用卷组
vgchange -a n vg0
lvdisplay
3导出卷组
vgexport vg0
pvscan
vgdisplay
4拆下旧硬盘在目标计算机上,并导入卷组
vgimport vg0
5启用
vgchange -ay vg0
6mount所有卷组的逻辑卷
特点:
快照是特殊的逻辑卷,它是在生成快照时存在的逻辑卷的准确拷贝,对于需要备份或者复制的现有数据临时拷贝以及其它操作来说,快照是最合适的选择,快照只有在它们和原来的逻辑卷不同时才会消耗空间,建立快照的卷大小小于等于原始逻辑卷也可以使用lvextend扩展快照
逻辑卷管理器快照
快照就是将当时的系统信息记录下来,就好像照相一般,若将来有任何数据改动了,则原始数据会被移动到快照区,没有改动的区域则由快照区和文件系统共享
逻辑卷快照工作原理
由于快照区与原本的LV共用很多PE的区块,因此快照与被快照的LV必须在同一个VG中.系统恢复的时候的文件数量不能高于快照区的实际容量
范例:
mkfs.xfs /dev/vg0/data
mount /dev/vg0/data/ /mnt/data
#为现有逻辑卷创建快照
lvcreate -l 64 -s -n data-snapshot -p r /dev/vg0/data
#挂载快照
mkdir -p /mnt/snap
mount -o ro /dev/vg0/data-snapshot /mnt/snap
#恢复快照
umount /dev/vg0/data-snapshot 取消挂载
umount /dev/vg0/data
lvconvert --merge /dev/vg0/data-snapshot
#删除快照
umount /mnt/databackup
lvremove /dev/vg0/databackup
vgreduce vg0 /dev/sdb1 从vg0卷组里删掉sdb1