8.文件查找及压缩

文件查找及压缩

1. 文件查找

1.1 locate

1. 查询系统上预建的文件索引数据库
   /var/lib/mlocate/mlocate.db
2. 依赖于事先构建的索引
   索引的构建是在系统较为空闲时自动进程（周期性），管理员手动更新数据库（updatedb）
3. 索引构建过程需要遍历整个根文件系统，极消耗资源
4. 工作特点：
   查找速度快
   模糊查找
   非实时查找
   搜索的是文件的全路径，不仅仅是文件名
   搜索的是文件的全路径名，不仅仅是文件名
   可能只搜索用户具备读取和执行权限的目录

1.2 locate命令

1. locate keyword
2. 有用的选项
   -i 不区分大小写的搜索
   -n N 只列举前N个匹配项目
   -r 使用正则表达式
3. 搜索名称或路径中带有"conf" 的文件
   locate conf
4. 使用Regex来搜索以".conf"结尾的文件
   locate -f ‘.conf’

1.3 find

1. 实时查找工具，遍历指定路径完成文件查找
2. 工作特点
   查找速度慢
   实时查找
   精确查找
   可能只搜索用户具备读取和执行权限的目录
3. find [option]…[查找路径] [查找条件][处理动作]
   查找路径：指定具体的目标路径；默认为当前路径
   查找条件：指定的查找标准，可以文件名、大小、类型、权限等标准进行；
   默认为找出指定路径下的所有文件
   处理动作动作：对符合条件的文件做操作，默认输出至屏幕

1.4 find查找条件

1. 指搜索层级
   -maxdepth level 最大搜索目录深度，指定目录为第一级
   -mindepth level 最小搜索目录深度
2. 根据文件名和inode查找：
   -name “文件名称” ： 支持使用glob
   *,?,[],[^]
   -iname “文件名称”：不区分字母大小写
   -inum n 按照inode号查找
   -samefile name 相同的inode号的文件
   -links n 连接数为n的文件
   -regex “PATTERN” ：以PATTERN匹配整个文件字符串，而不仅仅是文件名称
3. 根据属主、属组查找：
   -user USERNAME：查找属主为指定用户（UID）的文件
   -group grpname： 查找属主为指定组(GID)的文件
   -uid UserID：查找属主为指定的UID的文件
   -gid GroupID：查找属组为指定的gid号的文件
   -nogroup：查找没有属组的文件
4. 查找文件类型查找：
   -type TYPE:
   f: 普通文件
   d: 普通文件
   l: 符号链接文件
   s: 套接字文件
   b:块设备文件
   c:字符设备文件
   p:管道文件
5. 空文件或目录
   -empty
   find /app -type d -empty
6. 组合条件
   与：-a
   或：-o
   非：-not，！
7. 德摩尔定律
   (!A)或(!B)=!(A且B)
   (!A)且(!B)=!(A或B)
8. 根据文件大小来查找：
   -seize [+|-]#UNIT
   常用单位：k,M,G,c(byte)
   #UNIT:(#-1,#)
   如：6k表示[5k,6k]
   -#UNIT:(0,#-1)
   如：-6k表示[0,5k]
   +#UNIT:(#,~)
   如：+6k表示[6k,~]
9. 根据时间戳
   以天为单位：
   -atime [+|-]#:
   #:[#,+1]
   +#:[#+1,~]
   -#:[0,#]
   -mtime
   -ctime
   以分钟为单位：
   -amin
   -mmin
   -cmin
10. 根据权限查找
    -perm [/|-]mode
    mode:精确权限匹配
    /mode:任何一类（u，o，g）对象的权限中只要能匹配即可，或关系，+从centos7开始淘汰
    -mode：每一类对象都必须同时拥有指定权限，与关系
    0表示不关注
    find -perm 755 会匹配权限模式恰好是755的文件
    只要当任意人有写权限时，find -perm +222就会匹配
    只要当每一个人都有写权限时，find -perm -222就会匹配
    只要当其他人（other）都有写权限时，find -perm -002就会匹配

1.5 find 处理动作

1. print：默认的处理动作，显示屏幕
2. -ls：类似于对查找到的文件执行“ls -l”命令
3. -delete：删除查找到的文件
   -fls file：查找到的所有文件的长格式信息保存至指定文件中
   -ok command{}; 对查找到的每一个文件执行由command指定的命令，对于每个文件执行
   命令之前，都会交互式要求用户确定
4. -exe command{}|;对查找到的每一个文件执行由command指定的命令
5. {} 用于引用查找到的文件名称自身
6. find传递查找到的文件至后面指定的命令时，查找到所有符合条件的一次性传递给后面的命令
7. find参数替换xargs
   1）由于很多命令不支持管道| 来传递，而日常工作有这个必要，所以就有了xargs命令
   2）xargs用于产生某个命令的参数，xargs可以读入stdin的数据，并且以空格符
   或回车符将stdin的数据分割成为arguments
   3）注意：文件名或者是其他意义的名词内含有空格符的情况
   4）有些命令不能接受过多参数，命令执行可能会失败，xargs可以解决
   5）示例：
   ls f* | xargs rm
   find /sbin -perm +700 | ls -l
   find /sbin -perm +700 | xargs ls -l
   6）find和xargs格式： find | xargs command

1.6 ind示例

find -name snow.png
fin -iname snow.png
find / -name "*.txt"
find /var -name "*log"
find -user joe -group joe
find -user joe -o -user jane
find -not \( -user joe -o user jane\)
find / -user joe -o -uid 500
1）找出/temp目录下，属主不是root，且文件不以f开头的文件
find /tmp\( -not root -a -not  -name "f*" \) -ls
2）排除目录
3）示例
查找/etc/下，除/etc/sane.d目录的其他所有.conf后缀的文件
find /etc -path '/etc/sane.d' -a -prune -o name ".conf"
查找/etc/下，除/etc/sane.d和/etc/fonts两个目录的所有.conf后缀的文件
find /etc\(-path '/etc/sane.d' -o -path '/etc/fonts' \)
-a -prune -o -name "*.conf"
4）备份文件配置，添加.org这个扩展名
find  -name "*.conf"  -exec cp {} {}.org\;
5）提示删除存在时间超过3天以上的joe的临时文件
find /tmp -ctime +3 -user joe -ok rm {} \;
6）在主目录中寻找可被其他用户写入的文件
find ~ -perm -002 -exec chmod o-w {} \;
7）查找/data下的权限为644.后缀为sh的普通文件，增加执行权限
find /data -type -perm 644 -name "*.sh" -exec chmod 755 {} \;
8）查找/home的目录
find /home -type d -ls

---

2.压缩

2.1 压缩、解压缩及归档工具

1. file-roller
2. compress/uncompress:.Z
3. gzip/gunzip:.gz
4. bizp2/bunzip2:.bz2
5. xz/unxz:.xz
6. zip/unzip
7. tar
8. cpio

2.2 compress/uncompress

1. compress [-dfcVr] [-b maxbits] [file…]
   -d:解压缩，相当于uncompress
   -c: 结果输出至标准输出，不删除原文件
2. uncompress：解压缩
3. zcat file.Z > file

2.3 gzip/gunzip

1. gzip [option] … file …
   -d:解压缩，相当于gunzip
   -c: 将压缩或解压缩的结果输出至标准输出
   -#：1-9，指定压缩比，值越大压缩比越大
2. zcat：不显示解压缩的前提下查看文件文件的内容
3. 示例：
   gzip =c messages >messages.gz
   gzip -c -d messages.gz > messages
   zcat messages.gz > messages

2.4 bzip2/bunzip2/bzcat

1. bzip2 [option] … file …
   -k: keep，保留原文件
   -d:解压缩
   -#：1-9，压缩比，默认为9
2. bzcat：不显示解压缩的前提下查看文件文件的内容

2.5xz/unxz/xzcat

1. xz [option] … file …
   -k: keep，保留原文件
   -d:解压缩
   -#：1-9，压缩比，默认为6
2. xzcat：不显示解压缩的前提下查看文件文件的内容

3. 打包

3.1 tar工具

1. tar（tape archive ，磁带归档的缩写）
2. tar [option]…
   创建归档：tar -cpvf /path/to/somefile.tar file …
   追加文件至归档：注：不支持对压缩文件追加啊
   tar -r -f /path/to/somefile.tar file…
   查看归档文件中的文件列表：
   tar -r -f /path/to/somefile.tar
   展开归档：tar -x -f /path/to/somefile.tar
   tar -r -f /path/to/somefile.tar -C /PATH/
   结合压缩工具实现：归档并压缩
   -j:bzip2,-z:gzip,-j:xz
3. -T选项指定输出文件，-X选项指定包含要排除的文件列表
   tarzcvf mybackup.tgz -T /root/includefilelist -X /root/excludefilelist
4. ）分割大的tar文件为多份小文件
   split -b Size -d tar-file-name prefix-name
   split -b 1M -d mybackup.tgz mybackup-parts
   split -b 1M mybackup.tgz mybackup-parts
5. 合并
   cat mybackup-parts* >mybackup.tar.gz

3.2 cpio

1. 功能：复制文件从或
2. cpio命令是通过重定向的方式将文件进行打包，还原恢复的工具，它可以解压以".cpio"或".tar"结尾的文件
3. cpio [选项] > 文件或设备名
4. cpio [选项] < 文件或设备名
5. 选项：
   -o:将文件拷贝打包成文件或者将文件按输出到设备上
   -i:解包，将文件打包或压缩设备上的备份还原到系统
   -t 预览，查看文件内容或输出到设备上的文件内容
   -v: 显示打包过程中的文件名称
   -d:解包生成目录，在cpio还原时，自动的建立目录

3.3 cpio实列：

1. 将etc目录备份
   find ./etc -print | cpio -ov > etc.cpio
2. 内容预览
   cpio -tv | < etc.cpio
3. 解包文件
   cpio -idv < etc.cpio