shell基础二:查找技巧,find及xargs的使用

From: http://bbs.chinaunix.net/forum/viewtopic.php?t=441883&highlight=wingger

呵呵,建议大家看《LINUX和UNIX基础编程》这本书哦,循序渐进


查看man find会更详细哦

我把我学习内容拷下来,一起学习

http://bbs.chinaunix.net/forum/viewtopic.php?t=434579&highlight=wingger
这个链接里是第一部分,是LINUX的基础,建议初学者好好看看


由于f i n d具有强大的功能,所以它的选项也很多,其中大部分选项都值得我们花时间来了解一下。即使系统中含有网络文件系统( N F S ),f i n d命令在该文件系统中同样有效,只你具有相应的权限。
在运行一个非常消耗资源的f i n d命令时,很多人都倾向于把它放在后台执行,因为遍历一个大的文件系统可能会花费很长的时间(这里是指3 0 G字节以上的文件系统)。

F i n d命令的一般形式为:

[Copy to clipboard] [ - ]
CODE:
find pathname -options [-print -exec -ok]

让我们来看看该命令的参数:

QUOTE:
pathname:  find命令所查找的目录路径。例如用.来表示当前目录,用/来表示系统根目录。
-print:     find命令将匹配的文件输出到标准输出。
-exec:     find命令对匹配的文件执行该参数所给出的s h e l l命令。相应命令的形式为' command' {} /;,注意{ }和/;之间的空格。
-ok:       和- e x e c的作用相同,只不过以一种更为安全的模式来执行该参数所给出的s h e l l命令,在执行每一个命令之前,都会给出提示,让用户来确定是否执行。

先了解一下find所带的参数,能实现哪些功能

find命令选项

-name:按照 文件名查找文件。
-perm:按照 文件权限来查找文件。
-prune:使用这一选项可以使f i n d命令 不在当前指定的目录中查找,如果同时使用-depth选项,那么-prune将被f i n d命令忽略。
-user: 按照 文件属主来查找文件。
-group:按照 文件所属的组来查找文件。

-mtime -n +n:按照 文件的更改时间来查找文件, - n表示文件更改时间距现在n天以内,+ n表示文件更改时间距现在n天以前。F i n d命令还有- a t i m e和- c t i m e选项,但它们都和- m t i m e选项。

-nogroup:查找 无有效所属组的文件,即该文件所属的组在/ e t c / g r o u p s中不存在。
-nouser:查找 无有效属主的文件,即该文件的属主在/ e t c / p a s s w d中不存在。

-newer file1 ! file2: 查找更改时间比文件f i l e 1新但比文件f i l e 2旧的文件。

-type 查找某一类型的文件,诸如:

[Copy to clipboard] [ - ]
CODE:
b - 块设备文件。
d - 目录。
c - 字符设备文件。
p - 管道文件。
l - 符号链接文件。
f - 普通文件。

-size n:[c] 查找 文件长度为n块的文件,带有c时表示文件长度以字节计。
-depth: 在查找文件时,首先查找当前目录中的文件,然后再在其子目录中查找。
-fstype:查找位于 某一类型文件系统中的文件,这些文件系统类型通常可以在配置文件/ e t c / f s t a b中找到,该配置文件中包含了本系统中有关文件系统的信息。

QUOTE:
-mount:在查找文件时不跨越文件系统m o u n t点。
-follow:如果f i n d命令遇到符号链接文件,就跟踪至链接所指向的文件。
-cpio:对匹配的文件使用c p i o命令,将这些文件备份到磁带设备中。

使用exec或ok来执行shell命令

QUOTE:
使用find时,只要把想要的操作写在一个文件里,就可以用exec来配合find查找,很方便的

(在有些操作系统中只允许- e x e c选项执行诸如l s或ls -l这样的命令)。大多数用户使用这一选项是为了查找旧文件并删除它们。建议在真正执行r m命令删除文件之前,最好先用l s命令看一下,确认它们是所要删除的文件。

e x e c选项后面跟随着所要执行的命令或脚本,然后是一对儿{ },一个空格和一个/,最后是一个分号。

为了使用e x e c选项,必须要同时使用p r i n t选项。如果验证一下f i n d命令,会发现该命令只输出从当前路径起的相对路径及文件名。

例如:为了用ls -l命令列出所匹配到的文件,可以把ls -l命令放在f i n d命令的- e x e c选项中

[Copy to clipboard] [ - ]
CODE:
# find . -type f -exec ls -l {} /;
-rw-r--r--    1 root     root        34928 2003-02-25  ./conf/httpd.conf
-rw-r--r--    1 root     root        12959 2003-02-25  ./conf/magic
-rw-r--r--    1 root     root          180 2003-02-25  ./conf.d/README

上面的例子中,f i n d命令匹配到了当前目录下的所有普通文件,并在- e x e c选项中使用ls -l命令将它们列出。

在/ l o g s目录中查找更改时间在5日以前的文件并删除它们:

[Copy to clipboard] [ - ]
CODE:
$ find logs -type f -mtime +5 -exec rm {} /;

记住,在s h e l l中用任何方式删除文件之前,应当先查看相应的文件,一定要小心!当使用诸如m v或r m命令时,可以使用- e x e c选项的安全模式。它将在对每个匹配到的文件进行操作之前提示你。

在下面的例子中, f i n d命令在当前目录中查找所有文件名以. L O G结尾、更改时间在5日以上的文件,并删除它们,只不过在删除之前先给出提示。

[Copy to clipboard] [ - ]
CODE:
$ find . -name "*.conf"  -mtime +5 -ok rm {} /;
< rm ... ./conf/httpd.conf > ? n

按y键删除文件,按n键不删除。


任何形式的命令都可以在- e x e c选项中使用。

在下面的例子中我们使用g r e p命令。f i n d命令首先匹配所有文件名为“ passwd*”的文件,例如passwd、passwd.old、passwd.bak,然后执
行grep命令看看在这些文件中是否存在一个sam用户。


[Copy to clipboard] [ - ]
CODE:
# find /etc -name "passwd*" -exec grep "sam" {} /;
sam:x:501:501::/usr/sam:/bin/bash

论坛里-exec执行脚本的的例子
使用find 命令查找某个时间段的11点到12点的shell

http://www.chinaunix.net/forum/viewtopic.php?t=15821

find命令的例子

查找当前用户主目录下的所有文件,下面两种方法都可以使用:

[Copy to clipboard] [ - ]
CODE:
$ find $HOME -print
$ find ~ -print

为了在当前目录中文件属主具有读、写权限,并且文件所属组的用户和其他用户具有读权限的文件,可以用:

[Copy to clipboard] [ - ]
CODE:
$ find . -type f -perm 644 -exec ls -l {} /;

为了查找系统中所有文件长度为0的普通文件,并列出它们的完整路径,可以用:

[Copy to clipboard] [ - ]
CODE:
$ find / -type f -size 0 -exec ls -l {} /;

查找/var/logs目录中更改时间在7日以前的普通文件,并在删除之前询问它们:

[Copy to clipboard] [ - ]
CODE:
$ find /var/logs -type f -mtime +7 -ok rm {} /;

为了查找系统中所有属于root组的文件,可以用:

[Copy to clipboard] [ - ]
CODE:
$find . -group root -exec ls -l {} /;
-rw-r--r--    1 root     root          595 10月 31 01:09 ./fie1

下面的find命令将删除当目录中访问时间在7日以来、含有数字后缀的admin.log文件。该命令只检查三位数字,所以相应文件的后缀不要超过999。
先建几个admin.log*的文件 ,才能使用下面这个命令

[Copy to clipboard] [ - ]
CODE:
$ find . -name "admin.log[0-9][0-9][0-9]" -atime -7  -ok
rm {} /;
< rm ... ./admin.log001 > ? n
< rm ... ./admin.log002 > ? n
< rm ... ./admin.log042 > ? n
< rm ... ./admin.log942 > ? n

为了查找当前文件系统中的所有目录并排序,可以用:

[Copy to clipboard] [ - ]
CODE:
$ find . -type d  |sort

为了查找系统中所有的r m t磁带设备,可以用:

[Copy to clipboard] [ - ]
CODE:
$ find /dev/rmt -print



[Copy to clipboard] [ - ]
CODE:
原书为:
为了查找当前文件系统中的所有目录并排序,可以用:
$ find . -type d  -loacl -mount |sort
已更正为:
$ find . -type d |sort

论里的其它find的贴子:

find命令中*号的疑惑
http://bbs.chinaunix.net/forum/viewtopic.php?t=349141&highlight=find

Linux中文件查找技术大全
http://bbs.chinaunix.net/forum/viewtopic.php?t=16140
xargs

      在使用f i n d命令的- e x e c选项处理匹配到的文件时, f i n d命令将所有匹配到的文件一起传递给e x e c执行。但有些系统对能够传递给e x e c的命令长度有限制,这样在f i n d命令运行几分钟之后,就会出现溢出错误。错误信息通常是“参数列太长”或“参数列溢出”。这就是x a rg s命令的用处所在,特别是与f i n d命令一起使用。

       F i n d命令把匹配到的文件传递给x a rg s命令,而x a rg s命令每次只获取一部分文件而不是全部,不像- e x e c选项那样。这样它可以先处理最先获取的一部分文件,然后是下一批,并如此继续下去。

      在有些系统中,使用- e x e c选项会为处理每一个匹配到的文件而发起一个相应的进程,并非将匹配到的文件全部作为参数一次执行;这样在有些情况下就会出现进程过多,系统性能下降的问题,因而效率不高;
       而使用x a rg s命令则只有一个进程。另外,在使用x a rg s命令时,究竟是一次获取所有的参数,还是分批取得参数,以及每一次获取参数的数目都会根据该命令的选项及系统内核中相应的可调参数来确定。

      来看看x a rg s命令是如何同f i n d命令一起使用的,并给出一些例子。

      下面的例子查找系统中的每一个普通文件,然后使用x a rg s命令来测试它们分别属于哪类文件

[Copy to clipboard] [ - ]
CODE:
#find . -type f -print | xargs file
./.kde/Autostart/Autorun.desktop: UTF-8 Unicode English text
./.kde/Autostart/.directory:      ISO-8859 text/
......

在整个系统中查找内存信息转储文件(core dump) ,然后把结果保存到/tmp/core.log 文件中:

[Copy to clipboard] [ - ]
CODE:
$ find / -name "core" -print | xargs echo "" >/tmp/core.log

上面这个执行太慢,我改成在当前目录下查找

[Copy to clipboard] [ - ]
CODE:
#find . -name "file*" -print | xargs echo "" > /temp/core.log
# cat /temp/core.log
./file6

在当前目录下查找所有用户具有读、写和执行权限的文件,并收回相应的写权限:

[Copy to clipboard] [ - ]
CODE:

# ls -l
drwxrwxrwx    2 sam      adm          4096 10月 30 20:14 file6
-rwxrwxrwx    2 sam      adm             0 10月 31 01:01 http3.conf
-rwxrwxrwx    2 sam      adm             0 10月 31 01:01 httpd.conf

# find . -perm -7 -print | xargs chmod o-w
# ls -l
drwxrwxr-x    2 sam      adm          4096 10月 30 20:14 file6
-rwxrwxr-x    2 sam      adm             0 10月 31 01:01 http3.conf
-rwxrwxr-x    2 sam      adm             0 10月 31 01:01 httpd.conf

用g r e p命令在所有的普通文件中搜索hostname这个词:

[Copy to clipboard] [ - ]
CODE:
# find . -type f -print | xargs grep "hostname"
./httpd1.conf:#     different IP addresses or hostnames and have them handled by the
./httpd1.conf:# VirtualHost: If you want to maintain multiple domains/hostnames
on your

用g r e p命令在当前目录下的所有普通文件中搜索hostnames这个词:

[Copy to clipboard] [ - ]
CODE:
# find . -name /* -type f -print | xargs grep "hostnames"
./httpd1.conf:#     different IP addresses or hostnames and have them handled by the
./httpd1.conf:# VirtualHost: If you want to maintain multiple domains/hostnames
on your

注意,在上面的例子中, /用来取消f i n d命令中的*在s h e l l中的特殊含义。

下面是find一些常用参数的例子,有用到的时候查查就行了,像上面前几个贴子,都用到了其中的的一些参数,也可以用man或查看论坛里其它贴子有find的命令手册

1、使用name选项

文件名选项是f i n d命令最常用的选项,要么单独使用该选项,要么和其他选项一起使用。
可以使用某种文件名模式来匹配文件,记住要用引号将文件名模式引起来。
不管当前路径是什么, 如果想要在自己的根目录$ H O M E中查找文件名符合* . t x t的文件,使用~作为' p a t h n a m e参数,波浪号~代表了你的$ H O M E目录。

[Copy to clipboard] [ - ]
CODE:
$ find ~ -name "*.txt" -print

想要在当前目录及子目录中查找所有的‘ * . t x t’文件,可以用:

[Copy to clipboard] [ - ]
CODE:
$ find . -name "*.txt" -print

想要的当前目录及子目录中查找文件名以一个大写字母开头的文件,可以用:

[Copy to clipboard] [ - ]
CODE:
$ find . -name "[A-Z]*" -print

想要在/ e t c目录中查找文件名以h o s t开头的文件,可以用:

[Copy to clipboard] [ - ]
CODE:
$ find /etc -name "host*" -print

想要查找$ H O M E目录中的文件,可以用:

[Copy to clipboard] [ - ]
CODE:
$ find ~ -name "*" -print 或find . -print

要想让系统高负荷运行,就从根目录开始查找所有的文件。

[Copy to clipboard] [ - ]
CODE:
$ find / -name "*" -print

如果想在当前目录查找文件名以两个小写字母开头,跟着是两个数字,最后是* . t x t的文件,下面的命令就能够返回名为a x 3 7 . t x t的文件:$

[Copy to clipboard] [ - ]
CODE:
$find . -name "[a-z][a-z][0--9][0--9].txt" -print

2、用perm选项

按照文件权限模式用- p e r m选项。

按文件权限模式来查找文件的话。最好使用八进制的权限表示法。

如在当前目录下查找文件权限位为7 5 5的文件,即文件属主可以读、写、执行,其他用户可以读、执行的文件,可以用:

[Copy to clipboard] [ - ]
CODE:
$ find . -perm 755 -print

还有一种表达方法:在八进制数字前面要加一个横杠-,表示都匹配,如-007就相当于777,-006相当于666

[Copy to clipboard] [ - ]
CODE:
# ls -l
-rwxrwxr-x    2 sam      adm             0 10月 31 01:01 http3.conf
-rw-rw-rw-    1 sam      adm         34890 10月 31 00:57 httpd1.conf
-rwxrwxr-x    2 sam      adm             0 10月 31 01:01 httpd.conf
drw-rw-rw-    2 gem      group        4096 10月 26 19:48 sam
-rw-rw-rw-    1 root     root         2792 10月 31 20:19 temp

# find . -perm 006
# find . -perm -006
./sam
./httpd1.conf
./temp

3、忽略某个目录

如果在查找文件时希望忽略某个目录,因为你知道那个目录中没有你所要查找的文件,那么可以使用- p r u n e选项来指出需要忽略的目录。在使用- p r u n e选项时要当心,因为如果你同时使用了- d e p t h选项,那么- p r u n e选项就会被f i n d命令忽略。

如果希望在/ a p p s目录下查找文件,但不希望在/ a p p s / b i n目录下查找,可以用:

[Copy to clipboard] [ - ]
CODE:
$ find /apps -path "/apps/bin" -prune -o -print

-perm选项中,我的解析
还有一种表达方法:在八进制数字前面要加一个横杠-,表示都匹配,如-007就相当于777,-006相当于666
不知对不对

补一个:使用find查找文件的时候怎么避开某个文件目录

比如要在/usr/sam目录下查找不在dir1子目录之内的所有文件

[Copy to clipboard] [ - ]
CODE:
find /usr/sam -path "/usr/sam/dir1" -prune -o -print  



QUOTE:
find [path ..] [expression] 在路径列表的后面的是表达式
-path "/usr/sam" -prune -o -print 是 -path "/usr/sam" -a -prune -o -print 的简写表达式按顺序求值, -a 和 -o 都是短路求值,与 shell 的 && 和 || 类似如果 -path "/usr/sam" 为真,则求值 -prune , -prune 返回真,与逻辑表达式为真;否则不求值 -prune ,与逻辑表达式为假。 如果 -path "/usr/sam" -a -prune 为假,则求值 -print ,-print 返回真,或逻辑表达式为真;否则不求值 -print,或逻辑表达式为真。  

这个表达式组合特例可以用伪码写为

[Copy to clipboard] [ - ]
CODE:
if -path "/usr/sam"  then
          -prune
else
          -print

避开多个文件夹

QUOTE:
find /usr/sam /( -path /usr/sam/dir1 -o -path /usr/sam/file1 /) -prune -o -print

圆括号表示表达式的结合。
/ 表示引用,即指示 shell 不对后面的字符作特殊解释,而留给 find 命令去解释其意义。


查找某一确定文件,-name等选项加在-o 之后

[Copy to clipboard] [ - ]
CODE:
#find /usr/sam  /(-path /usr/sam/dir1 -o -path /usr/sam/file1 /) -prune -o -name "temp" -print

4、使用user和nouser选项

按文件属主查找文件,如在$ H O M E目录中查找文件属主为sam的文件,可以用:

[Copy to clipboard] [ - ]
CODE:
$ find ~ -user sam -print

在/ e t c目录下查找文件属主为u u c p的文件:

[Copy to clipboard] [ - ]
CODE:
$ find /etc -user uucp -print

为 了查找属主帐户已经被删除的文件,可以使用- n o u s e r选项。这样就能够找到那些属主在/ e t c / p a s s w d文件中没有有效帐户的文件。在使用- n o u s e r选项时,不必给出用户名; f i n d命令能够为你完成相应的工作。
例如,希望在/ h o m e目录下查找所有的这类文件,可以用:

[Copy to clipboard] [ - ]
CODE:
$ find /home -nouser -print

5、使用group和nogroup选项

就像u s e r和n o u s e r选项一样,针对文件所属于的用户组, f i n d命令也具有同样的选项,为了在/ a p p s目录下查找属于gem用户组的文件,可以用:

[Copy to clipboard] [ - ]
CODE:
$ find /apps -group gem -print

要查找没有有效所属用户组的所有文件,可以使用n o g r o u p选项。下面的f i n d命令从文件系统的根目录处查找这样的文件

[Copy to clipboard] [ - ]
CODE:
$ find / -nogroup-print

6、按照更改时间或访问时间等查找文件

如果希望按照更改时间来查找文件,可以使用m t i m e,atime或ctime选项。如果系统突然没有可用空间了,很有可能某一个文件的长度在此期间增长迅速,这时就可以用m t i m e选项来查找这样的文件。
用减号-来限定更改时间在距今n日以内的文件,而用加号+来限定更改时间在距今n日以前的文件。
希望在系统根目录下查找更改时间在5日以内的文件,可以用:

[Copy to clipboard] [ - ]
CODE:
$ find / -mtime -5 -print

为了在/ v a r / a d m目录下查找更改时间在3日以前的文件,可以用:

[Copy to clipboard] [ - ]
CODE:
$ find /var/adm -mtime +3 -print

论坛里的例 子
find 中的 -ctime 和 -mtime ,-atime 区别?  

http://www.chinaunix.net/forum/viewtopic.php?t=15799

蜘蛛日记(九)::三个UNIX文件时间ctime,mtime,atime(转)
http://www.chinaunix.net/forum/viewtopic.php?t=92203

编辑中

7、查找比某个文件新或旧的文件

如果希望查找更改时间比某个文件新但比另一个文件旧的所有文件,可以使用- n e w e r选项。它的一般形式为:

[Copy to clipboard] [ - ]
CODE:
newest_file_name ! oldest_file_name

其中,!是逻辑非符号。

查找更改时间比文件sam新但比文件temp旧的文件:

[Copy to clipboard] [ - ]
CODE:
例:有两个文件
-rw-r--r--    1 sam      adm             0 10月 31 01:07 fiel
-rw-rw-rw-    1 sam      adm         34890 10月 31 00:57 httpd1.conf
-rwxrwxr-x    2 sam      adm             0 10月 31 01:01 httpd.conf
drw-rw-rw-    2 gem      group        4096 10月 26 19:48 sam
-rw-rw-rw-    1 root     root         2792 10月 31 20:19 temp

# find -newer httpd1.conf  ! -newer temp -ls
1077669    0 -rwxrwxr-x   2 sam      adm             0 10月 31 01:01 ./httpd.conf
1077671    4 -rw-rw-rw-   1 root     root         2792 10月 31 20:19 ./temp
1077673    0 -rw-r--r--   1 sam      adm             0 10月 31 01:07 ./fiel

查找更改时间在比temp文件新的文件:

[Copy to clipboard] [ - ]
CODE:
$ find . -newer temp -print

8、使用type选项

在/ e t c目录下查找所有的目录,可以用:

[Copy to clipboard] [ - ]
CODE:
$ find /etc -type d -print

在当前目录下查找除目录以外的所有类型的文件,可以用:

[Copy to clipboard] [ - ]
CODE:
$ find . ! -type d -print

在/ e t c目录下查找所有的符号链接文件,可以用:

[Copy to clipboard] [ - ]
CODE:
$ find /etc -type l -print

9、使用size选项

可以按照文件长度来查找文件,这里所指的文件长度既可以用块( b l o c k)来计量,也可以用字节来计量。以字节计量文件长度的表达形式为N c;以块计量文件长度只用数字表示即可。
在按照文件长度查找文件时,一般使用这种以字节表示的文件长度,在查看文件系统的大小,因为这时使用块来计量更容易转换。

在当前目录下查找文件长度大于1 M字节的文件:

[Copy to clipboard] [ - ]
CODE:
$ find . -size +1000000c -print

在/ h o m e / a p a c h e目录下查找文件长度恰好为1 0 0字节的文件:

[Copy to clipboard] [ - ]
CODE:
$ find /home/apache -size 100c -print

在当前目录下查找长度超过1 0块的文件(一块等于5 1 2字节):

[Copy to clipboard] [ - ]
CODE:
$ find . -size +10 -print

论坛例子:
如何查找大小为500K到1000K之间的文件

http://bbs.chinaunix.net/forum/viewtopic.php?t=332268


10、使用depth选项

在使用f i n d命令时,可能希望先匹配所有的文件,再在子目录中查找。使用d e p t h选项就可以使f i n d命令这样做。这样做的一个原因就是,当在使用f i n d命令向磁带上备份文件系统时,希望首先备份所有的文件,其次再备份子目录中的文件。

在下面的例子中, f i n d命令从文件系统的根目录开始,查找一个名为C O N . F I L E的文件。
它将首先匹配所有的文件然后再进入子目录中查找。

[Copy to clipboard] [ - ]
CODE:
$ find / -name "CON.FILE" -depth -print

11、使用mount选项
在当前的文件系统中查找文件(不进入其他文件系统),可以使用f i n d命令的m o u n t选项。
从当前目录开始查找位于本文件系统中文件名以X C结尾的文件:

[Copy to clipboard] [ - ]
CODE:
$ find . -name "*.XC" -mount -print

12、使用cpio选项
c p i o命令可以用来向磁带设备备份文件或从中恢复文件。可以使用f i n d命令在整个文件系统中(更多的情况下是在部分文件系统中)查找文件,然后用c p i o命令将其备份到磁带上。
如果希望使用c p i o命令备份/ e t c、/ h o m e和/ a p p s目录中的文件,可以使用下面所给出的命令,不过要记住你是在文件系统的根目录下:

[Copy to clipboard] [ - ]
CODE:
#cd /
#find etc home apps -depthe -print | cpio -ivcdC65535 -o

在 上面的例子中,应当注意到路径中缺少/。这叫作相对路径。之所以使用相对路径,是因为在从磁带中恢复这些文件的时候,可以选择恢复文件的路径。例如,可以 将这些文件先恢复到另外一个目录中,对它们进行某些操作后,再恢复到原始目录中。如果在备份时使用了绝对路径,例如/ e t c,那么在恢复时,就只能恢复到/ e t c目录中去,别无其他选择。在上面的例子中,我告诉f i n d命令首先进入/ e t c目录,然后是/ h o m e和/ a p p s目录,先匹配这些目录下
的文件,然后再匹配其子目录中的文件,所有这些结果将通过管道传递给c p i o命令进行备份。
顺便说一下,在上面的例子中c p i o命令使用了C 6 5 5 3 6选项,本可以使用B选项,不过这样每块的大小只有5 1 2 字节,而使用了C 6 5 5 3 6 选项后,块的大小变成了6 4 K 字节(6 5 5 3 6 / 1 0 2 4)

最后一项没有试验过

你可能感兴趣的:(c,linux,shell,unix,File,脚本)