-bash: /bin/xargs: Argument list too long的处理方法

https://blog.51cto.com/tenderrain/1916885

xargs是给命令传递参数的一个过滤器,也是组合多个命令的一个工具。它把一个数据流分割为一些足够小的块,以方便过滤器和命令进行处理。通常情况下,xargs从管道或者stdin中读取数据,但是它也能够从文件的输出中读取数据。xargs的默认命令是echo,这意味着通过管道传递给xargs的输入将会包含换行和空白,不过通过xargs的处理,换行和空白将被空格取代。

  1. 当你尝试用rm 删除太多的文件,你可能得到一个错误信息:/bin/rm Argument list too long. 用xargs 去避免这个问题

find ~ -name ‘*.log’ -print0 | xargs -0 rm -f

  1. 获得/etc/ 下所有*.c 结尾的文件列表,有几种不同的方法能得到相同的结果,下面的例子仅仅是示范怎么实用xargs ,在这个例子中实用 xargs将find 命令的输出传递给ls -l

find /etc -name “*.c” | xargs ls –l

  1. 假如你有一个文件包含了很多你希望下载的URL, 你能够使用xargs 下载所有链接

cat list.txt | xargs wget –c

  1. 查找所有的jpg 文件,并且压缩它

find / -name *.jpg -type f -print | xargs tar -cvzf p_w_picpaths.tar.gz

  1. 原因是:一个文件夹下文件太多,使用rm删除就会出现/bin/rm: Argument list too long错误,当然使用别的命令也是一样的错误,像ls,chmod等。

解决方法:
1:
ls | xargs -n 10 rm -fr ls
就解决了,这句解释为:输出所有的文件名(用空格分割) xargs就是将ls的输出,每10个为一组(以空格为分隔符),作为rm -rf的参数也就是说将所有文件名10个为一组,由rm -rf删除,这样就不会超过命令行的长度了.

2:find . -maxdepth 1 -name “*.sh” -type f -exec rm -f {} ;

用 find 命令在当前目录查找,然后用exec命令执行

办法就是使用find命令内置的 “-delete” 参数 ,使用这种方法删除文件,速度大概是 2000个文件/秒,速度比之前方法得到极大提高。当然也可以加上 "-print"参数来显示每个删除的文件。

find . -type f -delete

find . -type d -print -delete

但是我不建议加这个参数,如果你要观察删除文件的速度,我建议使用df -i 命令来查看indoe节点的变化情况。

移动7天前的备份文件

0 0 * * * find /root/backup -mtime +3 -name “*.gz” | xargs -I {} mv {} /opt/backup

你可能感兴趣的:(shell,shell)