wget常用命令备忘录

1. 递归下载当前页面所有**
wget -r -np -nd --accept=** http://www.baidu.com/ -e robots=off
2. 防盗链
wget www.baidu.com -U "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/72.0.3626.121 Safari/537.36"
3. 同步网站镜像
wget -m -L –reject = http://www.baidu.com/
4. 下载整个网站
wget --random-wait -r -p -e robots=off -U mozilla http://www.baidu.com
5. 批量地址下载
wget -i filename.txt
命令 注释
-r 递归
-np 不遍历上级目录
-nd 不根据页面自动创建目录
–accept= 下载指定格式文件,多种格式可以逗号分隔
–reject= 指定不下载格式文件,多种格式可以逗号分隔
-e robots=off 不遵守robots协议
-k 将页面内链接转换为本地连接
-p 下载所有内容
-c 断点续传
-l1 限制递归层数1层,l1为当前目录
-A.apk 只下载apk后缀文件
-b 后台下载,文件目录下tail -f wget-log可以看进度

你可能感兴趣的:(笔记,自动化)