学习日志1：爬虫+google搜索+sqlmap实现自动化任意网站的sql注入查找

摘自freebuf
出处：https://www.freebuf.com/articles/web/210651.html
思想：利用爬虫在google按关键字搜索可能存在注入的url，存入一个文本文件中，再利用爬虫进行探测，筛选出有响应的url，最后使用sqlmap利用制定好的参数进行sql注入探测。
解决的问题：sqlmap中已经包含此功能，即-g语法，但无法正常处理带有中文的url

关键点：
1.爬虫在谷歌搜索时，制定代理池并定制HTTP头，具体搜索参数为inurl:php?id= intext:中文
2.利用xpath精确定位url
3.检测url存活性:若6秒内返回200，则判定存活，否则可以认为网页不存在，直接丢弃。
4.注入探测：sqlmap -m ip.txt --batch

思考：
1.可以加入过滤规则探测的功能(如waf)，并根据探测的结果使用tamper脚本或自定义混淆脚本，并加入最后的sqlmap参数中。
2.任意网站的sql注入探测是否合法？