appium、mitmproxy、fiddler、charles搭配

1.使用appium时打开usb调试,注意有些手机比如我的vivo_Y55usb分的比较细,打开usb调试还不够还要打开usb模拟点击。
2.windows下的mitmproxy的.exe版本和使用pip install mitmproxy版本不能一起用,为什么要一起用呢?因为.exe版本的可以在浏览器中监听request和response
但是在windows下的pip install mitmproxy是没有request和response的详细信息的,但是幸好fiddler和charles在分析request和response上都是比mitmproxy的.exe好的
所以用fiddler或者charles分析,中间执行脚本使用mitmproxy(mitmproxy不用自己构造request或者response用的是最真实的request和response,在反反爬方面确实方便)
,使用appium进行app自动化操作(1.appium基于手动效率和代码效率之间的平衡点。2.反反爬效果好。3.可以爬取微信的加密数据)
所以一般是fiddler、charles和mitmproxy和appium配合使用的爬取app,各有所长,反反爬效果好。也可以使用程序实现自动爬取,但是封号概率高。
 

你可能感兴趣的:(scrapy,pymysql3,爬虫)