selenium爬虫利用mitmproxy实现js拦截

1.下载mitmproxy

 pip install mitmproxy

2.新建HTTPProxy.py文件,写入如下内容

TARGET_URL = 'https://g.alicdn.com/secdev/sufei_data/3.6.11/index.js' #这个是淘宝的index.js文件的
INJECT_TEXT = 'Object.defineProperties(navigator,{webdriver:{get:() => false}});' #js执行文件

def response(flow):
        if flow.request.url.startswith(TARGET_URL):
            flow.response.text = INJECT_TEXT + flow.response.text
            print('注入成功')
        if 'um.js' in flow.request.url or '115.js' in flow.request.url:
            # 屏蔽selenium检测
            flow.response.text = flow.response.text + INJECT_TEXT

3.运行mitmdump命令
执行HTTPProxy文件，-p开启9000代理端口，在selenium中设置 127.0.0.1：9000代理即可。

mitmdump -s HTTPProxy.py -p 9000