python爬虫设置代理

在反爬虫策略中经常用到代理

proxy = {
    'http': 'http://' + ip,
    'https': 'https://' + ip
}
print(proxy)
p = requests.get('http://myip.ipip.net/', headers=head, proxies=proxy,timeout = 3)

ip为ip+端口,类似于:127.0.0.1:8000

你可能感兴趣的:(Study--ing,python,#,Glidedsky爬虫挑战)