爬虫更换IP地址的两种方法

爬虫更换IP地址有多种方法，以下是两种常用的方法：

1. 使用动态IP拨号服务器： 动态IP拨号服务器是一种服务，每次拨号都会更换一个新的IP地址。你可以使用这种服务来实现爬虫更换IP地址的功能。当你的爬取频次过快或者被网站封禁时，可以断开网络再重新拨号，从而获取一个新的IP地址。这样可以绕过网站的限制，继续进行爬取。

2. 使用代理IP： 代理IP是一种通过中间服务器来访问目标网站的方式。你可以从代理IP提供商那里购买一些可用的代理IP地址，然后将其替换到你的爬虫代码中。在发送请求时，通过设置代理IP来实现更换IP地址的效果。这样可以隐藏你的真实IP地址，提高爬虫的稳定性和安全性。

以下是一个使用代理IP的示例代码：

import requests # 代理IP列表 proxies = { 'http': 'http://ip:port', 'https': 'http://ip:port' } # 请求头 headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3' } # 爬虫程序 def spider(): url = 'http://example.com' response = requests.get(url=url, headers=headers, proxies=proxies) print(response.text) if __name__ == '__main__': spider()

在上述代码中，你需要将http://ip:port替换为可用的代理IP地址。然后运行代码，爬虫就会使用代理IP来发送请求，从而实现更换IP地址的效果。