代理(英语:Proxy),也称网络代理,是一种特殊的网络服务,英文全称是(Proxy Server),其功 能就是代理网络用户去取得网络信息。形象的说:它是网络信息的中转站。代理服务器就好象一个大的 Cache,这样就能显著提高浏览速度和效率。
免费代理地址:https://proxy.mimvp.com/freesecret?proxy=in_hp&sort=&page=1
Requests模块设置代理的方式如下
import requests # 设置代理,多用于爬虫 proxies = {"http":"http://12.34.56.79:9527", "https":"https://12.34.56.79:9527"} # 1,普通的代理 res = requests.get(url="http://www.hnxmxit.com",proxies=proxies) print(res.content.decode("utf-8")) # 2,携带了登录的用户名和密码 # proxies1 = {"http":"http://用户名:密码@12.34.56.79:9527"} # res = requests.get(url="http://hmxmxit.com",proxies=proxies1) # print(res.content.decode("utf-8"))
Requests模块可以设置接收数据的超时时间,超出设定的时间还没有数据返回,就抛出异常。超时设 置有两种类型表达:float 、tuple
timeout():以秒为单位
如果远端服务器很慢,你可以让 Request 永远等待,传入一个 None 作为 timeout 值
代码示例:
import requests,time # 超时设置(以秒为单位) # 1,接收数据的超时时间 print(time.time()) response = requests.get(url="http://www.hnxmxit.com",timeout=1) print(time.time()) # 2,链接超时,接收超时 # 传入一个None 作为 timeout 值会一直等待 print(time.time()) res = requests.get(url="http://www.hnxmxit.com",timeout=(1,2)) # 以秒为单位(连接,接收) print(time.time())
在请求url时,服务器会自动把我们的请求重定向,可以使用response.history来查看重定向。如果不想进行自 动重定向,可以用参数allow_redirects关闭
设置重定向开关:allow_redirects:True/False
代码示例:
import requests # 设置重定向开关:allow_redirects:True/False res = requests.get(url="http://www.360buy.com",allow_redirects=True) # 设置重定向开关 print(res.history) # 查看重定向历史 print(res.url)
查看执行结果:
光学理论是没用的,要学会跟着一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
如果对你有帮助的话,点个赞收个藏,给作者一个鼓励。也方便你下次能够快速查找。
如有不懂还要咨询下方小卡片,博主也希望和志同道合的测试人员一起学习进步
在适当的年龄,选择适当的岗位,尽量去发挥好自己的优势。
我的自动化测试开发之路,一路走来都离不每个阶段的计划,因为自己喜欢规划和总结,
测试开发视频教程、学习笔记领取传送门!!!