python中requests模块的安装与使用简单介绍

requests的底层实现就是urllib

requests在python2 和python3中通用,方法完全一样

requests能够自动帮助我们解压(gzip压缩的等)网页内容

安装requests模块: pip install requests

.核心代码: 发送get请求

response = requests.get(url)
response = requests.post(url,data=data)
  • response的常用属性:
    • response.text
    • respones.content 二进制形式的响应数据
    • response.status_code 响应状态吗
    • response.headers 响应头
    • response.request.headers 请求头
  • response.text 和response.content的区别
    • response.text
      • 类型:str
      • 解码类型: 根据HTTP头部对响应的编码作出有根据的推测,推测的文本编码
      • 如何修改编码方式:response.encoding=”gbk”
    • response.content
      • 类型:bytes
      • 解码类型: 没有指定
      • 如何修改编码方式:response.content.deocde(“utf8”)
    • 推荐使用response.content.deocde()的方式获取响应的html页面

 

你可能感兴趣的:(爬虫)