urlib库之urlopen函数用法

urlopen函数:
在python3的urllib库中,所有和网络请求相关的方法,都被集到urllib.request模块下面了,以先来着下urlopen函数基本的使用:
from urllib import request
resp = request.urlopen('http://www.baidu.com')
print(resp.read())
实际上,使用浏览器浏览百度,右键查看源代码,你会
就已经帮我们把百度的首页全部代码爬下来了。
以下对urlopen函数进行详细讲解
1、url:请求的url,
2、data:请求的data,如果设置了这个值
3、返回值:返回值是一个http.client.HttpResponse对象

#encoding: utf-8


from urllib import request
from urllib import parse

# urlretrieve函数的用法
# request.urlretrieve('https://timgsa.baidu.com/timg?image&quality=80&size=b9999_10000&sec=1511283869079&di=da3892a20ff8b4d535152e303f0c9ae6&imgtype=0&src=http%3A%2F%2Fi2.17173cdn.com%2F2fhnvk%2FYWxqaGBf%2Fcms3%2FESweDEbleCrnwrx.jpg','luban.jpg')

# urlencode函数的用法
# params = {'name':'张三',"age":18,'greet':'hello world'}
# result = parse.urlencode(params)
# print(result)


# url = 'http://www.baidu.com/s'
# params = {"wd":"刘德华"}
# qs = parse.urlencode(params)
# url = url + "?" + qs
# resp = request.urlopen(url)
# print(resp.read())


# parse_qs函数的用法
params = {'name':'张三',"age":18,'greet':'hello world'}
qs = parse.urlencode(params)
print(qs)
result = parse.parse_qs(qs)
print(result)

 

你可能感兴趣的:(爬虫,人工智能)