Python 爬虫---百度首页

#这个是urllib2的前身
import urllib.request
#把自己伪装成浏览器,防止被封。。。
ua_headers = {"User-Agent" : "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/54.0.2840.99 Safari/537.36"}
#通过urllib2.Request()方法构造一个请求对象
request = urllib.request.Request("http://www.baidu.com/",headers = ua_headers)

#向指定的url地址发送请求,并返回服务器响应的类文件对象
response = urllib.request.urlopen(request)
#服务器返回的类文件对象支持Python文件对象的操作方法
#read()方法就是读取文件里的全部内容,返回字符串
html = response.read()
#打印响应的内容
print(html)

结果：

D:\Python3Work\u1\venv\Scripts\python.exe D:/Python3Work/u1/爬虫基础/urllib2的使用.py
b'\n\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\t\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\t\n        \n\t\t\t        \n\t\n\t\t\t        \n\t\n\t\t\t        \n\t\n\t\t\t        \n\t\t\t    \n\n\t\n        \n\t\t\t        \n\t\n\t\t\t        \n\t\n\t\t\t        \n\t\n\t\t\t        \n\t\t\t    \n\n\t\n        \n\t\t\t        \n\t\n\t\t\t        \n\t\n\t\t\t        \n\t\n\t\t\t        \n\t\t\t    \n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n    \n    \n    \n\t\n    \n    \n    \n    \n\t\n\t\n\t\n\t\n\t\n\t\n\t\n\t\n\t\n\t\n    \n    \n    \n\n\n\n\n\n\n\n\n\n    \n\n\n\n\n    \n\n\n\n\t\n    
\n        \n\n\n        \n\n\n
\xe8\xbe\x93\xe5\x85\xa5\xe6\xb3\x95
\xe6\x89\x8b\xe5\x86\x99
\xe6\x8b\xbc\xe9\x9f\xb3
\xe5\x85\xb3\xe9\x97\xad
\xe7\x99\xbe\xe5\xba\xa6\xe9\xa6\x96\xe9\xa1\xb5\xe8\xae\xbe\xe7\xbd\xae\xe7\x99\xbb\xe5\xbd\x95
\xe6\x96\xb0\xe9\x97\xbbhao123\xe5\x9c\xb0\xe5\x9b\xbe\xe8\xa7\x86\xe9\xa2\x91\xe8\xb4\xb4\xe5\x90\xa7\xe5\xad\xa6\xe6\x9c\xaf\xe7\x99\xbb\xe5\xbd\x95\xe8\xae\xbe\xe7\xbd\xae\xe6\x9b\xb4\xe5\xa4\x9a\xe4\xba\xa7\xe5\x93\x81
\n\n\n\n
\n
\n    \xe7\xbd\x91\xe9\xa1\xb5\n    \xe8\xb5\x84\xe8\xae\xaf\n    \xe8\xb4\xb4\xe5\x90\xa7\n    \xe7\x9f\xa5\xe9\x81\x93\n    \xe9\x9f\xb3\xe4\xb9\x90\n    \xe5\x9b\xbe\xe7\x89\x87\n    \xe8\xa7\x86\xe9\xa2\x91\n    \xe5\x9c\xb0\xe5\x9b\xbe\n    \xe6\x96\x87\xe5\xba\x93\n    \xe6\x9b\xb4\xe5\xa4\x9a\xc2\xbb\n
\n
\n\n        \n\r\n
\r\n\t
\r\n\t\t
\r\n\t\t\t
\r\n\t\t\t
\r\n\t\t\t\t
\xe4\xb8\x8b\xe8\xbd\xbd\xe7\x99\xbe\xe5\xba\xa6APP
\r\n\t\t\t\t
\xe6\x9c\x89\xe4\xba\x8b\xe6\x90\x9c\xe4\xb8\x80\xe6\x90\x9c  \xe6\xb2\xa1\xe4\xba\x8b\xe7\x9c\x8b\xe4\xb8\x80\xe7\x9c\x8b
\r\n\t\t\t
\r\n\t\t
\r\n\t
\r\n
\n\r\n
\r\n\r\n
\xe6\x8a\x8a\xe7\x99\xbe\xe5\xba\xa6\xe8\xae\xbe\xe4\xb8\xba\xe4\xb8\xbb\xe9\xa1\xb5\xe5\x85\xb3\xe4\xba\x8e\xe7\x99\xbe\xe5\xba\xa6About  Baidu\xe7\x99\xbe\xe5\xba\xa6\xe6\x8e\xa8\xe5\xb9\xbf(\xe4\xba\xac)-\xe7\xbb\x8f\xe8\x90\xa5\xe6\x80\xa7-2017-0020
©2019 Baidu \xe4\xbd\xbf\xe7\x94\xa8\xe7\x99\xbe\xe5\xba\xa6\xe5\x89\x8d\xe5\xbf\x85\xe8\xaf\xbb \xe6\x84\x8f\xe8\xa7\x81\xe5\x8f\x8d\xe9\xa6\x88 \xe4\xba\xacICP\xe8\xaf\x81030173\xe5\x8f\xb7  \xe4\xba\xac\xe5\x85\xac\xe7\xbd\x91\xe5\xae\x89\xe5\xa4\x8711000002000001\xe5\x8f\xb7 
\n\n        
\n        
\n    
\n    
\n    \n    \n    \n    \n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\r\n\n\n\r\n'

Process finished with exit code 0