python爬虫学习之第一天

一、学习目标

1.简单学会下载一个网页。

2.学会使用urllib模块中的urllib.request模块。

3.简单理解爬取网页的过程。

二、代码实现与简单说明

importurllib.request ##导入request模块

url_name="http://www.0510kg.com"##定义一个变量，用来存储需要下载的网址

file_text=urllib.request.urlopen(url_name)##使用urllib.request.urlopen()方法，打开网页

html_text=file_text.readlines()##使用readlines()方法，读取网页代码，readlines读取的是网页的全部内容，返回一个列表变量

with open("1.html",'wb')as f:##将读取结果存储在程序当前目录的1.html文件中

f.writelines(html_text)##写入读取内容到文件

三、查看根目录，有1.html存在，打开文件可看见如下：