python网络爬虫源代码(可直接抓取图片)

1、根据给定的网址获取网页源代码  

2、利用正则表达式把源代码中的图片地址过滤出来  

3、根据过滤出来的图片地址下载网络图片

 


import re
import urllib.request
def gethtml(url):
    page=urllib.request.urlopen(url)
    html=page.read()
    return html
def getimg(html):
    reg = r'src="(.*?\.jpg)"'
    img=re.compile(reg)
    html=html.decode('utf-8')#python3
    imglist=re.findall(img,html)
    x = 0
    for imgurl in imglist:
        urllib.request.urlretrieve(imgurl,'%s.jpg'%x)
        x = x+1
html=gethtml("http://news.ifeng.com/a/20161115/50258273_0.shtml")
print(getimg(html))

 

把代码直接导入解释器,可直接运行抓取图片。

如果有什么不懂的可以评论,看到就会回复,或者添加本人QQ

看完文章记得点赞哦!

你可能感兴趣的:(python)