python-pyquery 爬取网站图片尝试 —— 简单易懂

pyquery

pyquery 是 python 中的一个第三方库,目前博主也在研究当中,最近发现用 pyquery 实现爬虫的方法会简单得多,下面就对 pyquery 的使用进行一些简单的演示。

前面有一篇文章 —— 通过正则表达式进行网站图片的获取。本次实验的目的是使用 pyquery 进行网站图片的爬取并进行方法对比。

pyquery 实战开始:

from pyquery import PyQuery as pq
import requests
# 导入pyquery模块里的PyQuery方法 这个方法可以解析文件内容
# 这里还是需要使用requests的方法来获取网站的数据

url = "https://www.sanchuangedu.cn"
ret = requests.get(url)

if ret.status_code == 200:
    ht = ret.text
    pq_html = pq(ht, parser="html")
    # parser 是需要解析什么类型的文件
    # pic = pq_html("img").attr("src")
    # print(pic)
    pic = pq_html("img").items()
    # 获取html文中中的img标签(img标签也就是图片的标签内容,会获取到图片的数据)
    for temp in pic:
        print(temp.attr("src"))
        # 这里是输出img标签里的src元素 src元素就是图片的存储路径

运行结果为:

python-pyquery 爬取网站图片尝试 —— 简单易懂_第1张图片
再使用 通过正则表达式进行网站图片的获取 这篇文章后面的图片下载方法就可以达到下载图片的目的啦!
这个模块非常的简单好用噢!

你可能感兴趣的:(爬虫,python,python,html,爬虫)