零基础实现爬虫

首先安装python3在自己的电脑上
然后安装pip添加requests和beautifulsoup两个python的第三方库
python3安装pip(一个安装管理python第三方库的软件)

pip3 install PackageName

通过如下命令安装第三库 packagename表示第三方库的名字

python3 -m pip install PackageName

在介绍几个pip的常用操作

pip install --upgrade pip
pip uninstall flask
pip list        

安装两个库的命令

 python3 -m  pip install beautifulsoup4
 python3 -m  pip install requests

然后下载一个python的编译器pycharm(https://www.jetbrains.com/pycharm/),百度即可下载,
安装完成之后新建一个项目,然后在项目下新建一个py文件
然后写入如下代码

import  requests
from bs4 import  BeautifulSoup
import urllib.request

url='http://jandan.net/pic/page-7707'
header = {'User-Agent':'Mozilla/5.0 (Windows NT 6.1; WOW64; rv:23.0) Gecko/20100101 Firefox/23.0'}

# header={'User-Agent':'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_12_1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/50.0.2661.102 Safari/537.36'}
source_code=requests.get(url,headers=header)

plain_text=source_code.text

download_links=[]
Soup=BeautifulSoup(plain_text)
folder_path="/Users/mymac/Desktop/a3/"
for pic_tag in Soup.find_all("img"):
    pic_link=pic_tag.get('src')
    download_links.append(pic_link)

for item in download_links:
    res=requests.get(item)
    with open(folder_path+item[-10:],'wb') as f:
        f.write(res.content)

运行即可。其中import表示导入库。其他不懂的可自行百度。其中请将folder_path改为你的电脑的路径

你可能感兴趣的:(python学习)