Selenium+Python完成个人购物订单爬取(1)

写在前面

仅供自己使用,不要去做违法的事情,特此记录。

安装环境

操作系统 : mac os

修改你的安装源

cd ~
mkdir .pip
cd .pip
touch pip.conf
vi pip.conf

[global]
index-url = http://mirrors.aliyun.com/pypi/simple/
[install]
trusted-host = mirrors.aliyun.com

安装selenium

pip3 install selenium --user

安装ChromeDriver

前面我们安装好了selenium库,但是它是一个自动化测试工具,需要浏览器配合使用,这里我们选择Chrome浏览器。

Selenium+Python完成个人购物订单爬取(1)_第1张图片
地址:http://npm.taobao.org/mirrors/chromedriver/

下载相近的版本且和你系统一致的zip包,完成解压后放入/usr/local/bin

你是windows 系统的就放在python的\Scripts文件夹下。
Selenium+Python完成个人购物订单爬取(1)_第2张图片
给予权限

udo chmod u+x,o+x   /usr/local/bin/chromedriver

测试

from selenium import webdriver
import time

wd = webdriver.Chrome()
wd.get("https://www.baidu.com")
# 输入关键词
wd.find_element_by_id("kw").send_keys("今日新闻")
wd.find_element_by_id("su").click()
time.sleep(3)
wd.quit()

Selenium+Python完成个人购物订单爬取(1)_第3张图片

环境安装完毕。
其他系统安装大同小异,可以自行搜索。

必备知识

  • xpath匹配
  • selenium设置
  • 基本python常识,列表,保存文件,保存数据库等

继续查看Selenium+Python完成个人购物订单爬取(2)

你可能感兴趣的:(Python)