Python爬虫工具相关

首先python2和python3共存,之后要进行pip的安装了

python2 -m pip install -U pip
python3 -m pip install -U pip

先贴一个在win7上 python 无法安装 lxml的问题

  1. 下载对应操作系统的lxml包
    lxml其他python无法安装的模块也可以使用这种方式安装, 从这个地址也能找到对应的whl
  2. 安装wheel
    pip3 install wheel
  3. 安装lxml
    pip3 install 你下载的地址\lxml-3.6.0-cp35-cp35m-win32.whl

Selenium+Phantomjs数据抓取

Phantomjs相关下载

那些python3上不能用的库

MySQLdb不支持python3,python3上取代的是pymysql
Scrapy不支持windows上的python3,不过linux上的python3还是支持的

  1. 更新模块
    pip install --upgrade ***(比如pyinstaller)

你可能感兴趣的:(Python爬虫工具相关)