Python3.5下安装scrapy

主要运行系统和环境:Ubuntu 16.04.3 LTS、 python3.5、 Python3-pip

安装scrapy之前需要安装一些组件和依赖库,包括:build-essential、python3-dev、 libxml2、 libxml2-dev、libxslt1-dev、libssl-dev、libffi-dev、zlib1g-dev、;Twisted、 w3lib、 lxm、 pyOpenSSL等。

有些依赖可能在安装之前已经存在,但不影响执行:

sudo apt-get install build-essential python3-dev libssl-dev libffi-dev libxml2 libxml2-dev libxslt1-dev zlib1g-dev
sudo pip3 install Twisted w3lib lxm

然后安装Scrapy和pyOpenSSL(该系统环境下,已经安装pyOpenSSL):

sudo pip3 install Scrapy

参考文章:
腾讯云主机Python3环境安装Scrapy爬虫框架过程及常见错误
ubuntu下python3安装scrapy,OpenSSL

你可能感兴趣的:(Python3.5下安装scrapy)