在ubuntu下安装pyspider

如图1所示,首先安装依赖库:

#更新源

sudo apt-get update 



#更新pip
python -m pip install -U pip


#安装依赖包
sudo apt-get install python-dev
sudo apt-get install python-distribute
sudo apt-get install libcurl4-openssl-dev
sudo apt-get install libxml2-dev
sudo apt-get install libxslt1-dev

sudo apt-get install pythonlxml

2,以上依赖库安装成功后安装pyspider:

pip安装pyspider

3,PhantomJS是一个基于WebKit的服务器端JavaScript API。它全面支持web而不需浏览器支持,其快速,原生支持各种Web标准:DOM处理,CSS选择器,JSON,Canvas和SVG.PhantomJS可以用于页面自动化,网络监测,网页截屏以及无界面测试等。

sudo apt-get install phantomjs

4,an'zhuang安装完成后运行pyspider:

pyspider all或pyspider

通过浏览器访问http:// IP:5000访问pyspider仪表板。正常显示pyspider页面即可。

你可能感兴趣的:(爬虫,python)