爬虫(一)-环境搭建

一.概述

1. 想要做个爬虫平台，以python为基础，使用django框架，系统centos

2. 故在开始前，先将python-django的环境部署好

二.开始部署

1. 安装VMware虚机，使用虚机作为系统环境，我本人安装的是VMware® Workstation 12 Pro

2. 下载setuptools：            

   https://pypi.python.org/pypi/setuptools

3. 下载Django-2.0.2.tar.gz ：   

   https://www.djangoproject.com/download/

4. 使用winscp将以上两个两个文件上传到centos上

5. 安装依赖库

yum install gcc patch libffi-devel python-devel  zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel gdbm-devel db4-devel libpcap-devel xz-devel -y 

 

    6.安装python3

#!/bin/bash​
#下载python3
wget https://www.python.org/ftp/python/3.6.4/Python-3.6.4.tgz
#解压
tar -zxvf Python-3.6.4.tgz​
#进入执行目录
cd Python-3.6.4​
#创建安装目录
mkdir /usr/local/python3​
#创建安装路径
 ./configure --prefix=/usr/local/python3
#编译
make
#安装
make install​
#备份旧版本
mv /usr/bin/python /usr/bin/python2​
#创建python3环境
 ln -s /usr/local/python3/bin/python3  /usr/bin/python
#查找yum文件路径
whereis yum​
#修改yum文件
vi /usr/bin/yum​
#将原来的python修改为
#!/usr/bin/python2.6​

7.安装Setuptools

#!/bin/bash​
#解压
unzip setuptools-38.5.1.zip
​#进入安装目录
cd setuptools-38.5.1/​
#安装
python setup.py install​

8.安装django

#!/bin/bash​
#解压
tar -zxvf Django-2.0.2.tar.gz
​#进入解压目录
cd Django-2.0.2/​
#安装
python setup.py install

三. 检测部署结果

 

以上，django环境部署完成~