scrapy安装笔记并使用

1.安装方法:
    Linux Mac:pip install scrapy
    windows:简单使用直接pip install scrapy即可。
        1.pip install wheel#用于安装twisted
        2.下载twisted,下载地址:http://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted(异步数据下载需求)
        3.安装twisted:pip install Twisted-20.3.0-cp36-cp36m-win_amd64.whl
        4.在存放路径cmd命令行运行
          pip install pywin32#https://pypi.org/project/pywin32/#files
           python -m pip install --upgrade pip
           pip install pywin32-302-cp36-cp36m-win_amd64.whl
        5.pip install scrapy
        验证方法:windows下:scrapy -h

2.使用

这个我参考这个博主

你可能感兴趣的:(爬虫,linux,运维,服务器)