该项目主要参考与:http://c.biancheng.net/python_spider/selenium-case.html你看完上述项目内容之后，会发现京东登录是一个比较坑的点，selenium控制浏览器没有登录京东

安装教程参考:http://c.biancheng.net/python_spider/selenium.html1.谷歌浏览器和谷歌驱动版本要对应(但是最新版本谷歌对应的驱动是没有的,因此要下载谷歌历史其他版本

/bin/bashcd/usr/local/python_spider/testnohuppipenvrunpython3.

平时都是在IDE（PyCharm）里直接运行Python文件，后来尝试通过命令行来运行的时候，发现出问题了：Traceback(mostrecentcalllast):File"/opt/web/python_spider

参考教程http://c.biancheng.net/python_spider/lxml.html一安装1.pip安装c:\>pip3installlxml二lxml功能介绍1.ElementTree

简单粗暴认识爬虫（Spider）1、三种分类2、编写流程3、常用的基本方法二、开启第一个爬虫程序爬取网页爬取百度贴吧数据送上大佬文章地址，一起学习，如有侵权请联系http://c.biancheng.net/python_spider

scrapy框架编写的脚本https://github.com/luweiwei1111/python_spider/tree/master/scrapy/cnnvd说明：1.本程序用于爬取cnnvd网址的数据

importurllib.requesturllib.request.urlretrieve("http://www.baidu.com","E:\\python_spider\\tmp\\test.html

#-*-coding:utf-8-*-importurllibfromurllibimportparse,requestdefwritePage(html,filename):'''将获取的内容写入文件'''print("keepfile....")print(type(html))#这里的html类型是bytes写文件的时候要设置类型是wb+withopen(filename,"wb+")asf