小白自总结【图片爬取】Python爬取Flickr图片数据

(一)发现问题→分析问题→提出解决方案

小白自总结【图片爬取】Python爬取Flickr图片数据_第1张图片

小白自总结【图片爬取】Python爬取Flickr图片数据_第2张图片

  使用Python爬取Flickr图片数据,从网上搜的代码报错“由于连接方在一段时间后没有正确答复或连接的主机没有反应,连接尝试失败”→威屁恩的问题

(二)解决☞威屁恩配置

1.配置Shadowsocks 

参考http://blog.csdn.net/mnmlist/article/details/43115157 

小白自总结【图片爬取】Python爬取Flickr图片数据_第3张图片

小白自总结【图片爬取】Python爬取Flickr图片数据_第4张图片

2.配置Proxifier

参考如http://wenku.baidu.com/link?url=BMrmbWcSWxAlyQ96GXoAugZSZh8pCjadZaRUx1eEl01dBaDUfyQGqfZeyshsFW-aD1xML_T5uA9h_wxOScUcYfni7aEVlzPLp6qp24R46lK


 小白自总结【图片爬取】Python爬取Flickr图片数据_第5张图片

(三)回到Python

大致解决了威屁恩问题回到Python代码

小白自总结【图片爬取】Python爬取Flickr图片数据_第6张图片

Python代码成功运行but 如何由图片url下载图片?

小白自总结【图片爬取】Python爬取Flickr图片数据_第7张图片

      发现网上大多是关于JAVA的代码,请教侯老师——python也能实现由图片url下载到本地,这就需要你学习python的网络地址请求和写文件的知识点了。

(四)回到Flickr

1.直接由爬取的图片url地址图片

2. Use the URL of your photostream to →find the Flickr ID number (also works for groups) 即下方网址:

https://farm6.staticflickr.com/5499/30936886782_901ec6c397_c.jpg

3.功能“发掘”-“世界地图”→已标示地理位置的项目

搜尋 (例如,建築物、城市、森林) 拍攝於 (例如,鄰近地區、城市、州/省、區)

小白自总结【图片爬取】Python爬取Flickr图片数据_第8张图片

小白自总结【图片爬取】Python爬取Flickr图片数据_第9张图片

Flickr的世界地图搜 疑问:

如上图①搜得那么多图片,地图上为何只有部分点?

(这是显示的一种表现形式,你放大之后,会出现其他的)by曹师哥

如上图②为何搜山东师范大学 济南不是定位点最多的地方?

这是图片标签的问题,这不是定位搜索,显示的不是地理位置,是标签主题搜索)

小白自总结【图片爬取】Python爬取Flickr图片数据_第10张图片

(五)回到Python 由url下载图片

小白自总结【图片爬取】Python爬取Flickr图片数据_第11张图片

小白自总结【图片爬取】Python爬取Flickr图片数据_第12张图片

你可能感兴趣的:(Python,数据爬取)