python 爬取煎蛋网妹子的图片

昨晚跑完步，回家看了点小甲鱼的python视频，讲了点爬虫相关知识，于是今天兴致来了，尝试自己写写看，晚上再回去看看他是怎么实现的。

写的过程中发现对于正则表达式这块真是个坑，很多时候都我都是将一些url转换成字符串进行处理的，尚需学习。

源码如下：

import urllib.request
import os
import re
"""
    python version 3.3.5
    author:killvoon
    
"""

def get_page(url):
    req = urllib.request.Request(url, headers = {
    'Connection': 'Keep-Alive',
    'Accept': 'text/html, application/xhtml+xml, */*',
    'Accept-Language': 'en-US,en;q=0.8,zh-Hans-CN;q=0.5,zh-Hans;q=0.3',
    'User-Agent': 'Mozilla/5.0 (Windows NT 6.3; WOW64; Trident/7.0; rv:11.0) like Gecko'
    })
    url=urllib.request.urlopen(req).read()
    return(url)

#获得不同网页的关键id号
def get_page_id(url):
    page=get_page(url)
    page=page.decode('utf-8')
    pattern = re.compile(r'.*?',re.S)
    page_id=re.findall(pattern,page)
    page_id=str(page_id[0])
    num=page_id.find('[')
    page_id=page_id[num+1:40]
    return page_id

def save_image(pic_name,cnt):
       
       direct_path='f:/test/'
       image_data = get_page(pic_name)
       image_path=direct_path+"煎蛋网妹子图片"+str(cnt)+".jpg"

       f=open(image_path,'wb')
       f.write(image_data)
       print("正在保存图片")
       f.close()
       #with open(image_path,'wb') as image_file:
       #  image_file.write(image_data)
       #image_file.close()

#获得照片的url地址        
def get_image_url(page_url,page_id):
    page_url=get_page(page_url).decode('utf-8')
    pattern = re.compile(r'

咳咳。。。抓下来的图片有点污。。。请忽略。。。。