python爬虫学习--pixiv爬虫(1)--p站爬虫的登录

前段时间看了点爬虫的知识，自己也写了点，不怎么太好。。。总有错。。。

冷却了一段时间继续我的爬虫学习。。。

这次我的目标是爬遍pixiv。。。

（虽然有些不可能。。。

不过一点点来。。。

首先我们登陆一下看下p站登陆时的请求头信息

同时我们还需要看一下post方法我们要用到的参数

这样就可以进行p站爬虫登录功能的编写了

#coding:UTF-8

import urllib
import urllib2
import cookielib

url = 'https://www.pixiv.net/login.php'
filename = 'cookie.txt'

cookie = cookielib.MozillaCookieJar(filename)
opener = urllib2.build_opener(urllib2.HTTPCookieProcessor(cookie))
#build_opener函数是用来自定义opener对象的函数

login_data = urllib.urlencode({
    'mode':'login',
    'pass':'password',#你的账号密码
    'pixiv_id':'pixivid',#你的pixivid
    'return_to':'/',
    'skip':1
    })
#这个是p站的登陆信息
header = {
    'Accept-Language':'zh-CN,zh;q=0.8',
    'Referer':'https://www.pixiv.net/login.php?return_to=0',
    'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:45.0) Gecko/20100101 Firefox/45.0'
    }
#登陆所使用的请求头信息
request = urllib2.Request(
    url,
    data = login_data,
    headers = header)

login_pixiv = opener.open(request)
#利用前面的请求头信息与cookie信息进行登陆

cookie.save(ignore_discard = True , ignore_expires = True)
#登陆成功后进入收藏界面
bookmark_url = 'http://www.pixiv.net/bookmark.php'

login_pixiv =opener.open(bookmark_url)
page = login_pixiv.read()

file_html = open('pixiv-1.html','w')
file_html.write(page)
file_html.close()

print page  #其实这个print我只是想看看是否登陆成功

上面的代码可已实现p站的登陆，下一步就是进一步分析代码将我们想要的图片爬下来。