python爬取拉钩网招聘信息分析

金9银10，又到了校招季，今天来看一下目前拉钩的Python工作技能要求和薪资待遇。

浏览器访问下

https://www.lagou.com/jobs/list_python/p-city_0?px=default&gx=&isSchoolJob=1#filterBox

观察xhr，这个positionajax很可疑，看看response，就是它了

请求url

请求头

参数

cookie，根据前辈的经验，拉钩采用动态token，防御伪造请求，重复提交

这个token，当第一次访问拉钩网时，会给你一个permanent cookie

我们利用requests.session()访问获取cookie，利用这个cookie值模拟positionajax

有了，将数据筛选一下，存入json

用pyecharts看看城市分布情况

北京一枝独秀，上海、广州位列2,3，北上广牛批。

薪资分布

五花八门，最低1k，最高50k，不知算什么水平，对比下java的

使用微词云看看技能标签

代码地址点我

求个star和关注。