2024年Python爬虫：爬取招聘网站系列 - 前程无忧

import pprint # 格式化输出模块

import csv # 保存csv数据

算了，我直接贴代码吧，流程都写清楚了，我把注释也标上了。

兄弟们在学习的时候没有人解答和好的学习资料教程就很痛苦，解答或者其它教程都在这了 电子书、视频都有！

对应视频教程：

【Python爬虫】招聘网站实战合集第一弹：爬取前程无忧，零基础也能学会！

f = open(‘python招聘数据1.csv’, mode=‘a’, encoding=‘utf-8’, newline=‘’)

csv_writer = csv.DictWriter(f, fieldnames=[

‘标题’,

‘公司名字’,

‘城市’,

‘薪资’,

‘招聘信息’,

‘公司属性’,

‘公司规模’,

‘企业性质’,

‘招聘发布日期’,

‘公司详情页’,

‘招聘详情页’,

])

csv_writer.writeheader() # 写入表头数据

for page in range(1, 11):

1. 发送请求, 对于url地址发送请求

url = f’https://search.51job.com/list/010000%252C020000%252C030200%252C040000%252C090200,000000,0000,00,9,99,python,2,{page}.html’

把python代码进行伪装, 伪装浏览器对服务器发送请求