Python数据挖掘 之 数据处理(使用pandas对智联招聘上的北京地区python岗位进行数据清洗)

上两篇我们爬了一篇智联招聘的数据,主要是北京地区python开发岗位的数据,数据量不是很大,几千条,这一篇文章我们队智联招聘的数据进行数据处理。

一直以来,我以为的数据处理是已经在python爬虫阶段已经做好了,其实并不是,python爬虫并没有把数据处理这一部分的工作完全给做好,数据处理只是数据挖掘的一小部分,接下来,就是在jupyter notebook上进行数据处理,到中途就卡壳掉一部分,不过,等我弄明白会继续补上的,毕竟学无止境。

## 数据处理部分
"""
1、去重工作地址,获取地址坐标(高德) 
2、去重公司,获取公司情况 
3、工作筛选,由于智联上爬取的工作,好多事工作内容里有python,只用python谢谢脚本啥的,实际标题上找的是java啊,php啊,这样的工作要删掉 
4、剔除数据异常值,过大过小,NA值 
5、工作根据,工作,公司情况,工作内容,技能要求等进行评分,目的是找到适合我的工作

"""

# 导入数据
import pandas as pd
import numpy as np
import pymongo
client = pymongo.MongoClient("localhost",connect=False)
db = client["zhilian"]
table=db['python']

df = pd.DataFrame(list(table.find()))
# 在df中删除mongo里的_id 字段
del df['_id']
# 查看头信息
df.head()
# 查看全部内容
#df
.dataframe tbody tr th:only-of-type { vertical-align: middle; } .dataframe tbody tr th { vertical-align: top; } .dataframe thead th { text-align: right; }
address company job_info job_link job_name job_tags salary
0 北京市朝阳区裕民路12号 中国国际科技会展中心A座10层 大连飞创信息技术有限公司 岗位职责:1、按照有关制度和规范的要求,承担代码的编写工作。对开发任务、需求理解透彻,积极配… https://m.zhaopin.com//jobs/210653218250637/ C++开发工程师 五险一金;年底双薪;绩效奖金;加班补助;交通补助;餐补;采暖补贴;定期体检 1.5万-2万
1 丰台区航丰路一号时代财富天地大厦28层 深圳市八斗才数据有限公司 岗位职责:1、 负责互联网网站产品开发;2、 参与产品设计、架构设计和代码编写;3、 负责问… https://m.zhaopin.com//jobs/cz562550030j000298… python开发工程师(北京) 五险一金;年底双薪;绩效奖金;补充医疗保险;定期体检;员工旅游;带薪年假;弹性工作 1万-1.8万
2 北京市海淀区东北旺西路八号中关村软件园9号楼国际软件大厦 深圳市芒柠科技有限公司 岗位职责:1、维护现有的平台代码。2、参与项目的架构设计,明确负责开发部分的设计需求。3、按… https://m.zhaopin.com//jobs/cz466965980j000547… python开发工程师(北京) 五险一金;年底双薪;绩效奖金;补充医疗保险;员工旅游;带薪年假;弹性工作;加班补助 1万-1.5万
3 北京市朝阳区高碑店陈家林9号院华腾世纪总部公园A座3楼 深圳市源极光科技有限公司 技术要求:1、精通Python语言,熟悉Python多线程 socket通信机制;2、精通流… https://m.zhaopin.com//jobs/cz897833860j000551… python工程师(北京) 五险一金;补充医疗保险;定期体检;绩效奖金;年底双薪;带薪年假;弹性工作;员工旅游 1万-1.5万
4 海淀区中关村软件园11号楼大洋大厦 深圳市芒柠科技有限公司 岗位职责:1. 负责云平台应用的开发维护;2. 负责服务器端API的设计与开发。岗位要求:1… https://m.zhaopin.com//jobs/cz730936640j000955… Python开发工程师(北京) 五险一金;补充医疗保险;定期体检;绩效奖金;员工旅游;带薪年假;弹性工作;节日福利 1万-1.5万
5 北京市海淀区苏州街3号大恒科技大厦南座17层 北京乐学创想教育科技有限公司 岗位职责:1、题库全栈开发和维护,包括需求分析、技术改进、后期维护2、构建数据分析模型,对视… https://m.zhaopin.com//jobs/244101282250512/ Python工程师 节日福利;五险一金;餐补;创业公司 1.5万-3万
6 北京市朝阳区来广营中街甲1号朝来科技产业园创远路36号院4-6号楼 北京尚德在线教育科技有限公司 岗位职责:1、负责公司电商平台如天猫微店、京东、苏宁等商城日常的运营管理,包括店铺整体策划、… https://m.zhaopin.com//jobs/424628486272009/ python自动化 创业公司;无试用期;绩效奖金;不加班 1千-2千
7 北京市海淀区宝盛北里西区28号天丰利商城4层 北京欣如信科技有限公司 职位职责:1. 基于 Python 的分布式集群管理软件开发2. 基于 Web 的工具软… https://m.zhaopin.com//jobs/567369733250977/ Python实习生 五险一金;年底双薪;绩效奖金;全勤奖;员工旅游;节日福利;不加班 8千-1万
8 北京市海淀区宝盛北里西区28号天丰利商城4层 北京欣如信科技有限公司 工作方向openstack、 金融支付云平台、网盘、云存储体系、TCP/IP网关服务等技术要… https://m.zhaopin.com//jobs/567369733250978/ Python开发实习(接受零基础) 五险一金;年底双薪;绩效奖金;全勤奖;员工旅游;节日福利;不加班 8千-1万
9 北京市海淀区上地农大南路88号万霖大厦3层 北京云纵信息技术有限公司 岗位职责:1)负责业务系统运行环境的基础服务管理,系统架构的维护;2)参与基于大数据平台的维… https://m.zhaopin.com//jobs/311289936253904/ linux运维工程师(熟练python) 节日福利;五险一金;绩效奖金;加班补助;交通补助;餐补;带薪年假;健身俱乐部 1.8万-2.8万
10 后沙峪安庆大街巨鸿大厦A座5层 天津狮桥国际物流有限公司 一、岗位职责:1、搭建系统开发环境,完成系统框架和核心代码的实现,负责解决开发过程中的技术问… https://m.zhaopin.com//jobs/670247822251376/ Python软件开发工程师 五险一金;绩效奖金;包住;餐补;通讯补贴;带薪年假 1万-2万
11 北京市海淀区互联网金融中心21层 北京融七牛信息技术有限公司 岗位职责:1. 负责天机风控系统模型在线服务的架构设计、优化和研发工作; 2. 负责线上服务… https://m.zhaopin.com//jobs/435840920250697/ 高级python研发工程师(000650) 五险一金;绩效奖金;餐补;通讯补贴;补充医疗保险;定期体检;节日福利 2.5万-4万
12 北京市朝阳区工体 北京科锐国际人力资源股份有限公司 岗位职责:1. 基于公司CRM系统 的产品研发、以及项目开发;2. 公司内部电商平台开发工作… https://m.zhaopin.com//jobs/263940938259405/ 直聘软件研发(Golang , Python, Ruby) 节日福利;周末双休;五险一金;年底双薪;绩效奖金;年终分红;补充医疗保险;定期体检 1.5万-2万
13 北京市海淀区西北旺东路10号院东区1号楼领创空间2层204A 北京彼速信息技术有限公司 职位要求:1.本科以上学历,计算机相关专业;2.熟悉B/S软件结构;3. 精通C#,熟练掌握… https://m.zhaopin.com//jobs/136473062250465/ C#/Asp.Net高级软件工程师 五险一金 1万-2万
14 北京市东城区和平里东街11号雍和航星园三号楼一层 浙江齐聚科技有限公司北京分公司 1. 负责产品功能性需求的开发、维护。2. 负责优化系统的性能和稳定性3. 能独立完成个人承… https://m.zhaopin.com//jobs/32922521700041200311/ 高级java工程师 2万-3万
15 (中关村)北京市海淀区王庄路1号清华同方科技广场A座17层 北京固鸿科技有限公司 岗位职责:1、负责公司软件系统集成开发;2、按规范编写系统需求、概要设计、详细设计及系统部署… https://m.zhaopin.com//jobs/137279958250759/ Windows C++软件开发工程师 五险一金;年终分红;交通补助;带薪年假;补充医疗保险;定期体检;员工旅游;节日福利 1万-2万
16 马尼拉分公司 皇室科技有限公司 只要你有能力,薪资不是问题!只要你有能力,薪资不是问题!任职要求1、计算机及相关专业,国家统… https://m.zhaopin.com//jobs/cz735252640j001365… php工程师/php程序员/php 住房补贴;每年多次调薪;健身俱乐部;包吃;包住;房补;通讯补贴;带薪年假 1.5万-2.5万
17 北京市朝阳区北京市朝阳区广渠路3号竞园图片产业园1号库 Forgame–云游控股集团 岗位职责:1、负责在线娃娃机的管理后台系统的研发2、负责统计后台搭建 3、负责监控后台搭建1… https://m.zhaopin.com//jobs/571816225250634/ python后台研发工程师 2万-3万
18 北京市海淀区东北旺西路八号中关村软件园9号楼国际软件大厦 深圳市源极光科技有限公司 职位职责:1、负责产品的服务端开发;2、负责优化产品的性能,根据产品设计完成高质量的服务端产… https://m.zhaopin.com//jobs/562114535250039/ python开发工程师 [北京] 五险一金;年底双薪;绩效奖金;带薪年假;弹性工作;补充医疗保险;定期体检;员工旅游 1.5万-2万
19 北京市海淀区东北旺西路八号中关村软件园9号楼国际软件大厦 深圳市源极光科技有限公司 岗位职责:1、负责数据后台服务的设计、开发、优化、测试等研发工作;2、负责支撑业务的其他项目… https://m.zhaopin.com//jobs/cz562114530j000297… python开发工程师(北京) 五险一金;年底双薪;绩效奖金;补充医疗保险;定期体检;员工旅游;带薪年假;弹性工作 1万-1.5万
20 北京市海淀区西二旗 广州百单网互联网科技有限公司 岗位职责:1、爬虫系统开发和优化;2、文档识别和提取;3、互联网数据采集。专业素质要求:1、… https://m.zhaopin.com//jobs/444406089252927/ python爬虫数据采集实习生 五险一金;绩效奖金;餐补;房补;带薪年假;弹性工作;定期体检;节日福利 4千-6千
21 北京市海淀区西二旗 广州百单网互联网科技有限公司 岗位职责:1. 参与公司软件产品后台研发和维护工作;2. 参与建筑物联网数据分析算法的设计和… https://m.zhaopin.com//jobs/444406089252925/ Python工程师招实习生 五险一金;绩效奖金;餐补;房补;带薪年假;弹性工作;定期体检;节日福利 4千-6千
22 北京市海淀区西二旗 广州百单网互联网科技有限公司 【岗位职责】1、负责效率工具的后台开发工作,具体包括需求分析、文档撰写、设计编码、测试运维、… https://m.zhaopin.com//jobs/444406089252924/ Python开发工程师待遇从优 五险一金;绩效奖金;餐补;房补;带薪年假;弹性工作;定期体检;节日福利 4千-6千
23 北京市海淀区西二旗 广州百单网互联网科技有限公司 岗位职责:1、 根据产品需求,按时完成指定任务的设计与开发;2、 配合其他研发人员完成项目的… https://m.zhaopin.com//jobs/444406089252923/ 后端工程师/Python工程师 五险一金;绩效奖金;餐补;房补;带薪年假;弹性工作;定期体检;节日福利 4千-6千
24 北京市东城区和平里西街51号雍和宫壹中心A4楼3层 游族网络 岗位职责:1、创新项目及公司内部管理系统后台相关服务端的研发和维护;2、网页信息抓取结果的抽… https://m.zhaopin.com//jobs/264844217254121/ Python开发工程师-base北京 1.2万-1.8万
25 北京市朝阳区高碑店陈家林9号院华腾世纪总部公园A座3楼 深圳市八斗才数据有限公司 工作职责:1、负责效率工具的后台开发工作,具体包括需求分析、文档撰写、设计编码、测试运维、效… https://m.zhaopin.com//jobs/562550032250030/ Python开发工程师(北京) 五险一金;补充医疗保险;绩效奖金;定期体检;年底双薪;带薪年假;节日福利;员工旅游 1.5万-2.5万
26 北京市海淀区北三环中路44号院 北京华信智原教育技术有限公司 岗位职责:1.积极参与教学大纲的制定,并按照教学大纲授课;2.通过QQ与学员交流,并耐心给学… https://m.zhaopin.com//jobs/134503487251283/ Python老师 五险一金;年底双薪;带薪年假;员工旅游;高温补贴;节日福利 1.5万-2万
27 昌平区建材城西路育新小区对面金燕龙办公楼传智播客 江苏传智播客教育科技股份有限公司北京分公司 工作职责:按照教学大纲高质量完成日常授课任务; 根据市场需求,改进教学方法和内容,完善教学体… https://m.zhaopin.com//jobs/374740583250235/ python导师J10091 五险一金;交通补助;餐补;带薪年假;补充医疗保险;定期体检;员工旅游;节日福利 1.6万-3万
28 北京市海淀区西二旗 广州百单网互联网科技有限公司 工作方向:openstack、 金融支付云平台、网盘、云存储体系、TCP/IP网关服务等。技… https://m.zhaopin.com//jobs/444406089252926/ python开发实习生 五险一金;绩效奖金;餐补;房补;带薪年假;弹性工作;定期体检;节日福利 4千-6千
29 北京市海淀区西二旗 北京升凯网络科技有限公司 岗位职责:1、 根据产品需求,按时完成指定任务的设计与开发;2、 配合其他研发人员完成项目的… https://m.zhaopin.com//jobs/540062934250725/ 后端工程师/Python工程师 五险一金;年底双薪;绩效奖金;餐补;房补;定期体检;员工旅游 4千-6千
4511 北京市朝阳区远洋国际中心A座2306 国信嘉宁数据技术有限公司 岗位职责:1、配合开发人员对公司主营产品的应用部署及环境调优;2、跟进解决系统运维技术问题;… https://m.zhaopin.com//jobs/268720686250316/ Linux系统运维工程师 周末双休;五险一金;绩效奖金;餐补;带薪年假;定期体检 8千-1.5万
4512 五棵松地铁附近 北京海思瑞格科技有限公司 职位描述:1. 通过深度学习方法解决临床问题;2. 搭建基于深度学习框架的时序信号处理和医疗… https://m.zhaopin.com//jobs/30130628000026679212/ 算法工程师(深度学习方向) 创业公司;每年多次调薪;定期体检;节日福利;绩效奖金;餐补;五险一金 1.2万-2.5万
4513 北京市海淀区北三环西路32号恒润国际大厦9层911 北京法宣在线科技有限公司 带薪年假、子女教育金、父母赡养金、节日礼物、扁平管理、定期体检、年度旅游、全勤奖、发展空间大… https://m.zhaopin.com//jobs/56636092500023946611/ AI算法工程师-人人律智能大数据科技公司 创业公司;五险一金;股票期权;带薪年假;弹性工作;节日福利;员工旅游;定期体检 2万-3万
4514 朝阳 北京未来进程信息技术有限公司 要求:1、PC端、移动端都可以测试;2、基本要求:功能测试的能力必须非常好。加分项:1、懂基… https://m.zhaopin.com//jobs/375117787250204/ 软件测试工程师 1万-1.5万
4515 北京朝阳区望京阜通东大街6号方恒国际中心B座507 神州灵云(北京)科技有限公司 岗位职责:一、岗位要求:1、 根据产品需求、特点编写测试计划、测试方案、测试报告;2、 按照… https://m.zhaopin.com//jobs/415933738250011/ 软件测试工程师 五险一金;绩效奖金 6千-1.2万
4516 北京市朝阳区望京利泽中一路中辰大厦3A02 北京泺喜教育科技有限公司 工作职责 :1、根据开发需求,高效完成相关程序的开发、测试;2、在工作或业余时间,完成对未来… https://m.zhaopin.com//jobs/38338392500023634710/ 应用工程师(软件方向) 6千-8千
4517 北京市朝阳区大屯里金泉时代3单元1815 北京禾唐科技有限公司 岗位职责:. 负责卖家云平台前后端技术开发、优化和维护. 积极响应运营团队反馈的问题,提供技… https://m.zhaopin.com//jobs/cz196212610j000307… java开发工程师 1.5万-2.5万
4518 北京市海淀区信息路30号上地大厦5层502室 北京恒济引航科技股份有限公司 工作职责:1、负责软件平台系统架构设计与实现及优化工作;2、负责总体设计和重要技术决策,指导… https://m.zhaopin.com//jobs/41176342400025277013/ 高级系统架构师 五险一金;通讯补贴;定期体检;员工旅游;节日福利;带薪年假;股票期权 1.5万-3万
4519 海淀区腾讯公司 车音智能科技有限公司 【工作职责】:负责金融应用类产品移动终端的版本测试,版本类型包括H5应用、ios/安卓上的A… https://m.zhaopin.com//jobs/52755368000141636501/ 测试工程师(自选股) 周末双休;五险一金;免费班车;员工旅游 8千-1.4万
4520 京市朝阳区朝外北街蓝筹名座D座2单元501 北京奋青榜科技有限公司 岗位职责:1 维护所有数据库稳定运行,关注数据库集群整体运行情况,持续发现和解决潜在的问题;… https://m.zhaopin.com//jobs/334310587250246/ DBA 五险一金;年底双薪;绩效奖金;加班补助;带薪年假;弹性工作;员工旅游;节日福利 1.3万-1.5万
4521 北京市朝阳区朝外大街20号联合大厦506 博易智讯(北京)信息技术有限公司 岗位职责:1、负责数据资源中心建设(大数据及分析)类项目的咨询和涉及工作,完成具体指定的数据… https://m.zhaopin.com//jobs/14231517100025758215/ BI资深售前/资深数据咨询顾问 五险一金;绩效奖金;定期体检;员工旅游;节日福利;不加班;带薪年假 1.5万-2万
4522 北京市海淀区北四环西路9号银谷大厦1504 北京永鼎致远网络科技有限公司 岗位职责:1、基于海量数据,挖掘数据规律并建立分析模型;2、对海量数据进行提炼、分析、归纳用… https://m.zhaopin.com//jobs/38037292500028068015/ 数据挖掘工程师 五险一金;年底双薪;绩效奖金;交通补助;餐补;通讯补贴;补充医疗保险 1.5万-2万
4523 北京市东城区白桥大街15号嘉禾国信大厦9层 北京东方金信科技有限公司 岗位职责:1 在业务场景下验证产品的功能与性能;2 进行大数据产品的安装部署与测试实施,进行… https://m.zhaopin.com//jobs/326767032250168/ 大数据工程师 五险一金;带薪年假;节日福利;员工旅游;定期体检;补充医疗保险 1万-2万
4524 北京市西城区电研大厦 北京善友正信科技有限公司 工作职责:1、负责数据仓库ETL流程的优化及解决ETL相关技术问题;2、负责大数据分析系统和… https://m.zhaopin.com//jobs/229707532250069/ ETL数据工程师 五险一金;节日福利;带薪年假 8千-1.2万
4525 北京市丰台区国投财富广场 北京虹信万达科技有限公司 岗位职责:1. 研发自动化运维平台,提高运维、开发协作效率,规范操作流程;2. 研发基础服务… https://m.zhaopin.com//jobs/341610437250040/ 自动化运维开发工程师 五险一金;绩效奖金;节日福利 1.2万-1.8万
4526 北京市东城区白桥大街15号嘉禾国信大厦9层 北京东方金信科技有限公司 岗位职责:1、hadoop,storm,hive,kafka,flume,hbase,ran… https://m.zhaopin.com//jobs/326767032250109/ 运维工程师 五险一金;带薪年假;节日福利;定期体检;员工旅游;补充医疗保险 8千-1.5万
4527 北京市朝阳区安立路60号润枫商务B座24层 玩咖欢聚文化传媒(北京)有限公司 工作职责: 1、负责公司项目中产品的页面交互及功能实现; 2、负责前端新技术研究及公司前端框… https://m.zhaopin.com//jobs/203128481251262/ 前端技术经理 周末双休;五险一金;年底双薪;加班补助;餐补;带薪年假;弹性工作;员工旅游 2万-4万
4528 北京市朝阳区建国路92号世茂大厦B座20层 北京极点触碰科技有限公司 岗位职责:1.参与产品评审,分析产品需求,根据项目需求和测试计划设计和编写测试用例;2.执行… https://m.zhaopin.com//jobs/cz525380730j000367… 测试工程师 五险一金;每年多次调薪;弹性工作;绩效奖金;带薪年假 8千-1.5万
4529 北京市海淀区启明星辰大厦 北京望时高科科技有限公司 此职位为人力外包职位,不接受的请慎重投简历,谢谢!PS:此职位仅招收男性。岗位职责:1.负责… https://m.zhaopin.com//jobs/43216162800038403612/ linux系统工程师 6千-1万
4530 北京市东城区白桥大街15号嘉禾国信大厦9层 北京东方金信科技有限公司 任职要求:1)本科以上学历,有2年以上工作经验,至少1年大数据ETL开发经验、熟悉Hadoo… https://m.zhaopin.com//jobs/326767032250120/ 应用开发工程师 五险一金;带薪年假;节日福利;定期体检;补充医疗保险;员工旅游 8千-1.5万
4531 北京市东城区白桥大街15号嘉禾国信大厦9层 北京东方金信科技有限公司 岗位职责1. 从事金融、政府行业大数据项目有关数据ETL处理的设计、实现和优化,涵盖数据采集… https://m.zhaopin.com//jobs/326767032250161/ ETL工程师(项目) 五险一金;弹性工作;定期体检;节日福利;补充医疗保险;带薪年假 8千-1.5万
4532 北京市海淀区西三旗建材城中路12号院26栋 北京荣联科创科技有限公司 岗位职责:1、根据具体项目要求,承担开发任务,按计划完成任务目标;2、根据用户需求按时完成开… https://m.zhaopin.com//jobs/48747592300027909814/ 研发工程师 绩效奖金;全勤奖;交通补助;餐补;定期体检;员工旅游;节日福利;带薪年假 4千-6千
4533 北京市海淀区上地十街辉煌国际大厦 北京近颐科技有限公司 岗位职责:1负责服务集群的设计与搭建配置;2.负责Linux平台系统的安全管理;3.负责服务… https://m.zhaopin.com//jobs/292524636250052/ linux系统工程师 五险一金;交通补助;餐补;通讯补贴 6千-1万
4534 北京市海淀区中关村软件园11号楼 北京精一强远科技有限公司 公司介绍:北京精一强远科技有限公司,致力于高端IT专业产品的专业设计、专业制造业务。公司拥有… https://m.zhaopin.com//jobs/287608631250052/ 软件开发工程师 五险一金;年底双薪;绩效奖金;包吃;通讯补贴;带薪年假;补充医疗保险;定期体检 1万-1.5万
4535 北京市朝阳区双桥Dream2049园区世联文创一层107(东侧) 北京华沁智联科技有限公司 岗位职责1、 负责项目/产品的测试工作,参与产品需求分析,负责测试计划制定,并能预先评估项目… https://m.zhaopin.com//jobs/331013133250043/ 开发测试工程师(白盒) 创业公司;五险一金;绩效奖金;股票期权;餐补;带薪年假;弹性工作;节日福利 1.5万-2.5万
4536 广顺北大街5号院内融创动力科技文化创意产业园B230 北京书生云科技有限公司 https://m.zhaopin.com//jobs/45496253700037561514/ 实施工程师 创业公司;周末双休;五险一金;带薪年假;弹性工作;通讯补贴 8千-1.5万
4537 北京市东城区朝内大街298号 北京国研数通软件技术有限公司 岗位职责:1、负责大数据平台的开发和维护,负责大数据平台持续集成相关工具平台的架构设计与产品… https://m.zhaopin.com//jobs/120900932250257/ 大数据JAVA开发工程师 1万-1.5万
4538 北京市东城区灯市口大街33号国中商业大厦423室 北京树优信息技术有限公司 工作职责: 1 负责或参与流体分析技术服务项目2 负责或参与流体优化技术服务项目3 负… https://m.zhaopin.com//jobs/226257529250059/ 流体力学仿真优化工程师 五险一金;绩效奖金;加班补助;交通补助;房补;带薪年假;员工旅游;节日福利 6千-8千
4539 朝阳区来广营叶青大厦北园308 北京行易道科技有限公司 岗位职责:1、进行高可靠高安全嵌入式软件测试,包含代码测试、功能测试、性能测试、安全性测试等… https://m.zhaopin.com//jobs/22757003700087605207/ 嵌入式软件测试工程师 14薪;健身俱乐部;周末双休;五险一金;餐补;带薪年假;弹性工作;补充医疗保险 8千-1.3万
4540 东城区王府井东街8号 澳门中心B1层funwork 睿医(北京)数据技术有限公司 职位描述:1.根据项目需求,独立完成各类型的临床数据的统计分析工作2.参与产品统计模块的功能… https://m.zhaopin.com//jobs/cz752253770j000214… 医学统计经理 五险一金;股票期权 1.5万-3万

4541 rows × 7 columns

# 2 根据工作名称剔除掉不合适的工作,如php,java等
name_ban = ['linux','php','Linux','PHP','JAVA','java','Java','DBA','运维','web','WEB','实习生','C','C++','培训','R','Golang']

def ban_name(job_name):
    if any(x in job_name for x in ['python',"Python"]):
        pass
    else:
        if any(x in job_name for x in name_ban):
            job_name = np.nan
    return job_name

df['job_name'] = df['job_name'].apply(ban_name)
df.dropna(how='any')
.dataframe tbody tr th:only-of-type { vertical-align: middle; } .dataframe tbody tr th { vertical-align: top; } .dataframe thead th { text-align: right; }
address company job_info job_link job_name job_tags salary
1 丰台区航丰路一号时代财富天地大厦28层 深圳市八斗才数据有限公司 岗位职责:1、 负责互联网网站产品开发;2、 参与产品设计、架构设计和代码编写;3、 负责问… https://m.zhaopin.com//jobs/cz562550030j000298… python开发工程师(北京) 五险一金;年底双薪;绩效奖金;补充医疗保险;定期体检;员工旅游;带薪年假;弹性工作 1万-1.8万
2 北京市海淀区东北旺西路八号中关村软件园9号楼国际软件大厦 深圳市芒柠科技有限公司 岗位职责:1、维护现有的平台代码。2、参与项目的架构设计,明确负责开发部分的设计需求。3、按… https://m.zhaopin.com//jobs/cz466965980j000547… python开发工程师(北京) 五险一金;年底双薪;绩效奖金;补充医疗保险;员工旅游;带薪年假;弹性工作;加班补助 1万-1.5万
3 北京市朝阳区高碑店陈家林9号院华腾世纪总部公园A座3楼 深圳市源极光科技有限公司 技术要求:1、精通Python语言,熟悉Python多线程 socket通信机制;2、精通流… https://m.zhaopin.com//jobs/cz897833860j000551… python工程师(北京) 五险一金;补充医疗保险;定期体检;绩效奖金;年底双薪;带薪年假;弹性工作;员工旅游 1万-1.5万
4 海淀区中关村软件园11号楼大洋大厦 深圳市芒柠科技有限公司 岗位职责:1. 负责云平台应用的开发维护;2. 负责服务器端API的设计与开发。岗位要求:1… https://m.zhaopin.com//jobs/cz730936640j000955… Python开发工程师(北京) 五险一金;补充医疗保险;定期体检;绩效奖金;员工旅游;带薪年假;弹性工作;节日福利 1万-1.5万
5 北京市海淀区苏州街3号大恒科技大厦南座17层 北京乐学创想教育科技有限公司 岗位职责:1、题库全栈开发和维护,包括需求分析、技术改进、后期维护2、构建数据分析模型,对视… https://m.zhaopin.com//jobs/244101282250512/ Python工程师 节日福利;五险一金;餐补;创业公司 1.5万-3万
6 北京市朝阳区来广营中街甲1号朝来科技产业园创远路36号院4-6号楼 北京尚德在线教育科技有限公司 岗位职责:1、负责公司电商平台如天猫微店、京东、苏宁等商城日常的运营管理,包括店铺整体策划、… https://m.zhaopin.com//jobs/424628486272009/ python自动化 创业公司;无试用期;绩效奖金;不加班 1千-2千
7 北京市海淀区宝盛北里西区28号天丰利商城4层 北京欣如信科技有限公司 职位职责:1. 基于 Python 的分布式集群管理软件开发2. 基于 Web 的工具软… https://m.zhaopin.com//jobs/567369733250977/ Python实习生 五险一金;年底双薪;绩效奖金;全勤奖;员工旅游;节日福利;不加班 8千-1万
8 北京市海淀区宝盛北里西区28号天丰利商城4层 北京欣如信科技有限公司 工作方向openstack、 金融支付云平台、网盘、云存储体系、TCP/IP网关服务等技术要… https://m.zhaopin.com//jobs/567369733250978/ Python开发实习(接受零基础) 五险一金;年底双薪;绩效奖金;全勤奖;员工旅游;节日福利;不加班 8千-1万
9 北京市海淀区上地农大南路88号万霖大厦3层 北京云纵信息技术有限公司 岗位职责:1)负责业务系统运行环境的基础服务管理,系统架构的维护;2)参与基于大数据平台的维… https://m.zhaopin.com//jobs/311289936253904/ linux运维工程师(熟练python) 节日福利;五险一金;绩效奖金;加班补助;交通补助;餐补;带薪年假;健身俱乐部 1.8万-2.8万
10 后沙峪安庆大街巨鸿大厦A座5层 天津狮桥国际物流有限公司 一、岗位职责:1、搭建系统开发环境,完成系统框架和核心代码的实现,负责解决开发过程中的技术问… https://m.zhaopin.com//jobs/670247822251376/ Python软件开发工程师 五险一金;绩效奖金;包住;餐补;通讯补贴;带薪年假 1万-2万
11 北京市海淀区互联网金融中心21层 北京融七牛信息技术有限公司 岗位职责:1. 负责天机风控系统模型在线服务的架构设计、优化和研发工作; 2. 负责线上服务… https://m.zhaopin.com//jobs/435840920250697/ 高级python研发工程师(000650) 五险一金;绩效奖金;餐补;通讯补贴;补充医疗保险;定期体检;节日福利 2.5万-4万
12 北京市朝阳区工体 北京科锐国际人力资源股份有限公司 岗位职责:1. 基于公司CRM系统 的产品研发、以及项目开发;2. 公司内部电商平台开发工作… https://m.zhaopin.com//jobs/263940938259405/ 直聘软件研发(Golang , Python, Ruby) 节日福利;周末双休;五险一金;年底双薪;绩效奖金;年终分红;补充医疗保险;定期体检 1.5万-2万
17 北京市朝阳区北京市朝阳区广渠路3号竞园图片产业园1号库 Forgame–云游控股集团 岗位职责:1、负责在线娃娃机的管理后台系统的研发2、负责统计后台搭建 3、负责监控后台搭建1… https://m.zhaopin.com//jobs/571816225250634/ python后台研发工程师 2万-3万
18 北京市海淀区东北旺西路八号中关村软件园9号楼国际软件大厦 深圳市源极光科技有限公司 职位职责:1、负责产品的服务端开发;2、负责优化产品的性能,根据产品设计完成高质量的服务端产… https://m.zhaopin.com//jobs/562114535250039/ python开发工程师 [北京] 五险一金;年底双薪;绩效奖金;带薪年假;弹性工作;补充医疗保险;定期体检;员工旅游 1.5万-2万
19 北京市海淀区东北旺西路八号中关村软件园9号楼国际软件大厦 深圳市源极光科技有限公司 岗位职责:1、负责数据后台服务的设计、开发、优化、测试等研发工作;2、负责支撑业务的其他项目… https://m.zhaopin.com//jobs/cz562114530j000297… python开发工程师(北京) 五险一金;年底双薪;绩效奖金;补充医疗保险;定期体检;员工旅游;带薪年假;弹性工作 1万-1.5万
20 北京市海淀区西二旗 广州百单网互联网科技有限公司 岗位职责:1、爬虫系统开发和优化;2、文档识别和提取;3、互联网数据采集。专业素质要求:1、… https://m.zhaopin.com//jobs/444406089252927/ python爬虫数据采集实习生 五险一金;绩效奖金;餐补;房补;带薪年假;弹性工作;定期体检;节日福利 4千-6千
21 北京市海淀区西二旗 广州百单网互联网科技有限公司 岗位职责:1. 参与公司软件产品后台研发和维护工作;2. 参与建筑物联网数据分析算法的设计和… https://m.zhaopin.com//jobs/444406089252925/ Python工程师招实习生 五险一金;绩效奖金;餐补;房补;带薪年假;弹性工作;定期体检;节日福利 4千-6千
22 北京市海淀区西二旗 广州百单网互联网科技有限公司 【岗位职责】1、负责效率工具的后台开发工作,具体包括需求分析、文档撰写、设计编码、测试运维、… https://m.zhaopin.com//jobs/444406089252924/ Python开发工程师待遇从优 五险一金;绩效奖金;餐补;房补;带薪年假;弹性工作;定期体检;节日福利 4千-6千
23 北京市海淀区西二旗 广州百单网互联网科技有限公司 岗位职责:1、 根据产品需求,按时完成指定任务的设计与开发;2、 配合其他研发人员完成项目的… https://m.zhaopin.com//jobs/444406089252923/ 后端工程师/Python工程师 五险一金;绩效奖金;餐补;房补;带薪年假;弹性工作;定期体检;节日福利 4千-6千
24 北京市东城区和平里西街51号雍和宫壹中心A4楼3层 游族网络 岗位职责:1、创新项目及公司内部管理系统后台相关服务端的研发和维护;2、网页信息抓取结果的抽… https://m.zhaopin.com//jobs/264844217254121/ Python开发工程师-base北京 1.2万-1.8万
25 北京市朝阳区高碑店陈家林9号院华腾世纪总部公园A座3楼 深圳市八斗才数据有限公司 工作职责:1、负责效率工具的后台开发工作,具体包括需求分析、文档撰写、设计编码、测试运维、效… https://m.zhaopin.com//jobs/562550032250030/ Python开发工程师(北京) 五险一金;补充医疗保险;绩效奖金;定期体检;年底双薪;带薪年假;节日福利;员工旅游 1.5万-2.5万
26 北京市海淀区北三环中路44号院 北京华信智原教育技术有限公司 岗位职责:1.积极参与教学大纲的制定,并按照教学大纲授课;2.通过QQ与学员交流,并耐心给学… https://m.zhaopin.com//jobs/134503487251283/ Python老师 五险一金;年底双薪;带薪年假;员工旅游;高温补贴;节日福利 1.5万-2万
27 昌平区建材城西路育新小区对面金燕龙办公楼传智播客 江苏传智播客教育科技股份有限公司北京分公司 工作职责:按照教学大纲高质量完成日常授课任务; 根据市场需求,改进教学方法和内容,完善教学体… https://m.zhaopin.com//jobs/374740583250235/ python导师J10091 五险一金;交通补助;餐补;带薪年假;补充医疗保险;定期体检;员工旅游;节日福利 1.6万-3万
28 北京市海淀区西二旗 广州百单网互联网科技有限公司 工作方向:openstack、 金融支付云平台、网盘、云存储体系、TCP/IP网关服务等。技… https://m.zhaopin.com//jobs/444406089252926/ python开发实习生 五险一金;绩效奖金;餐补;房补;带薪年假;弹性工作;定期体检;节日福利 4千-6千
29 北京市海淀区西二旗 北京升凯网络科技有限公司 岗位职责:1、 根据产品需求,按时完成指定任务的设计与开发;2、 配合其他研发人员完成项目的… https://m.zhaopin.com//jobs/540062934250725/ 后端工程师/Python工程师 五险一金;年底双薪;绩效奖金;餐补;房补;定期体检;员工旅游 4千-6千
30 公司名称:北京奇虎科技有限公司
公司主页:http://www.360.cn
北京奇虎科技有限公司 https://m.zhaopin.com//jobs/467717611259614/ Python高级开发工程师 面议
31 北京市海淀区西二旗 北京升凯网络科技有限公司 岗位职责:1. 参与公司软件产品后台研发和维护工作;2. 参与建筑物联网数据分析算法的设计和… https://m.zhaopin.com//jobs/540062934250727/ Python工程师招实习生 五险一金;年底双薪;绩效奖金;餐补;房补;定期体检;员工旅游 4千-6千
32 北京市海淀区银科大厦610 深圳码隆科技有限公司 【公司简介】码隆科技是一家专注于深度学习与计算机视觉技术创新,打造领先视觉智能技术平台的人工… https://m.zhaopin.com//jobs/491469330251549/ Python开发实习生 五险一金;加班补助;带薪年假;节日福利 5千-8千
33 北京市顺义区中粮祥云国际生活区24号楼1102室 北京华卓餐饮连锁股份有限公司 描述:1、对金融数据进行清洗、存储以及维护。2、升级以及维护现有交易系统。3、与团队合作开发… https://m.zhaopin.com//jobs/247759323250502/ Python数据分析师(量化金融) 五险一金;餐补;带薪年假;弹性工作 2万-4万
34 北京市朝阳区安贞桥北安定路39号 长新大厦6层611室 北京好巧国际旅行社有限公司 【岗位职责】 负责在线服务数据平台的设计和实现。主要实现语言为Python,开发环境为… https://m.zhaopin.com//jobs/325958332250063/ Linux C++/Python高级研发工程师 五险一金;股票期权;餐补;带薪年假;弹性工作;节日福利 2.5万-3.5万
4500 北京市朝阳区启阳路金辉大厦16层 北京麦达数字技术服务有限公司 岗位描述:1、探索研究大数据和机器学习在业务层面的应用,尤其是在精准营销及投资标的管理领域的… https://m.zhaopin.com//jobs/cz898420920j000119… 数据分析师 五险一金;交通补助;餐补;带薪年假;弹性工作;节日福利;14薪 3万-5万
4501 北京朝阳富尔大厦(金台夕照站) 中云网安科技(北京)有限公司 职责描述:1、负责测试方案制定、测试工具开发、跟进产品质量驱动研发优化产品2、跟踪测试中发现… https://m.zhaopin.com//jobs/242145589250001/ 测试工程师 五险一金 1万-1.5万
4502 北京市朝阳区霄云路25号乙 智美体育集团 岗位职责:负责搭建体育赛事及全民运动综合运营平台任职要求:1. 熟练使用至少一门编程语言 (… https://m.zhaopin.com//jobs/231576928252103/ 数据挖掘工程师 五险一金;带薪年假;定期体检 1.5万-2.5万
4504 北京市朝阳区光华路9号SOHO二期 广州优家投资管理有限责任公司 岗位职责:1、负责开发公司公寓管理B端产品及用户社交C端产品的前端页面;2、对前端需求进行合… https://m.zhaopin.com//jobs/583428327250239/ 前端开发工程师 五险一金;弹性工作;补充医疗保险;节日福利;房补 1.3万-2.2万
4507 北京市海淀区永泰庄甲一号综合楼建金商厦4层10-11 北京创源微致软件有限公司 任职要求:1. 硕士以上学历,计算机、通信、信息或者相关专业2. 熟悉C语言3. 对图像处理… https://m.zhaopin.com//jobs/530391436250003/ 图像处理工程师 14薪;五险一金;全勤奖;通讯补贴;带薪年假;补充医疗保险;定期体检;节日福利 1万-2万
4508 北京市海淀区清华科技园创业大厦1107A室 北京四三九九信息科技有限公司 岗位职责:1、设计和开发移动端游戏;2、编写高质量代码,参与游戏创意及设计,按照需求实现游戏… https://m.zhaopin.com//jobs/485462128250590/ 游戏开发工程师(2018、2019届毕业生) 五险一金;年底双薪;绩效奖金;全勤奖;包吃;带薪年假;定期体检;员工旅游 1万-2万
4509 北京市海淀区永泰庄甲一号综合楼建金商厦4层10-11 北京创源微致软件有限公司 岗位职责:测试工作量预估。测试计划和测试方案确定。自动化测试框架的搭建和持续更新。测试案例编… https://m.zhaopin.com//jobs/530391436250006/ 测试开发 14薪;五险一金;通讯补贴;带薪年假;补充医疗保险;定期体检;节日福利 1.2万-2.4万
4510 北京市东城区朝阳门内大街银河sohoA座10层 北京精图天下科技发展有限公司 岗位职责:1.对软件配置库进行整体管理;2.负责建库、目录创建及权限分配及回收;3.负责根据… https://m.zhaopin.com//jobs/cz462794580j000414… 配置管理工程师 五险一金;加班补助;带薪年假 1.5万-2.5万
4512 五棵松地铁附近 北京海思瑞格科技有限公司 职位描述:1. 通过深度学习方法解决临床问题;2. 搭建基于深度学习框架的时序信号处理和医疗… https://m.zhaopin.com//jobs/30130628000026679212/ 算法工程师(深度学习方向) 创业公司;每年多次调薪;定期体检;节日福利;绩效奖金;餐补;五险一金 1.2万-2.5万
4513 北京市海淀区北三环西路32号恒润国际大厦9层911 北京法宣在线科技有限公司 带薪年假、子女教育金、父母赡养金、节日礼物、扁平管理、定期体检、年度旅游、全勤奖、发展空间大… https://m.zhaopin.com//jobs/56636092500023946611/ AI算法工程师-人人律智能大数据科技公司 创业公司;五险一金;股票期权;带薪年假;弹性工作;节日福利;员工旅游;定期体检 2万-3万
4514 朝阳 北京未来进程信息技术有限公司 要求:1、PC端、移动端都可以测试;2、基本要求:功能测试的能力必须非常好。加分项:1、懂基… https://m.zhaopin.com//jobs/375117787250204/ 软件测试工程师 1万-1.5万
4515 北京朝阳区望京阜通东大街6号方恒国际中心B座507 神州灵云(北京)科技有限公司 岗位职责:一、岗位要求:1、 根据产品需求、特点编写测试计划、测试方案、测试报告;2、 按照… https://m.zhaopin.com//jobs/415933738250011/ 软件测试工程师 五险一金;绩效奖金 6千-1.2万
4516 北京市朝阳区望京利泽中一路中辰大厦3A02 北京泺喜教育科技有限公司 工作职责 :1、根据开发需求,高效完成相关程序的开发、测试;2、在工作或业余时间,完成对未来… https://m.zhaopin.com//jobs/38338392500023634710/ 应用工程师(软件方向) 6千-8千
4518 北京市海淀区信息路30号上地大厦5层502室 北京恒济引航科技股份有限公司 工作职责:1、负责软件平台系统架构设计与实现及优化工作;2、负责总体设计和重要技术决策,指导… https://m.zhaopin.com//jobs/41176342400025277013/ 高级系统架构师 五险一金;通讯补贴;定期体检;员工旅游;节日福利;带薪年假;股票期权 1.5万-3万
4519 海淀区腾讯公司 车音智能科技有限公司 【工作职责】:负责金融应用类产品移动终端的版本测试,版本类型包括H5应用、ios/安卓上的A… https://m.zhaopin.com//jobs/52755368000141636501/ 测试工程师(自选股) 周末双休;五险一金;免费班车;员工旅游 8千-1.4万
4521 北京市朝阳区朝外大街20号联合大厦506 博易智讯(北京)信息技术有限公司 岗位职责:1、负责数据资源中心建设(大数据及分析)类项目的咨询和涉及工作,完成具体指定的数据… https://m.zhaopin.com//jobs/14231517100025758215/ BI资深售前/资深数据咨询顾问 五险一金;绩效奖金;定期体检;员工旅游;节日福利;不加班;带薪年假 1.5万-2万
4522 北京市海淀区北四环西路9号银谷大厦1504 北京永鼎致远网络科技有限公司 岗位职责:1、基于海量数据,挖掘数据规律并建立分析模型;2、对海量数据进行提炼、分析、归纳用… https://m.zhaopin.com//jobs/38037292500028068015/ 数据挖掘工程师 五险一金;年底双薪;绩效奖金;交通补助;餐补;通讯补贴;补充医疗保险 1.5万-2万
4523 北京市东城区白桥大街15号嘉禾国信大厦9层 北京东方金信科技有限公司 岗位职责:1 在业务场景下验证产品的功能与性能;2 进行大数据产品的安装部署与测试实施,进行… https://m.zhaopin.com//jobs/326767032250168/ 大数据工程师 五险一金;带薪年假;节日福利;员工旅游;定期体检;补充医疗保险 1万-2万
4524 北京市西城区电研大厦 北京善友正信科技有限公司 工作职责:1、负责数据仓库ETL流程的优化及解决ETL相关技术问题;2、负责大数据分析系统和… https://m.zhaopin.com//jobs/229707532250069/ ETL数据工程师 五险一金;节日福利;带薪年假 8千-1.2万
4527 北京市朝阳区安立路60号润枫商务B座24层 玩咖欢聚文化传媒(北京)有限公司 工作职责: 1、负责公司项目中产品的页面交互及功能实现; 2、负责前端新技术研究及公司前端框… https://m.zhaopin.com//jobs/203128481251262/ 前端技术经理 周末双休;五险一金;年底双薪;加班补助;餐补;带薪年假;弹性工作;员工旅游 2万-4万
4528 北京市朝阳区建国路92号世茂大厦B座20层 北京极点触碰科技有限公司 岗位职责:1.参与产品评审,分析产品需求,根据项目需求和测试计划设计和编写测试用例;2.执行… https://m.zhaopin.com//jobs/cz525380730j000367… 测试工程师 五险一金;每年多次调薪;弹性工作;绩效奖金;带薪年假 8千-1.5万
4530 北京市东城区白桥大街15号嘉禾国信大厦9层 北京东方金信科技有限公司 任职要求:1)本科以上学历,有2年以上工作经验,至少1年大数据ETL开发经验、熟悉Hadoo… https://m.zhaopin.com//jobs/326767032250120/ 应用开发工程师 五险一金;带薪年假;节日福利;定期体检;补充医疗保险;员工旅游 8千-1.5万
4531 北京市东城区白桥大街15号嘉禾国信大厦9层 北京东方金信科技有限公司 岗位职责1. 从事金融、政府行业大数据项目有关数据ETL处理的设计、实现和优化,涵盖数据采集… https://m.zhaopin.com//jobs/326767032250161/ ETL工程师(项目) 五险一金;弹性工作;定期体检;节日福利;补充医疗保险;带薪年假 8千-1.5万
4532 北京市海淀区西三旗建材城中路12号院26栋 北京荣联科创科技有限公司 岗位职责:1、根据具体项目要求,承担开发任务,按计划完成任务目标;2、根据用户需求按时完成开… https://m.zhaopin.com//jobs/48747592300027909814/ 研发工程师 绩效奖金;全勤奖;交通补助;餐补;定期体检;员工旅游;节日福利;带薪年假 4千-6千
4534 北京市海淀区中关村软件园11号楼 北京精一强远科技有限公司 公司介绍:北京精一强远科技有限公司,致力于高端IT专业产品的专业设计、专业制造业务。公司拥有… https://m.zhaopin.com//jobs/287608631250052/ 软件开发工程师 五险一金;年底双薪;绩效奖金;包吃;通讯补贴;带薪年假;补充医疗保险;定期体检 1万-1.5万
4535 北京市朝阳区双桥Dream2049园区世联文创一层107(东侧) 北京华沁智联科技有限公司 岗位职责1、 负责项目/产品的测试工作,参与产品需求分析,负责测试计划制定,并能预先评估项目… https://m.zhaopin.com//jobs/331013133250043/ 开发测试工程师(白盒) 创业公司;五险一金;绩效奖金;股票期权;餐补;带薪年假;弹性工作;节日福利 1.5万-2.5万
4536 广顺北大街5号院内融创动力科技文化创意产业园B230 北京书生云科技有限公司 https://m.zhaopin.com//jobs/45496253700037561514/ 实施工程师 创业公司;周末双休;五险一金;带薪年假;弹性工作;通讯补贴 8千-1.5万
4538 北京市东城区灯市口大街33号国中商业大厦423室 北京树优信息技术有限公司 工作职责: 1 负责或参与流体分析技术服务项目2 负责或参与流体优化技术服务项目3 负… https://m.zhaopin.com//jobs/226257529250059/ 流体力学仿真优化工程师 五险一金;绩效奖金;加班补助;交通补助;房补;带薪年假;员工旅游;节日福利 6千-8千
4539 朝阳区来广营叶青大厦北园308 北京行易道科技有限公司 岗位职责:1、进行高可靠高安全嵌入式软件测试,包含代码测试、功能测试、性能测试、安全性测试等… https://m.zhaopin.com//jobs/22757003700087605207/ 嵌入式软件测试工程师 14薪;健身俱乐部;周末双休;五险一金;餐补;带薪年假;弹性工作;补充医疗保险 8千-1.3万
4540 东城区王府井东街8号 澳门中心B1层funwork 睿医(北京)数据技术有限公司 职位描述:1.根据项目需求,独立完成各类型的临床数据的统计分析工作2.参与产品统计模块的功能… https://m.zhaopin.com//jobs/cz752253770j000214… 医学统计经理 五险一金;股票期权 1.5万-3万

3379 rows × 7 columns

# 3 将万转为数字;万x10000  , 千x1000

def get_num_salary(salary):
    s = 0
    if "-" in salary:
        for part in salary.split('-'):
            if '万' in part:
                q = float(part[:-1]) * 10000
            else:
                q = float(part[:-1]) * 1000
            s +=q
        return int(s/2.0)
    else:
        # 返回null
        return np.nan

df['salary'] = df['salary'].apply(get_num_salary)
df.head()
————————————————————————— TypeError Traceback (most recent call last) in () 15 return np.nan 16 —> 17 df[‘salary’] = df[‘salary’].apply(get_num_salary) 18 df.head() c:\users\administrator\appdata\local\programs\python\python35\lib\site-packages\pandas\core\series.py in apply(self, func, convert_dtype, args, **kwds) 2549 else: 2550 values = self.asobject -> 2551 mapped = lib.map_infer(values, f, convert=convert_dtype) 2552 2553 if len(mapped) and isinstance(mapped[0], Series): pandas/_libs/src\inference.pyx in pandas._libs.lib.map_infer() in get_num_salary(salary) 3 def get_num_salary(salary): 4 s = 0 —-> 5 if “-” in salary: 6 for part in salary.split(‘-‘): 7 if ‘万’ in part: TypeError: argument of type ‘float’ is not iterable
# 面议和一千以下的用中位数来代替
df = df.fillna(df.median())
df
.dataframe tbody tr th:only-of-type { vertical-align: middle; } .dataframe tbody tr th { vertical-align: top; } .dataframe thead th { text-align: right; }
address company job_info job_link job_name job_tags salary
0 北京市朝阳区裕民路12号 中国国际科技会展中心A座10层 大连飞创信息技术有限公司 岗位职责:1、按照有关制度和规范的要求,承担代码的编写工作。对开发任务、需求理解透彻,积极配… https://m.zhaopin.com//jobs/210653218250637/ C++开发工程师 五险一金;年底双薪;绩效奖金;加班补助;交通补助;餐补;采暖补贴;定期体检 17500.0
1 丰台区航丰路一号时代财富天地大厦28层 深圳市八斗才数据有限公司 岗位职责:1、 负责互联网网站产品开发;2、 参与产品设计、架构设计和代码编写;3、 负责问… https://m.zhaopin.com//jobs/cz562550030j000298… python开发工程师(北京) 五险一金;年底双薪;绩效奖金;补充医疗保险;定期体检;员工旅游;带薪年假;弹性工作 14000.0
2 北京市海淀区东北旺西路八号中关村软件园9号楼国际软件大厦 深圳市芒柠科技有限公司 岗位职责:1、维护现有的平台代码。2、参与项目的架构设计,明确负责开发部分的设计需求。3、按… https://m.zhaopin.com//jobs/cz466965980j000547… python开发工程师(北京) 五险一金;年底双薪;绩效奖金;补充医疗保险;员工旅游;带薪年假;弹性工作;加班补助 12500.0
3 北京市朝阳区高碑店陈家林9号院华腾世纪总部公园A座3楼 深圳市源极光科技有限公司 技术要求:1、精通Python语言,熟悉Python多线程 socket通信机制;2、精通流… https://m.zhaopin.com//jobs/cz897833860j000551… python工程师(北京) 五险一金;补充医疗保险;定期体检;绩效奖金;年底双薪;带薪年假;弹性工作;员工旅游 12500.0
4 海淀区中关村软件园11号楼大洋大厦 深圳市芒柠科技有限公司 岗位职责:1. 负责云平台应用的开发维护;2. 负责服务器端API的设计与开发。岗位要求:1… https://m.zhaopin.com//jobs/cz730936640j000955… Python开发工程师(北京) 五险一金;补充医疗保险;定期体检;绩效奖金;员工旅游;带薪年假;弹性工作;节日福利 12500.0
5 北京市海淀区苏州街3号大恒科技大厦南座17层 北京乐学创想教育科技有限公司 岗位职责:1、题库全栈开发和维护,包括需求分析、技术改进、后期维护2、构建数据分析模型,对视… https://m.zhaopin.com//jobs/244101282250512/ Python工程师 节日福利;五险一金;餐补;创业公司 22500.0
6 北京市朝阳区来广营中街甲1号朝来科技产业园创远路36号院4-6号楼 北京尚德在线教育科技有限公司 岗位职责:1、负责公司电商平台如天猫微店、京东、苏宁等商城日常的运营管理,包括店铺整体策划、… https://m.zhaopin.com//jobs/424628486272009/ python自动化 创业公司;无试用期;绩效奖金;不加班 1500.0
7 北京市海淀区宝盛北里西区28号天丰利商城4层 北京欣如信科技有限公司 职位职责:1. 基于 Python 的分布式集群管理软件开发2. 基于 Web 的工具软… https://m.zhaopin.com//jobs/567369733250977/ Python实习生 五险一金;年底双薪;绩效奖金;全勤奖;员工旅游;节日福利;不加班 9000.0
8 北京市海淀区宝盛北里西区28号天丰利商城4层 北京欣如信科技有限公司 工作方向openstack、 金融支付云平台、网盘、云存储体系、TCP/IP网关服务等技术要… https://m.zhaopin.com//jobs/567369733250978/ Python开发实习(接受零基础) 五险一金;年底双薪;绩效奖金;全勤奖;员工旅游;节日福利;不加班 9000.0
9 北京市海淀区上地农大南路88号万霖大厦3层 北京云纵信息技术有限公司 岗位职责:1)负责业务系统运行环境的基础服务管理,系统架构的维护;2)参与基于大数据平台的维… https://m.zhaopin.com//jobs/311289936253904/ linux运维工程师(熟练python) 节日福利;五险一金;绩效奖金;加班补助;交通补助;餐补;带薪年假;健身俱乐部 23000.0
10 后沙峪安庆大街巨鸿大厦A座5层 天津狮桥国际物流有限公司 一、岗位职责:1、搭建系统开发环境,完成系统框架和核心代码的实现,负责解决开发过程中的技术问… https://m.zhaopin.com//jobs/670247822251376/ Python软件开发工程师 五险一金;绩效奖金;包住;餐补;通讯补贴;带薪年假 15000.0
11 北京市海淀区互联网金融中心21层 北京融七牛信息技术有限公司 岗位职责:1. 负责天机风控系统模型在线服务的架构设计、优化和研发工作; 2. 负责线上服务… https://m.zhaopin.com//jobs/435840920250697/ 高级python研发工程师(000650) 五险一金;绩效奖金;餐补;通讯补贴;补充医疗保险;定期体检;节日福利 32500.0
12 北京市朝阳区工体 北京科锐国际人力资源股份有限公司 岗位职责:1. 基于公司CRM系统 的产品研发、以及项目开发;2. 公司内部电商平台开发工作… https://m.zhaopin.com//jobs/263940938259405/ 直聘软件研发(Golang , Python, Ruby) 节日福利;周末双休;五险一金;年底双薪;绩效奖金;年终分红;补充医疗保险;定期体检 17500.0
13 北京市海淀区西北旺东路10号院东区1号楼领创空间2层204A 北京彼速信息技术有限公司 职位要求:1.本科以上学历,计算机相关专业;2.熟悉B/S软件结构;3. 精通C#,熟练掌握… https://m.zhaopin.com//jobs/136473062250465/ C#/Asp.Net高级软件工程师 五险一金 15000.0
14 北京市东城区和平里东街11号雍和航星园三号楼一层 浙江齐聚科技有限公司北京分公司 1. 负责产品功能性需求的开发、维护。2. 负责优化系统的性能和稳定性3. 能独立完成个人承… https://m.zhaopin.com//jobs/32922521700041200311/ 高级java工程师 25000.0
15 (中关村)北京市海淀区王庄路1号清华同方科技广场A座17层 北京固鸿科技有限公司 岗位职责:1、负责公司软件系统集成开发;2、按规范编写系统需求、概要设计、详细设计及系统部署… https://m.zhaopin.com//jobs/137279958250759/ Windows C++软件开发工程师 五险一金;年终分红;交通补助;带薪年假;补充医疗保险;定期体检;员工旅游;节日福利 15000.0
16 马尼拉分公司 皇室科技有限公司 只要你有能力,薪资不是问题!只要你有能力,薪资不是问题!任职要求1、计算机及相关专业,国家统… https://m.zhaopin.com//jobs/cz735252640j001365… php工程师/php程序员/php 住房补贴;每年多次调薪;健身俱乐部;包吃;包住;房补;通讯补贴;带薪年假 20000.0
17 北京市朝阳区北京市朝阳区广渠路3号竞园图片产业园1号库 Forgame–云游控股集团 岗位职责:1、负责在线娃娃机的管理后台系统的研发2、负责统计后台搭建 3、负责监控后台搭建1… https://m.zhaopin.com//jobs/571816225250634/ python后台研发工程师 25000.0
18 北京市海淀区东北旺西路八号中关村软件园9号楼国际软件大厦 深圳市源极光科技有限公司 职位职责:1、负责产品的服务端开发;2、负责优化产品的性能,根据产品设计完成高质量的服务端产… https://m.zhaopin.com//jobs/562114535250039/ python开发工程师 [北京] 五险一金;年底双薪;绩效奖金;带薪年假;弹性工作;补充医疗保险;定期体检;员工旅游 17500.0
19 北京市海淀区东北旺西路八号中关村软件园9号楼国际软件大厦 深圳市源极光科技有限公司 岗位职责:1、负责数据后台服务的设计、开发、优化、测试等研发工作;2、负责支撑业务的其他项目… https://m.zhaopin.com//jobs/cz562114530j000297… python开发工程师(北京) 五险一金;年底双薪;绩效奖金;补充医疗保险;定期体检;员工旅游;带薪年假;弹性工作 12500.0
20 北京市海淀区西二旗 广州百单网互联网科技有限公司 岗位职责:1、爬虫系统开发和优化;2、文档识别和提取;3、互联网数据采集。专业素质要求:1、… https://m.zhaopin.com//jobs/444406089252927/ python爬虫数据采集实习生 五险一金;绩效奖金;餐补;房补;带薪年假;弹性工作;定期体检;节日福利 5000.0
21 北京市海淀区西二旗 广州百单网互联网科技有限公司 岗位职责:1. 参与公司软件产品后台研发和维护工作;2. 参与建筑物联网数据分析算法的设计和… https://m.zhaopin.com//jobs/444406089252925/ Python工程师招实习生 五险一金;绩效奖金;餐补;房补;带薪年假;弹性工作;定期体检;节日福利 5000.0
22 北京市海淀区西二旗 广州百单网互联网科技有限公司 【岗位职责】1、负责效率工具的后台开发工作,具体包括需求分析、文档撰写、设计编码、测试运维、… https://m.zhaopin.com//jobs/444406089252924/ Python开发工程师待遇从优 五险一金;绩效奖金;餐补;房补;带薪年假;弹性工作;定期体检;节日福利 5000.0
23 北京市海淀区西二旗 广州百单网互联网科技有限公司 岗位职责:1、 根据产品需求,按时完成指定任务的设计与开发;2、 配合其他研发人员完成项目的… https://m.zhaopin.com//jobs/444406089252923/ 后端工程师/Python工程师 五险一金;绩效奖金;餐补;房补;带薪年假;弹性工作;定期体检;节日福利 5000.0
24 北京市东城区和平里西街51号雍和宫壹中心A4楼3层 游族网络 岗位职责:1、创新项目及公司内部管理系统后台相关服务端的研发和维护;2、网页信息抓取结果的抽… https://m.zhaopin.com//jobs/264844217254121/ Python开发工程师-base北京 15000.0
25 北京市朝阳区高碑店陈家林9号院华腾世纪总部公园A座3楼 深圳市八斗才数据有限公司 工作职责:1、负责效率工具的后台开发工作,具体包括需求分析、文档撰写、设计编码、测试运维、效… https://m.zhaopin.com//jobs/562550032250030/ Python开发工程师(北京) 五险一金;补充医疗保险;绩效奖金;定期体检;年底双薪;带薪年假;节日福利;员工旅游 20000.0
26 北京市海淀区北三环中路44号院 北京华信智原教育技术有限公司 岗位职责:1.积极参与教学大纲的制定,并按照教学大纲授课;2.通过QQ与学员交流,并耐心给学… https://m.zhaopin.com//jobs/134503487251283/ Python老师 五险一金;年底双薪;带薪年假;员工旅游;高温补贴;节日福利 17500.0
27 昌平区建材城西路育新小区对面金燕龙办公楼传智播客 江苏传智播客教育科技股份有限公司北京分公司 工作职责:按照教学大纲高质量完成日常授课任务; 根据市场需求,改进教学方法和内容,完善教学体… https://m.zhaopin.com//jobs/374740583250235/ python导师J10091 五险一金;交通补助;餐补;带薪年假;补充医疗保险;定期体检;员工旅游;节日福利 23000.0
28 北京市海淀区西二旗 广州百单网互联网科技有限公司 工作方向:openstack、 金融支付云平台、网盘、云存储体系、TCP/IP网关服务等。技… https://m.zhaopin.com//jobs/444406089252926/ python开发实习生 五险一金;绩效奖金;餐补;房补;带薪年假;弹性工作;定期体检;节日福利 5000.0
29 北京市海淀区西二旗 北京升凯网络科技有限公司 岗位职责:1、 根据产品需求,按时完成指定任务的设计与开发;2、 配合其他研发人员完成项目的… https://m.zhaopin.com//jobs/540062934250725/ 后端工程师/Python工程师 五险一金;年底双薪;绩效奖金;餐补;房补;定期体检;员工旅游 5000.0
4511 北京市朝阳区远洋国际中心A座2306 国信嘉宁数据技术有限公司 岗位职责:1、配合开发人员对公司主营产品的应用部署及环境调优;2、跟进解决系统运维技术问题;… https://m.zhaopin.com//jobs/268720686250316/ Linux系统运维工程师 周末双休;五险一金;绩效奖金;餐补;带薪年假;定期体检 11500.0
4512 五棵松地铁附近 北京海思瑞格科技有限公司 职位描述:1. 通过深度学习方法解决临床问题;2. 搭建基于深度学习框架的时序信号处理和医疗… https://m.zhaopin.com//jobs/30130628000026679212/ 算法工程师(深度学习方向) 创业公司;每年多次调薪;定期体检;节日福利;绩效奖金;餐补;五险一金 18500.0
4513 北京市海淀区北三环西路32号恒润国际大厦9层911 北京法宣在线科技有限公司 带薪年假、子女教育金、父母赡养金、节日礼物、扁平管理、定期体检、年度旅游、全勤奖、发展空间大… https://m.zhaopin.com//jobs/56636092500023946611/ AI算法工程师-人人律智能大数据科技公司 创业公司;五险一金;股票期权;带薪年假;弹性工作;节日福利;员工旅游;定期体检 25000.0
4514 朝阳 北京未来进程信息技术有限公司 要求:1、PC端、移动端都可以测试;2、基本要求:功能测试的能力必须非常好。加分项:1、懂基… https://m.zhaopin.com//jobs/375117787250204/ 软件测试工程师 12500.0
4515 北京朝阳区望京阜通东大街6号方恒国际中心B座507 神州灵云(北京)科技有限公司 岗位职责:一、岗位要求:1、 根据产品需求、特点编写测试计划、测试方案、测试报告;2、 按照… https://m.zhaopin.com//jobs/415933738250011/ 软件测试工程师 五险一金;绩效奖金 9000.0
4516 北京市朝阳区望京利泽中一路中辰大厦3A02 北京泺喜教育科技有限公司 工作职责 :1、根据开发需求,高效完成相关程序的开发、测试;2、在工作或业余时间,完成对未来… https://m.zhaopin.com//jobs/38338392500023634710/ 应用工程师(软件方向) 7000.0
4517 北京市朝阳区大屯里金泉时代3单元1815 北京禾唐科技有限公司 岗位职责:. 负责卖家云平台前后端技术开发、优化和维护. 积极响应运营团队反馈的问题,提供技… https://m.zhaopin.com//jobs/cz196212610j000307… java开发工程师 20000.0
4518 北京市海淀区信息路30号上地大厦5层502室 北京恒济引航科技股份有限公司 工作职责:1、负责软件平台系统架构设计与实现及优化工作;2、负责总体设计和重要技术决策,指导… https://m.zhaopin.com//jobs/41176342400025277013/ 高级系统架构师 五险一金;通讯补贴;定期体检;员工旅游;节日福利;带薪年假;股票期权 22500.0
4519 海淀区腾讯公司 车音智能科技有限公司 【工作职责】:负责金融应用类产品移动终端的版本测试,版本类型包括H5应用、ios/安卓上的A… https://m.zhaopin.com//jobs/52755368000141636501/ 测试工程师(自选股) 周末双休;五险一金;免费班车;员工旅游 11000.0
4520 京市朝阳区朝外北街蓝筹名座D座2单元501 北京奋青榜科技有限公司 岗位职责:1 维护所有数据库稳定运行,关注数据库集群整体运行情况,持续发现和解决潜在的问题;… https://m.zhaopin.com//jobs/334310587250246/ DBA 五险一金;年底双薪;绩效奖金;加班补助;带薪年假;弹性工作;员工旅游;节日福利 14000.0
4521 北京市朝阳区朝外大街20号联合大厦506 博易智讯(北京)信息技术有限公司 岗位职责:1、负责数据资源中心建设(大数据及分析)类项目的咨询和涉及工作,完成具体指定的数据… https://m.zhaopin.com//jobs/14231517100025758215/ BI资深售前/资深数据咨询顾问 五险一金;绩效奖金;定期体检;员工旅游;节日福利;不加班;带薪年假 17500.0
4522 北京市海淀区北四环西路9号银谷大厦1504 北京永鼎致远网络科技有限公司 岗位职责:1、基于海量数据,挖掘数据规律并建立分析模型;2、对海量数据进行提炼、分析、归纳用… https://m.zhaopin.com//jobs/38037292500028068015/ 数据挖掘工程师 五险一金;年底双薪;绩效奖金;交通补助;餐补;通讯补贴;补充医疗保险 17500.0
4523 北京市东城区白桥大街15号嘉禾国信大厦9层 北京东方金信科技有限公司 岗位职责:1 在业务场景下验证产品的功能与性能;2 进行大数据产品的安装部署与测试实施,进行… https://m.zhaopin.com//jobs/326767032250168/ 大数据工程师 五险一金;带薪年假;节日福利;员工旅游;定期体检;补充医疗保险 15000.0
4524 北京市西城区电研大厦 北京善友正信科技有限公司 工作职责:1、负责数据仓库ETL流程的优化及解决ETL相关技术问题;2、负责大数据分析系统和… https://m.zhaopin.com//jobs/229707532250069/ ETL数据工程师 五险一金;节日福利;带薪年假 10000.0
4525 北京市丰台区国投财富广场 北京虹信万达科技有限公司 岗位职责:1. 研发自动化运维平台,提高运维、开发协作效率,规范操作流程;2. 研发基础服务… https://m.zhaopin.com//jobs/341610437250040/ 自动化运维开发工程师 五险一金;绩效奖金;节日福利 15000.0
4526 北京市东城区白桥大街15号嘉禾国信大厦9层 北京东方金信科技有限公司 岗位职责:1、hadoop,storm,hive,kafka,flume,hbase,ran… https://m.zhaopin.com//jobs/326767032250109/ 运维工程师 五险一金;带薪年假;节日福利;定期体检;员工旅游;补充医疗保险 11500.0
4527 北京市朝阳区安立路60号润枫商务B座24层 玩咖欢聚文化传媒(北京)有限公司 工作职责: 1、负责公司项目中产品的页面交互及功能实现; 2、负责前端新技术研究及公司前端框… https://m.zhaopin.com//jobs/203128481251262/ 前端技术经理 周末双休;五险一金;年底双薪;加班补助;餐补;带薪年假;弹性工作;员工旅游 30000.0
4528 北京市朝阳区建国路92号世茂大厦B座20层 北京极点触碰科技有限公司 岗位职责:1.参与产品评审,分析产品需求,根据项目需求和测试计划设计和编写测试用例;2.执行… https://m.zhaopin.com//jobs/cz525380730j000367… 测试工程师 五险一金;每年多次调薪;弹性工作;绩效奖金;带薪年假 11500.0
4529 北京市海淀区启明星辰大厦 北京望时高科科技有限公司 此职位为人力外包职位,不接受的请慎重投简历,谢谢!PS:此职位仅招收男性。岗位职责:1.负责… https://m.zhaopin.com//jobs/43216162800038403612/ linux系统工程师 8000.0
4530 北京市东城区白桥大街15号嘉禾国信大厦9层 北京东方金信科技有限公司 任职要求:1)本科以上学历,有2年以上工作经验,至少1年大数据ETL开发经验、熟悉Hadoo… https://m.zhaopin.com//jobs/326767032250120/ 应用开发工程师 五险一金;带薪年假;节日福利;定期体检;补充医疗保险;员工旅游 11500.0
4531 北京市东城区白桥大街15号嘉禾国信大厦9层 北京东方金信科技有限公司 岗位职责1. 从事金融、政府行业大数据项目有关数据ETL处理的设计、实现和优化,涵盖数据采集… https://m.zhaopin.com//jobs/326767032250161/ ETL工程师(项目) 五险一金;弹性工作;定期体检;节日福利;补充医疗保险;带薪年假 11500.0
4532 北京市海淀区西三旗建材城中路12号院26栋 北京荣联科创科技有限公司 岗位职责:1、根据具体项目要求,承担开发任务,按计划完成任务目标;2、根据用户需求按时完成开… https://m.zhaopin.com//jobs/48747592300027909814/ 研发工程师 绩效奖金;全勤奖;交通补助;餐补;定期体检;员工旅游;节日福利;带薪年假 5000.0
4533 北京市海淀区上地十街辉煌国际大厦 北京近颐科技有限公司 岗位职责:1负责服务集群的设计与搭建配置;2.负责Linux平台系统的安全管理;3.负责服务… https://m.zhaopin.com//jobs/292524636250052/ linux系统工程师 五险一金;交通补助;餐补;通讯补贴 8000.0
4534 北京市海淀区中关村软件园11号楼 北京精一强远科技有限公司 公司介绍:北京精一强远科技有限公司,致力于高端IT专业产品的专业设计、专业制造业务。公司拥有… https://m.zhaopin.com//jobs/287608631250052/ 软件开发工程师 五险一金;年底双薪;绩效奖金;包吃;通讯补贴;带薪年假;补充医疗保险;定期体检 12500.0
4535 北京市朝阳区双桥Dream2049园区世联文创一层107(东侧) 北京华沁智联科技有限公司 岗位职责1、 负责项目/产品的测试工作,参与产品需求分析,负责测试计划制定,并能预先评估项目… https://m.zhaopin.com//jobs/331013133250043/ 开发测试工程师(白盒) 创业公司;五险一金;绩效奖金;股票期权;餐补;带薪年假;弹性工作;节日福利 20000.0
4536 广顺北大街5号院内融创动力科技文化创意产业园B230 北京书生云科技有限公司 https://m.zhaopin.com//jobs/45496253700037561514/ 实施工程师 创业公司;周末双休;五险一金;带薪年假;弹性工作;通讯补贴 11500.0
4537 北京市东城区朝内大街298号 北京国研数通软件技术有限公司 岗位职责:1、负责大数据平台的开发和维护,负责大数据平台持续集成相关工具平台的架构设计与产品… https://m.zhaopin.com//jobs/120900932250257/ 大数据JAVA开发工程师 12500.0
4538 北京市东城区灯市口大街33号国中商业大厦423室 北京树优信息技术有限公司 工作职责: 1 负责或参与流体分析技术服务项目2 负责或参与流体优化技术服务项目3 负… https://m.zhaopin.com//jobs/226257529250059/ 流体力学仿真优化工程师 五险一金;绩效奖金;加班补助;交通补助;房补;带薪年假;员工旅游;节日福利 7000.0
4539 朝阳区来广营叶青大厦北园308 北京行易道科技有限公司 岗位职责:1、进行高可靠高安全嵌入式软件测试,包含代码测试、功能测试、性能测试、安全性测试等… https://m.zhaopin.com//jobs/22757003700087605207/ 嵌入式软件测试工程师 14薪;健身俱乐部;周末双休;五险一金;餐补;带薪年假;弹性工作;补充医疗保险 10500.0
4540 东城区王府井东街8号 澳门中心B1层funwork 睿医(北京)数据技术有限公司 职位描述:1.根据项目需求,独立完成各类型的临床数据的统计分析工作2.参与产品统计模块的功能… https://m.zhaopin.com//jobs/cz752253770j000214… 医学统计经理 五险一金;股票期权 22500.0

4541 rows × 7 columns

# 公司名带有奇怪的“  /   公司名清理一下
df['company'] = df['company'].apply(lambda x : x.split("/")[0].strip('"'))

这里是数据处理的进阶部分,暂时做个标记:

```python
# 导入两份数据:导一份公司地址出来,获取方位坐标,一份公司名称出来获取公司相关信息

#df.loc[:,["address","company"]].drop_duplicates().to_csv("address.csv",encoding="utf-8")

#df["company"].drop_duplicates().to_csv("company.csv",encoding="utf-8")

你可能感兴趣的:(数据挖掘,pandas,智联招聘,python,数据处理)