王者★孤傲

Scrapy项目 - 数据简析 - 实现腾讯网站社会招聘信息爬取的爬虫设计

一、数据分析截图

本例实验，使用Weka 3.7对腾讯招聘官网中网页上所罗列的招聘信息，如：其中的职位名称、链接、职位类别、人数、地点和发布时间等信息进行数据分析，详见如下图：

图1-1 Weka 3.7分析界面

图1-2 职位数据ZeroR分析界面

图1-3 数据聚类分析界面

图1-4 数据Visualize分析界面

二、数据分析结论

由图2-1可知，随着应聘人数的不断增加，其职位的需求便越少，同时，发布应聘岗位信息的企业主要来自，如：深圳、上海和北京等一线城市。这或许也在说明，一线城市主要是以技术作为企业发展的目标和趋势。

图2-1 职位与人数、地点的关系

在众多城市的相比较之下，深圳的岗位需求人数远远高于一线城市中的人才需求，而对于岗位需求的类型而言，深圳和上海区域都呈现了极高比例的态势。如图2-2所示。

这说明深圳和上海的人才岗位需求种类庞大，就目前情况而言，其地域对人才和岗位类型的缺口在不断快速发展和完善。对于非沿海企业，其深居中原，与国外企业合作较为稀少，由此对人才的需求自然也就不大。

图2-2 人数与地域关系

三、数据集

1.tencentSpider.csv --部分数据---

职位,链接,类型,人数,地点,时间
28966-交互设计师(深圳）,position_detail.php?id=46674&keywords=&tid=0&lid=0,设计类,1,深圳,2018-12-27
28966-游戏GUI视觉设计（深圳）,position_detail.php?id=46675&keywords=&tid=0&lid=0,设计类,1,深圳,2018-12-27
CSIG15-翻译君产品经理,position_detail.php?id=46669&keywords=&tid=0&lid=0,设计类,1,深圳,2018-12-27
27092-内容商业化运营经理/高级运营经理,position_detail.php?id=46671&keywords=&tid=0&lid=0,设计类,1,深圳,2018-12-27
27092-内容商业化产品经理/高级产品经理,position_detail.php?id=46672&keywords=&tid=0&lid=0,设计类,1,深圳,2018-12-27
27092-短视频内容商业化产品经理/高级产品经理,position_detail.php?id=46673&keywords=&tid=0&lid=0,设计类,1,深圳,2018-12-27
30360-QQ空间平台流量产品策划经理,position_detail.php?id=46664&keywords=&tid=0&lid=0,设计类,1,深圳,2018-12-27
30360-QQ空间短视频产品策划经理,position_detail.php?id=46665&keywords=&tid=0&lid=0,设计类,1,深圳,2018-12-27
30360-手机QQ Android/iOS开发工程师（深圳）,position_detail.php?id=46666&keywords=&tid=0&lid=0,设计类,1,深圳,2018-12-27
30360-社交平台QQ-Android开发工程师（深圳）,position_detail.php?id=46667&keywords=&tid=0&lid=0,设计类,1,深圳,2018-12-27
30360-手Q-iOS开发工程师（深圳）,position_detail.php?id=46668&keywords=&tid=0&lid=0,技术类,1,深圳,2018-12-27
27092-应用宝二次元游戏用户运营（深圳）,position_detail.php?id=46670&keywords=&tid=0&lid=0,技术类,1,深圳,2018-12-27
TEG-HRBP（深圳）,position_detail.php?id=46658&keywords=&tid=0&lid=0,技术类,1,深圳,2018-12-27
TEG06-云计算产品高级开发工程师（深圳）,position_detail.php?id=46660&keywords=&tid=0&lid=0,技术类,1,深圳,2018-12-27
15581-欢乐麻将运营策划（深圳）,position_detail.php?id=46661&keywords=&tid=0&lid=0,技术类,1,深圳,2018-12-27
23671-企鹅号视频质量管理(北京),position_detail.php?id=46662&keywords=&tid=0&lid=0,技术类,1,深圳,2018-12-27
23671-企鹅号视频质量管理（天津）,position_detail.php?id=46663&keywords=&tid=0&lid=0,技术类,1,深圳,2018-12-27

2.大数据算法处理后的数据

tencent-classifiers.rules.ZeroR

=== Run information ===

Scheme:       weka.classifiers.rules.ZeroR 
Relation:     tencentSpider
Instances:    2836
Attributes:   6
              职位
              链接
              类型
              人数
              地点
              时间
Test mode:    10-fold cross-validation

=== Classifier model (full training set) ===

ZeroR predicts class value: 15616-高级手游系统策划（上海）

Time taken to build model: 0 seconds

=== Stratified cross-validation ===
=== Summary ===

Correctly Classified Instances           0                0      %
Incorrectly Classified Instances      2836              100      %
Kappa statistic                         -0.0014
Mean absolute error                      0.0007
Root mean squared error                  0.0192
Relative absolute error                100      %
Root relative squared error            100      %
Total Number of Instances             2836     

=== Detailed Accuracy By Class ===

               TP Rate   FP Rate   Precision   Recall  F-Measure   ROC Area  Class
                 0         0          0         0         0          0.05     28966-交互设计师(深圳）
                 0         0          0         0         0          0.05     28966-游戏GUI视觉设计（深圳）
                 0         0          0         0         0          0.05     CSIG15-翻译君产品经理
                 0         0          0         0         0          0.05     27092-内容商业化运营经理/高级运营经理
                 0         0          0         0         0          0.05     27092-内容商业化产品经理/高级产品经理
                 0         0          0         0         0          0.05     27092-短视频内容商业化产品经理/高级产品经理
                 0         0          0         0         0          0.05     30360-QQ空间平台流量产品策划经理
                 0         0          0         0         0          0.05     30360-QQ空间短视频产品策划经理
                 0         0          0         0         0          0.05     30360-手机QQ Android/iOS开发工程师（深圳）
                 0         0          0         0         0          0.05     30360-社交平台QQ-Android开发工程师（深圳）
                 0         0          0         0         0          0.05     30360-手Q-iOS开发工程师（深圳）
                 0         0          0         0         0          0.05     27092-应用宝二次元游戏用户运营（深圳）
                 0         0          0         0         0          0.05     TEG-HRBP（深圳）
                 0         0          0         0         0          0.05     TEG06-云计算产品高级开发工程师（深圳）
                 0         0          0         0         0          0.05     15581-欢乐麻将运营策划（深圳）
                 0         0          0         0         0          0.05     23671-企鹅号视频质量管理(北京)
                 0         0          0         0         0          0.05     23671-企鹅号视频质量管理（天津）
                 0         0          0         0         0          0.05     18402-RPG手游版本管理（深圳）
                 0         0          0         0         0          0.05     28603-114 微信支付商户基础开发工程师（深圳）
                 0         0          0         0         0          0.05     28603-113 微信支付核心支付开发工程师(广州)
                 0         0          0         0         0          0.05     16810-腾讯动漫产品策划经理（深圳）
                 0         0          0         0         0          0.05     25668-腾讯云精细化营销高级市场经理（深圳）
                 0         0          0         0         0          0.05     30933-游戏技术美术TA（深圳）
                 0         0          0         0         0          0.05     30933-2D场景设计师（深圳）
                 0         0          0         0         0          0.05     PCG17-高级游戏运营
                 0         0          0         0         0          0.05     23671-企鹅号算法leader-图像识别（北京）
                 0         0          0         0         0          0.05     29311-CSIG-医疗健康高级品牌经理（深圳）
                 0         0          0         0         0          0.05     9615-CDG高级秘书（深圳）
                 0         0          0         0         0          0.05     25928-GCloud平台高级产品经理（深圳）
                 0         0          0         0         0          0.05     CDG064-广告数据挖掘与算法工程师（上海）
                 0         0          0         0         0          0.05     25928-GCloud游戏云平台高级架构师（深圳）
                 0         0          0         0         0          0.05     25928-GCloud游戏云平台高级技术PM
                 0         0          0         0         0          0.05     18302-新动作手游高级文学策划（深圳）
                 0         0          0         0         0          0.05     18302-新动作手游数值策划（深圳）
                 0         0          0         0         0          0.05     15612-手游3D特效设计师（深圳）
                 0         0          0         0         0          0.05     15612-3D动作设计师（深圳）
                 0         0          0         0         0          0.05     TME-全民K歌国际版曲库运营（马来/印尼/泰国/菲律宾方向）
                 0         0          0         0         0          0.05     TME-全民K歌国际版曲库运营（印度方向）
                 0         0          0         0         0          0.05     30360-windows客户端应用开发
                 0         0          0         0         0          0.1      30360-社交平台iOS开发工程师（深圳）
                 0         0          0         0         0          0.1      30360-社交平台Android开发工程师（深圳）
                 0         0          0         0         0          0.05     15612-3D特效组长（深圳）
                 0         0          0         0         0          0.05     15612-3D角色组长（深圳）
                 0         0          0         0         0          0.05     15612-3D角色设计师（深圳）
                 0         0          0         0         0          0.05     27730-Yoo视频产品经理（深圳）
                 0         0          0         0         0          0.05     CSIG08-web前端开发工程师（广州）
                 0         0          0         0         0          0.05     23674-推荐引擎机器学习后台开发高级工程师
                 0         0          0         0         0          0.1      25924-大数据平台开发工程师（深圳）
                 0         0          0         0         0          0.1      SA-腾讯社交广告大数据研发工程师（北京）
                 0         0          0         0         0          0.05     PCG15-互动视频C++/C/Java后台开发工程师（深圳）
                 0         0          0         0         0          0.05     29777-腾讯云金融行业后台开发高级工程师
                 0         0          0         0         0          0.05     PCG09-浏览器信息流项目经理
                 0         0          0         0         0          0.05     CSIG16-自动驾驶云平台前端工程师（北京）
                 0         0          0         0         0          0.05     14914-市场传播经理
                 0         0          0         0         0          0.05     23674-新闻Web前端开发高级工程师（北京）
                 0         0          0         0         0          0.05     23674-腾讯新闻高级产品经理
                 0         0          0         0         0          0.05     SA-腾讯社交广告算法工程师（北京）
                 0         0          0         0         0          0.05     SA-腾讯社交广告大数据后台工程师（研发中心 北京）
                 0         0          0         0         0          0.05     25663-腾讯云泛互联网后台开发高级工程师
                 0         0          0         0         0          0.05     26563-后台开发工程师(深圳）
                 0         0          0         0         0          0.05     19835-影视整合营销经理（北京）
                 0         0          0         0         0          0.05     29313-会计（项目合约制）（北京）
                 0         0          0         0         0          0.05     30361-企鹅FM平台运营
                 0         0          0         0         0          0.05     30361-企鹅FM小说版权运营
                 0         0          0         0         0          0.05     27553-腾讯音乐后台开发工程师（深圳）
                 0         0          0         0         0          0.05     WXG08-113 微信搜索基础后台开发工程师（深圳）
                 0         0          0         0         0          0.05     TEG11-视频内容理解高级工程师(北京）
                 0         0          0         0         0          0.05     WH-企业文化专家（深圳）
                 0         0          0         0         0          0.05     18428--数据库工程师（深圳）
                 0         0          0         0         0          0.05     22989-腾讯云硬件项目经理
                 0         0          0         0         0          0.05     CSIG07-安全大数据规划架构师
                 0         0          0         0         0          0.05     TEG04-智慧校园高级售前工程师（深圳）
                 0         0          0         0         0          0.05     23486-证券业务C++后台开发高级工程师（深圳）
                 0         0          0         0         0          0.05     23486-证券产品前端开发
                 0         0          0         0         0          0.05     30359-C/C++高级后台开发工程师
                 0         0          0         0         0          0.05     PCG10-腾讯文件云服务后台开发工程师
                 0         0          0         0         0          0.05     15605-高级3D动画设计师(深圳)
                 0         0          0         0         0          0.05     22989-腾讯专有云高级研发项目经理
                 0         0          0         0         0          0.05     22989-腾讯云计费平台高级产品经理(深圳)
                 0         0          0         0         0          0.05     23673-热点运营
                 0         0.601      0         0         0          0.199    15616-高级手游系统策划（上海）
                 0         0          0         0         0          0.1      23295-腾讯电竞品牌经理（深圳）
                 0         0          0         0         0          0.05     FC-服务采购管理商务主管（深圳）
                 0         0          0         0         0          0.05     17467-泛娱乐艺人商务拓展
                 0         0          0         0         0          0.05     22850-腾讯视频VIP异业合作商务（北京）
                 0         0          0         0         0          0.1      15618-游戏客户端开发工程师（上海）
                 0         0          0         0         0          0.05     15616-高级游戏关卡策划（上海）
                 0         0          0         0         0          0.05     23671-企鹅号内容营销负责人（北京）
                 0         0          0         0         0          0.05     20503-医疗影像研究员
                 0         0          0         0         0          0.05     17467-H5策划经理
                 0         0          0         0         0          0.05     17467-短视频策划经理
                 0         0          0         0         0          0.05     17467-社会化营销经理
                 0         0          0         0         0          0.05     S2-集团审计经理（深圳）
                 0         0          0         0         0          0.05     TEG14-云数据库高级研发工程师（深圳/北京/武汉）
                 0         0          0         0         0          0.05     GY0-Content Promotion Specialist (Indonesia)
                 0         0          0         0         0          0.05     29925-腾讯视频综艺内容营销
                 0         0          0         0         0          0.05     WXG03-115 小游戏引擎工具链开发（广州）
                 0         0          0         0         0          0.05     22989-腾讯云容器高级工程师（深圳）
                 0         0          0         0         0          0.05     PCG04-后台开发工程师（深圳）
                 0         0          0         0         0          0.05     25814-数据产品经理
                 0         0          0         0         0          0.05     23672-原创内容运营编辑
                 0         0          0         0         0          0.05     WXG03-115 小程序&小游戏基础前端开发（广州）
                 0         0          0         0         0          0.1      27564-移动游戏运营开发工程师
                 0         0          0         0         0          0.05     WXG03-小游戏引擎客户端开发(广州）
                 0         0          0         0         0          0.05     WXG03-小程序终端系统开发（广州）
                 0         0          0         0         0          0.05     WXG03-113 小程序业务开发（广州）
                 0         0          0         0         0          0.05     WXG10-331 企业微信营销经理（广州）
                 0         0          0         0         0          0.05     WXG03-122 小程序搜索算法研究员（广州）
                 0         0          0         0         0          0.05     22851-腾讯视频少儿IP高级商务经理（北京）
                 0         0          0         0         0          0.05     WXG03-113 小程序&小游戏基础后台开发（广州）
                 0         0          0         0         0          0.05     PCG17-web前端开发工程师（深圳）
                 0         0          0         0         0          0.1      22989-大数据AI综合应用后台开发工程师
                 0         0          0         0         0          0.1      21229-游戏后台开发（上海）
                 0         0          0         0         0          0.05     PCG09-web前端开发（深圳）
                 0         0          0         0         0          0.05     29777-腾讯云企业业务高级运营经理（深圳）
                 0         0          0         0         0          0.05     PCG15-互动视频web前端开发（深圳）
                 0         0          0         0         0          0.05     TEG06-.Net应用高级开发工程师（深圳）
                 0         0          0         0         0          0.05     27020-全栈云工程师（深圳）
                 0         0          0         0         0          0.05     18434-品牌策划经理 (深圳)
                 0         0          0         0         0          0.05     GY0-后台开发工程师（海外云产品）
                 0         0          0         0         0          0.05     GY0-前端开发工程师（海外云产品）
                 0         0          0         0         0          0.05     WXG03-小程序搜索架构工程师（广州）
                 0         0          0         0         0          0.1      PCG11-区域大网总裁（福州）
                 0         0          0         0         0          0.05     15569-游戏引擎高级研发工程师
                 0         0          0         0         0          0.05     29912-安卓客户端开发
                 0         0          0         0         0          0.05     25926-数据挖掘工程师
                 0         0          0         0         0          0.05     WXG01-115 微信Web前端开发（广州）
                 0         0          0         0         0          0.05     22989-专有云产品策划经理
                 0         0          0         0         0          0.05     22989-物联网前端高级工程师
                 0         0          0         0         0          0.05     22989-腾讯云高级运维工程师
                 0         0          0         0         0          0.1      24547-战略高级分析师
                 0         0          0         0         0          0.1      PCG11-区域大网总裁（上海）
                 0         0          0         0         0          0.05     22090-android开发工程师
                 0         0          0         0         0          0.1      PCG03-腾讯体育市场传播经理
                 0         0          0         0         0          0.05     18425-核心支付产品经理
                 0         0          0         0         0          0.05     PCG15-互动视频产品策划经理（深圳）
                 0         0          0         0         0          0.05     18425-支付资金管理产品经理
                 0         0          0         0         0          0.05     SD3-PUBG MOBILE 高级2D角色原画设计师
                 0         0          0         0         0          0.05     SD3-PUBG MOBILE 高级3D次世代角色设计师
                 0         0          0         0         0          0.05     SD3-PUBG MOBILE 高级商业化策划
                 0         0          0         0         0          0.05     SD3-PUBG MOBILE 高级玩法策划
                 0         0          0         0         0          0.05     18434-UI视觉设计师（深圳）
                 0         0          0         0         0          0.05     CSIG08-交互设计师（广州）
                 0         0          0         0         0          0.05     30359-存储运营开发高级工程师
                 0         0          0         0         0          0.05     30359-数据挖掘高级工程师
                 0         0          0         0         0          0.05     29569-金融APP产品策划经理
                 0         0          0         0         0          0.05     22086-腾讯体育项目验收管理经理
                 0         0          0         0         0          0.05     SD3-PUBG MOBILE 高级客户端开发工程师
                 0         0          0         0         0          0.05     SD3-PUBG MOBILE 高级UE4地形编辑
                 0         0          0         0         0          0.05     30359-Java后台开发工程师
                 0         0          0         0         0          0.05     30359-大数据后台开发工程师
                 0         0          0         0         0          0.05     30359-存储后台开发高级工程师
                 0         0          0         0         0          0.05     30359-大数据平台web前端开发工程师
                 0         0          0         0         0          0.05     25928-Unreal客户端开发工程师 (深圳)  
                 0         0          0         0         0          0.05     CSIG02-腾讯云web前端开发工程师（昆明）
                 0         0          0         0         0          0.05     19407-日语运营策划（上海）
                 0         0          0         0         0          0.05     30359-Java后台高级开发工程师
                 0         0          0         0         0          0.05     22086-腾讯体育IOS开发工程师（北京）
                 0         0          0         0         0          0.05     22989-高级产品运营经理-生态运营方向
                 0         0          0         0         0          0.05     25928-机器学习/人工智能研究员
                 0         0          0         0         0          0.05     25927-大数据后台开发高级工程师
                 0         0          0         0         0          0.05     WXG04-143 小游戏后台安全策略工程师(深圳)
                 0         0          0         0         0          0.05     PCG10-搜索引擎研发总监
                 0         0          0         0         0          0.05     PCG14-应用宝商业化后台开发（深圳）
                 0         0          0         0         0          0.05     28481-医疗健康事业部商务支持（深圳）
                 0         0          0         0         0          0.05     TEG02-DCN系统设计师
                 0         0          0         0         0          0.05     TEG02-NFV网络研发工程师
                 0         0          0         0         0          0.05     TEG02-FPGA研发工程师
                 0         0          0         0         0          0.05     PCG15-互动视频超级用户产品运营经理
                 0         0          0         0         0          0.05     PCG15-海外直播运营经理
                 0         0          0         0         0          0.05     PCG15-海外渠道运营推广经理
                 0         0          0         0         0          0.05     SA-效果类行业运营经理（QQ系广告）深圳
                 0         0          0         0         0          0.05     28481-医疗健康售前解决方案架构师（深圳/北京/上海）
                 0         0          0         0         0          0.05     WXG11--115微信读书界面开发工程师
                 0         0          0         0         0          0.05     25664-政府行业交付项目经理
                 0         0          0         0         0          0.05     25667-渠道销售经理（深圳）
                 0         0          0         0         0          0.05     SA-腾讯社交广告高级系统测试工程师（研发中心 北京）
                 0         0          0         0         0          0.1      22989-专有云高级后台研发工程师（深圳/北京）
                 0         0          0         0         0          0.1      22989-高级大数据研发工程师（深圳/北京/上海/成都）
                 0         0          0         0         0          0.05     25928-高级语音算法工程师（上海）
                 0         0          0         0         0          0.05     25928-高级图形开发工程师（深圳总部）
                 0         0          0         0         0          0.05     25928-高级图形开发工程师（上海）
                 0         0          0         0         0          0.05     HY-游戏发行/运营培训生（深圳）
                 0         0          0         0         0          0.1      PCG14-应用宝数据挖掘算法工程师（深圳）
                 0         0          0         0         0          0.05     PCG04-IOS/Android终端开发工程师（深圳）
                 0         0          0         0         0          0.05     25928-前端测试开发工程师（深圳）
                 0         0          0         0         0          0.05     28481-健康保险行业合作高级经理（深圳）
                 0         0          0         0         0          0.05     28481-医药行业合作高级经理（深圳）
                 0         0          0         0         0          0.05     28481-医疗健康UI开发工程师(深圳)
                 0         0          0         0         0          0.05     TME-全民K歌项目经理（深圳）
                 0         0          0         0         0          0.1      TEG06-Golang高级后台开发工程师（深圳）
                 0         0          0         0         0          0.05     CS-“科学探索奖”项目总监
                 0         0          0         0         0          0.1      TME-QQ音乐营收产品策划（深圳）
                 0         0          0         0         0          0.05     30359-大数据高级运营开发工程师
                 0         0          0         0         0          0.05     25928-高级Java后台开发工程师（深圳）
                 0         0          0         0         0          0.05     PCG20-行政运营经理（北京）
                 0         0          0         0         0          0.1      PCG20-高管秘书（深圳）
                 0         0          0         0         0          0.05     S2-CDG财务管理（深圳）
                 0         0          0         0         0          0.05     14914-市场助理总经理
                 0         0          0         0         0          0.05     22086-腾讯体育高级后台开发工程师（北京）
                 0         0          0         0         0          0.05     22989-腾讯云Spark高级工程师（深圳）
                 0         0          0         0         0          0.05     23672-腾讯娱乐深度记者（北京）
                 0         0          0         0         0          0.05     23672-腾讯新闻原创节目内容运营
                 0         0          0         0         0          0.05     PCG20-PCG办公室深圳行政组leader
                 0         0          0         0         0          0.1      PCG20-行政运营经理（深圳）
                 0         0          0         0         0          0.05     21085-穿越火线社区运营
                 0         0          0         0         0          0.05     21090-赛事经理（深圳）
                 0         0          0         0         0          0.05     21090-市场推广经理（深圳）
                 0         0          0         0         0          0.05     SA-腾讯社交广告投放平台产品经理（微信广告 深圳）
                 0         0          0         0         0          0.05     25927-高级php后台开发（深圳）
                 0         0          0         0         0          0.05     18432-境外商务拓展经理
                 0         0          0         0         0          0.05     28481-医疗大数据开发工程师（深圳）
                 0         0          0         0         0          0.05     27092-高级前端广告工程师（深圳）
                 0         0          0         0         0          0.05     WXG03-122 小程序搜索算法工程师（广州）
                 0         0          0         0         0          0.05     27730-Yoo视频内容运营(北京)-泛生活
                 0         0          0         0         0          0.05     21309-腾讯课堂-广告流量运营高级经理
                 0         0          0         0         0          0.05     17759-腾讯视频PC客户端游戏中心运营
                 0         0          0         0         0          0.05     CSIG02-智慧校园产品运营经理(北京)
                 0         0          0         0         0          0.05     23673-娱乐热点运营编辑（北京）
                 0         0          0         0         0          0.05     18436-金融数据专家
                 0         0          0         0         0          0.05     28302-Start云游戏windows客户端高级开发工程师 
                 0         0          0         0         0          0.05     29912-短视频Android开发工程师
                 0         0          0         0         0          0.05     29912-短视频移动端开发iOS
                 0         0          0         0         0          0.05     29925-腾讯视频品牌经理
                 0         0          0         0         0          0.05     TME-全民K歌直播产品策划
                 0         0          0         0         0          0.05     TME-全民K歌营收产品策划
                 0         0          0         0         0          0.05     28302-Start云游戏后台高级开发工程师 
                 0         0          0         0         0          0.05     28302-Start云游戏windows平台高级开发工程师 
                 0         0          0         0         0          0.05     SA-腾讯社交广告公众号广告流量运营经理（微信广告 深圳）
                 0         0          0         0         0          0.05     TEG02-光网络控制系统高级研发工程师（深圳总部）
                 0         0          0         0         0          0.05     TEG02-光网络控制系统高级研发工程师（北京）
                 0         0          0         0         0          0.05     27730-Yoo视频战略负责人（北京）
                 0         0          0         0         0          0.1      GY0-海外广告运营
                 0         0          0         0         0          0.05     29569-VB业务WEB前端开发工程师
                 0         0          0         0         0          0.05     GY0-JOOX Andriod开发工程师（深圳）
                 0         0          0         0         0          0.05     29912-短视频社区商务经理
                 0         0          0         0         0          0.05     29912-拍摄器开放平台产品经理
                 0         0          0         0         0          0.05     29912-微视增长渠道运营
                 0         0          0         0         0          0.05     29912-微视增长运营-产品版本
                 0         0          0         0         0          0.05     29912-微视社区产品运营骨干
                 0         0          0         0         0          0.05     29912-微视审核团队标准化运营岗
                 0         0          0         0         0          0.05     S2-高级应用开发工程师
                 0         0          0         0         0          0.05     23671-企鹅号数据挖掘工程师-图像识别（深圳）
                 0         0          0         0         0          0.05     14914-微视公关经理（深圳）
                 0         0          0         0         0          0.05     23672-科学类资讯视频项目PM
                 0         0          0         0         0          0.05     23672-视频资讯项目策划
                 0         0          0         0         0          0.05     27730-Yoo视频内容运营-时尚方向（北京）
                 0         0          0         0         0          0.05     18425-支付后台开发高级工程师
                 0         0          0         0         0          0.05     23671-企鹅号游戏品类运营
                 0         0          0         0         0          0.05     S2-TEG财务高级经理（深圳）
                 0         0          0         0         0          0.05     CS-明德公立学校财务主管（基金会编制）
                 0         0          0         0         0          0.05     25928-虚拟人研究高级工程师
                 0         0          0         0         0          0.05     25928-计算图形/视觉/动画高级算法工程师
                 0         0          0         0         0          0.05     TEG13-安全策略后台开发工程师（深圳）
                 0         0          0         0         0          0.05     22850-腾讯视频运营经理（会员体系方向）
                 0         0          0         0         0          0.05     22989-腾讯云物联网前端研发(高级)工程师(上海)
                 0         0          0         0         0          0.05     22989-腾讯云物联网后台研发（高级）工程师（上海）
                 0         0          0         0         0          0.05     20503-AI应用Linux后台研发工程师（深圳）
                 0         0          0         0         0          0.05     29313-PCG财务高级经理（北京）
                 0         0          0         0         0          0.05     PCG04-外包管理员（深圳）
                 0         0          0         0         0          0.05     29313-PCG财务分析经理（北京）
                 0         0          0         0         0          0.05     18425-支付测试开发工程师（深圳）
                 0         0          0         0         0          0.05     18432-金融产品项目经理
                 0         0          0         0         0          0.05     18796-H5开发工程师(深圳)
                 0         0          0         0         0          0.05     RP-应用开发工程师
                 0         0          0         0         0          0.05     PCG14-AI产品内容运营（深圳）
                 0         0          0         0         0          0.05     TZ-IR Analyst（深圳）
                 0         0          0         0         0          0.05     PCG10-QQ浏览器资讯推荐算法高级工程师（北京）
                 0         0          0         0         0          0.05     WXG10-211 企业微信内容运营经理（广州）
                 0         0          0         0         0          0.05     S2-TEG财务分析经理（深圳）
                 0         0          0         0         0          0.05     TEG09-机器学习平台专家工程师 
                 0         0          0         0         0          0.05     27020-量子实验室项目经理（深圳）
                 0         0          0         0         0          0.1      TEG11-搜索后台开发工程师（深圳）
                 0         0          0         0         0          0.05     TME-腾讯音乐Android开发工程师（北京）
                 0         0          0         0         0          0.05     25668-腾讯云市场营销中心-腾讯云产品推广市场经理（深圳）
                 0         0          0         0         0          0.05     22989-物联网开发平台高级产品策划经理
                 0         0          0         0         0          0.05     22989-物联网产品运营（深圳）
                 0         0          0         0         0          0.05     18402-MMO手游-平台渠道运营
                 0         0          0         0         0          0.05     19837-影业宣传品牌经理（北京）
                 0         0          0         0         0          0.1      TEG09-内核高级开发工程师（深圳）
                 0         0          0         0         0          0.05     TEG09-异构计算专家工程师
                 0         0          0         0         0          0.05     25928-游戏后台开发工程师
                 0         0          0         0         0          0.05     25928-游戏客户端开发高级工程师（深圳总部）
                 0         0          0         0         0          0.05     23295-互娱市场商业分析经理
                 0         0          0         0         0          0.05     23295-互娱市场资源管理经理
                 0         0          0         0         0          0.05     TEG05-移动终端安全高级工程师（深圳）
                 0         0          0         0         0          0.05     22989-腾讯云云服务器高级产品经理（深圳）
                 0         0          0         0         0          0.05     CSIG18-Linux后台开发工程师
                 0         0          0         0         0          0.05     27553-腾讯音乐Web前端开发工程师（深圳）
                 0         0          0         0         0          0.05     25928-游戏美术师(上海)
                 0         0          0         0         0          0.05     25928-游戏客户端开发高级工程师（上海）
                 0         0          0         0         0          0.05     23486-证券产品经理
                 0         0          0         0         0          0.05     CSIG14-数据挖掘工程师（深圳）
                 0         0          0         0         0          0.05     CSIG14-URL安全组后台开发工程师（深圳）
                 0         0          0         0         0          0.1      PCG14-算法工程开发工程师（深圳）
                 0         0          0         0         0          0.05     29314-CSIG财务管理经理（深圳）
                 0         0          0         0         0          0.05     WXG07-113 QQ邮箱安全后台开发工程师（广州）
                 0         0          0         0         0          0.05     15614-天刀3D特效设计师（上海）
                 0         0          0         0         0          0.05     27730-Yoo视频拓展运营（搞笑品类）-北京
                 0         0          0         0         0          0.05     22989-腾讯云网络产品策划经理
                 0         0          0         0         0          0.05     27087-数据营销高级经理（深圳）
                 0         0          0         0         0          0.05     27087-数据营销经理(深圳）
                 0         0          0         0         0          0.05     27087-应用宝行业营销经理（深圳）
                 0         0          0         0         0          0.05     TEG02-服务器可靠性工程师
                 0         0          0         0         0          0.1      15575-《王者荣耀》数值策划（成都）
                 0         0          0         0         0          0.05     26711-汽车内容运营
                 0         0          0         0         0          0.05     27730-Yoo视频拓展运营（游戏品类）-北京
                 0         0          0         0         0          0.05     22989-腾讯云网络产品运营经理
                 0         0          0         0         0          0.05     WXG01-111 微信数据分析师（广州）
                 0         0          0         0         0          0.05     23674-Android开发工程师（北京）
                 0         0          0         0         0          0.05     CSIG18-云安全项目经理（深圳）
                 0         0          0         0         0          0.1      25666-腾讯云区域销售经理
                 0         0          0         0         0          0.05     CSIG18-腾讯云安全web前端工程师
                 0         0          0         0         0          0.05     15575-《王者荣耀》社区运营（成都）
                 0         0          0         0         0          0.05     TME-QQ音乐社交Web前端工程师（深圳）
                 0         0          0         0         0          0.05     TME-QQ音乐社交后台开发工程师（深圳）
                 0         0          0         0         0          0.05     SA-腾讯社交广告Q系流量策略产品经理（深圳）
                 0         0          0         0         0          0.05     TME-QQ音乐创新后台开发工程师（深圳）
                 0         0          0         0         0

斤斤计较的婚姻到底有多难？白心之岂必有为
很多人私聊我会问到在哪个人群当中斤斤计较的人最多？我都会回答他，一般婚姻出现问题的斤斤计较的人士会非常多，以我多年经验，在婚姻落的一塌糊涂的人当中，斤斤计较的人数占比在20～30%以上，也就是说10个婚姻出现问题的斤斤计较的人有2-3个有多不减。在婚姻出问题当中，有大量的心理不平衡的、尖酸刻薄的怨妇。在婚姻中仅斤斤计较有两种类型：第一种是物质上的，另一种是精神上的。在物质与精神上抠门已经严重的影响
情绪觉察日记第37天露露_e800
今天是家庭关系规划师的第二阶最后一天，慧萍老师帮我做了个案，帮我处理了埋在心底好多年的一份恐惧，并给了我深深的力量！这几天出来学习，爸妈过来婆家帮我带小孩，妈妈出于爱帮我收拾东西，并跟我先生和婆婆产生矛盾，妈妈觉得他们没有照顾好我…。今晚回家见到妈妈，我很欣赏她并赞扬她，妈妈说今晚要跟我睡我说好，当我们俩躺在床上准备睡觉的时候，我握着妈妈的手对她说:妈妈这几天辛苦你了，你看你多利害把我们的家收拾得
芦花鞋一四许叶晗
又是在一个寒冷的夏日里，青铜和葵花决定今天一起去卖芦花鞋，奶奶亲手给他们做了一碗热乎乎的粥对他们说:“就靠你们两挣生活费了这碗粥赶紧趁热喝了吧！”于是青铜和葵花喝完了奶奶给她们做的粥，就准备去镇上卖卢花鞋，这回青铜和葵花穿着新的芦花鞋来到了镇上。青铜这回看到了很多人都在卖，用手势表达对葵花说:“这回有好多人在抢我们生意呢！我们必须得吆喝起来。”葵花点了点头。可是谁知他们也大声的叫，卖芦花喽！卖芦花
QQ群采集助手，精准引流必备神器 2401_87347160 其他经验分享
功能概述微信群查找与筛选工具是一款专为微信用户设计的辅助工具，它通过关键词搜索功能，帮助用户快速找到相关的微信群，并提供筛选是否需要验证的群组的功能。主要功能关键词搜索：用户可以输入关键词，工具将自动查找包含该关键词的微信群。筛选功能：工具提供筛选机制，用户可以选择是否只显示需要验证或不需要验证的群组。精准引流：通过上述功能，用户可以更精准地找到目标群组，进行有效的引流操作。3.设备需求该工具可以
关于沟通这件事，项目经理不需要每次都面对面进行流程大师兄
很多项目经理都会遇到这样的问题，项目中由于事情太多，根本没有足够的时间去召开会议，那在这种情况下如何去有效地管理项目中的利益相关者？当然，不建议电子邮件也不需要开会的话，建议可以采取下面几种方式来形成有效的沟通，这几种方式可以帮助你努力的通过各种办法来保持和各方面的联系。项目经理首先要问自己几个问题，项目中哪些利益相关者是必须要进行沟通的？可以列出项目中所有的利益相关者清单，同时也整理出项目中哪些
机器学习与深度学习间关系与区别 ℒℴѵℯ心·动ꦿ໊ོ꫞ 人工智能学习深度学习 python
一、机器学习概述定义机器学习（MachineLearning,ML）是一种通过数据驱动的方法，利用统计学和计算算法来训练模型，使计算机能够从数据中学习并自动进行预测或决策。机器学习通过分析大量数据样本，识别其中的模式和规律，从而对新的数据进行判断。其核心在于通过训练过程，让模型不断优化和提升其预测准确性。主要类型1.监督学习（SupervisedLearning）监督学习是指在训练数据集中包含输入
铭刻于星（四十二）随风至
69夜晚，绍敏同学做完功课后，看了眼房外，没听到动静才敢从书包的夹层里拿出那个心形纸团。折痕压得很深，都有些旧了，想来是已经写好很久了。绍敏同学慢慢地、轻轻地捏开折叠处，待到全部拆开后，又反复抚平纸张，然后仔细地一字字默看。只是开头的三个字是第一次看到，让她心漏跳了几拍。“亲爱的绍敏：从四年级的时候，我就喜欢你了，但是我一直不敢说，怕影响你学习。六年级的时候听说有人跟你表白，你接受了，我很难过，但
底层逆袭到底有多难，不甘平凡的你准备好了吗？让吴起给你说说造命者说
底层逆袭到底有多难，不甘平凡的你准备好了吗？让吴起给你说说我叫吴起，生于公元前440年的战国初期，正是群雄并起、天下纷争不断的时候。后人说我是军事家、政治家、改革家，是兵家代表人物。评价我一生历仕鲁、魏、楚三国，通晓兵家、法家、儒家三家思想，在内政军事上都有极高的成就。周安王二十一年（公元前381年），因变法得罪守旧贵族，被人乱箭射死。我出生在卫国一个“家累万金”的富有家庭，从年轻时候起就不甘平凡
2020-01-25 晴岚85
郑海燕坚持分享590天2020.1.24在生活中只存在两个问题。一个问题是：你知道想要达成的目标是什么，但却不知道如何才能达成；另一个问题是：你不知道你的目标是什么。前一个是行动的问题，后一个是结果的问题。通过制定具体的下一步行动，可以解决不知道如何开始行动的问题。而通过去想象结果，对结果做预估，可以解决找不着目标的问题。对于所有吸引我们注意力，想要完成的任务，你可以先想象一下，预期的结果究竟是什
随笔 | 仙一般的灵气海思沧海
仙岛今天，我看了你全部，似乎已经进入你的世界我不知道，这是否是梦幻，还是你仙一般的灵气吸引了我也许每一个人都要有一份属于自己的追求，这样才能够符合人生的梦想，生活才能够充满着阳光与快乐我不知道，我为什么会这样的感叹，是在感叹自己的人生，还是感叹自己一直没有孜孜不倦的追求只感觉虚度了光阴，每天活在自己的梦中，活在一个不真实的世界是在逃避自己，还是在逃避周围的一切有时候我嘲笑自己，嘲笑自己如此的虚无，
想家爆米花机
也许不同于大家对家乡的思念，我对家乡甚至是疯狂的不舍。还未踏出车站就感觉到幸福，我享受这里的夕阳、这里的浓烈柴火味、这里每一口家常菜。我是宅女，我贪恋家的安逸。刚刚踏出大学校门，初出茅庐，无法适应每年只能国庆和春节回家。我焦虑、失眠、无端发脾气，是无法适应工作的节奏，是无法接受我将一步步离开家乡的事实。我不想承认自己胸无大志，选择再次踏上征程。图片发自App
【iOS】MVC设计模式 Magnetic_h ios mvc 设计模式 objective-c 学习 ui
MVC前言如何设计一个程序的结构，这是一门专门的学问，叫做"架构模式"（architecturalpattern），属于编程的方法论。MVC模式就是架构模式的一种。它是Apple官方推荐的App开发架构，也是一般开发者最先遇到、最经典的架构。MVC各层controller层Controller/ViewController/VC（控制器）负责协调Model和View，处理大部分逻辑它将数据从Mod
OC语言多界面传值五大方式 Magnetic_h ios ui 学习 objective-c 开发语言
前言在完成暑假仿写项目时，遇到了许多需要用到多界面传值的地方，这篇博客来总结一下比较常用的五种多界面传值的方式。属性传值属性传值一般用前一个界面向后一个界面传值，简单地说就是通过访问后一个视图控制器的属性来为它赋值，通过这个属性来做到从前一个界面向后一个界面传值。首先在后一个界面中定义属性@interfaceBViewController:UIViewController@propertyNSSt
一百九十四章. 自相矛盾巨木擎天
唉！就这么一夜，林子感觉就像过了很多天似的，先是回了阳间家里，遇到了那么多不可思议的事情儿。特别是小伙伴们，第二次与自己见面时，僵硬的表情和恐怖的气氛，让自己如坐针毡，打从心眼里难受！还有东子，他现在还好吗？有没有被人欺负？护城河里的小鱼小虾们，还都在吗？水不会真的干枯了吧？那对相亲相爱漂亮的太平鸟儿，还好吧！春天了，到了做窝、下蛋、喂养小鸟宝宝的时候了，希望它们都能够平安啊！虽然没有看见家人，也
UI学习——cell的复用和自定义cell Magnetic_h ui 学习
目录cell的复用手动（非注册）自动（注册）自定义cellcell的复用在iOS开发中，单元格复用是一种提高表格（UITableView）和集合视图（UICollectionView）滚动性能的技术。当一个UITableViewCell或UICollectionViewCell首次需要显示时，如果没有可复用的单元格，则视图会创建一个新的单元格。一旦这个单元格滚动出屏幕，它就不会被销毁。相反，它被添
element实现动态路由+面包屑软件技术NINI vue案例 vue.js 前端
el-breadcrumb是ElementUI组件库中的一个面包屑导航组件，它用于显示当前页面的路径，帮助用户快速理解和导航到应用的各个部分。在Vue.js项目中，如果你已经安装了ElementUI，就可以很方便地使用el-breadcrumb组件。以下是一个基本的使用示例：安装ElementUI（如果你还没有安装的话）:你可以通过npm或yarn来安装ElementUI。bash复制代码npmi
10月|愿你的青春不负梦想-读书笔记-01 Tracy的小书斋
本书的作者是俞敏洪，大家都很熟悉他了吧。俞敏洪老师是我行业的领头羊吧，也是我事业上的偶像。本日摘录他书中第一章中的金句：『一个人如果什么目标都没有，就会浑浑噩噩，感觉生命中缺少能量。能给我们能量的，是对未来的期待。第一件事，我始终为了进步而努力。与其追寻全世界的骏马，不如种植丰美的草原，到时骏马自然会来。第二件事，我始终有阶段性的目标。什么东西能给我能量？答案是对未来的期待。』读到这里的时候，我便
C语言宏函数南林yan C语言 c语言
一、什么是宏函数？通过宏定义的函数是宏函数。如下，编译器在预处理阶段会将Add(x,y)替换为((x)*(y))#defineAdd(x,y)((x)*(y))#defineAdd(x,y)((x)*(y))intmain(){inta=10;intb=20;intd=10;intc=Add(a+d,b)*2;cout<
地推话术，如何应对地推过程中家长的拒绝校师学
相信校长们在做地推的时候经常遇到这种情况：市场专员反馈家长不接单，咨询师反馈难以邀约这些家长上门，校区地推疲软，招生难。为什么？仅从地推层面分析，一方面因为家长受到的信息轰炸越来越多，对信息越来越“免疫”；而另一方面地推人员的专业能力和营销话术没有提高，无法应对家长的拒绝，对有意向的家长也不知如何跟进，眼睁睁看着家长走远；对于家长的疑问，更不知道如何有技巧地回答，机会白白流失。由于回答没技巧和专业
谢谢你们，爱你们！鹿游儿
昨天家人去泡温泉，二个孩子也带着去，出发前一晚，匆匆下班，赶回家和孩子一起收拾。饭后，我拿出笔和本子（上次去澳门时做手帐的本子）写下了1\2\3\4\5\6\7\8\9,让后让小壹去思考，带什么出发去旅游呢？她在对应的数字旁边画上了，泳衣、泳圈、肖恩、内衣内裤、tapuy、拖鞋……画完后，就让她自己对着这个本子，将要带的，一一带上，没想到这次带的书还是这本《便便工厂》(晚上姑婆发照片过来，妹妹累得
C语言如何定义宏函数？小九格物 c语言
在C语言中，宏函数是通过预处理器定义的，它在编译之前替换代码中的宏调用。宏函数可以模拟函数的行为，但它们不是真正的函数，因为它们在编译时不会进行类型检查，也不会分配存储空间。宏函数的定义通常使用#define指令，后面跟着宏的名称和参数列表，以及宏展开后的代码。宏函数的定义方式：1.基本宏函数：这是最简单的宏函数形式，它直接定义一个表达式。#defineSQUARE(x)((x)*(x))2.带参
微服务下功能权限与数据权限的设计与实现 nbsaas-boot 微服务 java 架构
在微服务架构下，系统的功能权限和数据权限控制显得尤为重要。随着系统规模的扩大和微服务数量的增加，如何保证不同用户和服务之间的访问权限准确、细粒度地控制，成为设计安全策略的关键。本文将讨论如何在微服务体系中设计和实现功能权限与数据权限控制。1.功能权限与数据权限的定义功能权限：指用户或系统角色对特定功能的访问权限。通常是某个用户角色能否执行某个操作，比如查看订单、创建订单、修改用户资料等。数据权限：
理解Gunicorn：Python WSGI服务器的基石范范0825 ipython linux 运维
理解Gunicorn：PythonWSGI服务器的基石介绍Gunicorn，全称GreenUnicorn，是一个为PythonWSGI（WebServerGatewayInterface）应用设计的高效、轻量级HTTP服务器。作为PythonWeb应用部署的常用工具，Gunicorn以其高性能和易用性著称。本文将介绍Gunicorn的基本概念、安装和配置，帮助初学者快速上手。1.什么是Gunico
小丽成长记（四十三）玲玲54321
小丽发现，即使她好不容易调整好自己的心态下一秒总会有不确定的伤脑筋的事出现，一个接一个的问题，人生就没有停下的时候，小问题不断出现。不过她今天看的书，她接受了人生就是不确定的，厉害的人就是不断创造确定性，在Ta的领域比别人多的确定性就能让自己脱颖而出，显示价值从而获得的比别人多的利益。正是这样的原因，因为从前修炼自己太少，使得她现在在人生道路上打怪起来困难重重，她似乎永远摆脱不了那种无力感，有种习
学点心理知识，呵护孩子健康静候花开_7090
昨天听了华中师范大学教育管理学系副教授张玲老师的《哪里才是学生心理健康的最后庇护所，超越教育与技术的思考》的讲座。今天又重新学习了一遍，收获匪浅。张玲博士也注意到了当今社会上的孩子由于心理问题导致的自残、自杀及伤害他人等恶性事件。她向我们普及了一个重要的命题，她说心理健康的一些基本命题，我们与我们通常的一些教育命题是不同的，她还举了几个例子，让我们明白我们原来以为的健康并非心理学上的健康。比如如果
2021年12月19日，春蕾教育集团团建活动感受——黄晓丹黄错错加油
感受:1.从陌生到熟悉的过程。游戏环节让我们在轻松的氛围中得到了锻炼，也增长了不少知识。2.游戏过程中，我们贡献的是个人力量，展现的是团队的力量。它磨合的往往不止是工作的熟悉，更是观念上契合度的贴近。3.这和工作是一样的道理。在各自的岗位上，每个人摆正自己的位置、各司其职充分发挥才能，并团结一致劲往一处使，才能实现最大的成功。新知:1.团队精神需要不断地创新。过去，人们把创新看作是冒风险，现在人们
Cell Insight | 单细胞测序技术又一新发现，可用于HIV-1和Mtb共感染个体诊断尐尐呅
结核病是艾滋病合并其他疾病中导致患者死亡的主要原因。其中结核病由结核分枝杆菌（Mycobacteriumtuberculosis,Mtb）感染引起，获得性免疫缺陷综合症（艾滋病）由人免疫缺陷病毒（Humanimmunodeficiencyvirustype1,HIV-1）感染引起。国家感染性疾病临床医学研究中心/深圳市第三人民医院张国良团队携手深圳华大生命科学研究院吴靓团队，共同研究得出单细胞测序
c++ 的iostream 和 c++的stdio的区别和联系黄卷青灯77 c++算法开发语言 iostream stdio
在C++中，iostream和C语言的stdio.h都是用于处理输入输出的库，但它们在设计、用法和功能上有许多不同。以下是两者的区别和联系：区别1.编程风格iostream（C++风格）：C++标准库中的输入输出流类库，支持面向对象的输入输出操作。典型用法是cin（输入）和cout（输出），使用>操作符来处理数据。更加类型安全，支持用户自定义类型的输入输出。#includeintmain(){in
瑶池防线谜影梦蝶
冥华虽然逃过了影梦的军队，但他是一个忠臣，他选择上报战况。败给影梦后成逃兵，高层亡尔还活着，七重天失守......随便一条，即可处死冥华。冥华自然是知道以仙界高层的习性此信一发自己必死无疑，但他还选择上报实情，因为责任。同样此信送到仙宫后，知道此事的人，大多数人都认定冥华要完了，所以上到仙界高层，下到扫大街的，包括冥华自己，全都准备好迎接冥华之死。如果仙界现在还属于两方之争的话，冥华必死无疑。然而
爬山后遗症璃绛
爬山，攀登，一步一步走向制高点，是一种挑战。成功抵达是一种无法言语的快乐，在山顶吹吹风，看看风景，这是从未有过的体验。然而，爬山一时爽，下山腿打颤，颠簸的路，一路向下走，腿部力量不够，走起来抖到不行，停不下来了！第二天必定腿疼，浑身酸痛，坐立难安！
Java常用排序算法/程序员必须掌握的8大排序算法 cugfy java
分类： 1）插入排序（直接插入排序、希尔排序） 2）交换排序（冒泡排序、快速排序） 3）选择排序（直接选择排序、堆排序） 4）归并排序 5）分配排序（基数排序）所需辅助空间最多：归并排序所需辅助空间最少：堆排序平均速度最快：快速排序不稳定：快速排序，希尔排序，堆排序。先来看看8种排序之间的关系： 1.直接插入排序（1
【Spark102】Spark存储模块BlockManager剖析 bit1129 manager
Spark围绕着BlockManager构建了存储模块，包括RDD，Shuffle，Broadcast的存储都使用了BlockManager。而BlockManager在实现上是一个针对每个应用的Master/Executor结构，即Driver上BlockManager充当了Master角色，而各个Slave上(具体到应用范围，就是Executor)的BlockManager充当了Slave角色
linux 查看端口被占用情况详解 daizj linux 端口占用 netstat lsof
经常在启动一个程序会碰到端口被占用，这里讲一下怎么查看端口是否被占用，及哪个程序占用，怎么Kill掉已占用端口的程序 1、lsof -i:port port为端口号 [root@slave /data/spark-1.4.0-bin-cdh4]# lsof -i:8080 COMMAND PID USER FD TY
Hosts文件使用周凡杨 hosts locahost
一切都要从localhost说起，经常在tomcat容器起动后，访问页面时输入http://localhost:8088/index.jsp，大家都知道localhost代表本机地址，如果本机IP是10.10.134.21，那就相当于http://10.10.134.21:8088/index.jsp，有时候也会看到http: 127.0.0.1:
java excel工具 g21121 Java excel
直接上代码，一看就懂，利用的是jxl： import java.io.File; import java.io.IOException; import jxl.Cell; import jxl.Sheet; import jxl.Workbook; import jxl.read.biff.BiffException; import jxl.write.Label; import
web报表工具finereport常用函数的用法总结（数组函数）老A不折腾 finereport web报表函数总结
ADD2ARRAY ADDARRAY(array,insertArray, start):在数组第start个位置插入insertArray中的所有元素，再返回该数组。示例： ADDARRAY([3,4, 1, 5, 7], [23, 43, 22], 3)返回[3, 4, 23, 43, 22, 1, 5, 7]. ADDARRAY([3,4, 1, 5, 7], "测试&q
游戏服务器网络带宽负载计算墙头上一根草服务器
家庭所安装的4M，8M宽带。其中M是指，Mbits/S 其中要提前说明的是： 8bits = 1Byte 即8位等于1字节。我们硬盘大小50G。意思是50*1024M字节，约为 50000多字节。但是网宽是以“位”为单位的，所以，8Mbits就是1M字节。是容积体积的单位。 8Mbits/s后面的S是秒。8Mbits/s意思是每秒8M位，即每秒1M字节。我是在计算我们网络流量时想到的
我的spring学习笔记2-IoC（反向控制依赖注入） aijuans Spring 3 系列
IoC（反向控制依赖注入）这是Spring提出来了，这也是Spring一大特色。这里我不用多说，我们看Spring教程就可以了解。当然我们不用Spring也可以用IoC，下面我将介绍不用Spring的IoC。 IoC不是框架，她是java的技术，如今大多数轻量级的容器都会用到IoC技术。这里我就用一个例子来说明：如：程序中有 Mysql.calss 、Oracle.class 、SqlSe
高性能mysql 之选择存储引擎(一) annan211 mysql InnoDB MySQL引擎存储引擎
1 没有特殊情况，应尽可能使用InnoDB存储引擎。原因：InnoDB 和 MYIsAM 是mysql 最常用、使用最普遍的存储引擎。其中InnoDB是最重要、最广泛的存储引擎。她被设计用来处理大量的短期事务。短期事务大部分情况下是正常提交的，很少有回滚的情况。InnoDB的性能和自动崩溃恢复特性使得她在非事务型存储的需求中也非常流行，除非有非常
UDP网络编程百合不是茶 UDP编程局域网组播
UDP是基于无连接的,不可靠的传输与TCP/IP相反 UDP实现私聊,发送方式客户端,接受方式服务器 package netUDP_sc; import java.net.DatagramPacket; import java.net.DatagramSocket; import java.net.Ine
JQuery对象的val()方法执行结果分析 bijian1013 JavaScript js jquery
JavaScript中，如果id对应的标签不存在（同理JAVA中，如果对象不存在），则调用它的方法会报错或抛异常。在实际开发中，发现JQuery在id对应的标签不存在时，调其val()方法不会报错，结果是undefined。
http请求测试实例（采用json-lib解析） bijian1013 json http
由于fastjson只支持JDK1.5版本，因些对于JDK1.4的项目，可以采用json-lib来解析JSON数据。如下是http请求的另外一种写法，仅供参考。 package com; import java.util.HashMap; import java.util.Map; import
【RPC框架Hessian四】Hessian与Spring集成 bit1129 hessian
在【RPC框架Hessian二】Hessian 对象序列化和反序列化一文中介绍了基于Hessian的RPC服务的实现步骤，在那里使用Hessian提供的API完成基于Hessian的RPC服务开发和客户端调用，本文使用Spring对Hessian的集成来实现Hessian的RPC调用。定义模型、接口和服务器端代码 |---Model &nb
【Mahout三】基于Mahout CBayes算法的20newsgroup流程分析 bit1129 Mahout
1.Mahout环境搭建 1.下载Mahout http://mirror.bit.edu.cn/apache/mahout/0.10.0/mahout-distribution-0.10.0.tar.gz 2.解压Mahout 3. 配置环境变量 vim /etc/profile export HADOOP_HOME=/home
nginx负载tomcat遇非80时的转发问题 ronin47
　　nginx负载后端容器是tomcat（其它容器如WAS,JBOSS暂没发现这个问题）非８０端口，遇到跳转异常问题。解决的思路是：$host:port 详细如下：　　该问题是最先发现的，由于之前对nginx不是特别的熟悉所以该问题是个入门级别的： ? 1 2 3 4 5
java-17-在一个字符串中找到第一个只出现一次的字符 bylijinnan java
public class FirstShowOnlyOnceElement { /**Q17.在一个字符串中找到第一个只出现一次的字符。如输入abaccdeff，则输出b * 1.int[] count:count[i]表示i对应字符出现的次数 * 2.将26个英文字母映射：a-z <--> 0-25 * 3.假设全部字母都是小写 */ pu
mongoDB 复制集开窍的石头 mongodb
mongo的复制集就像mysql的主从数据库，当你往其中的主复制集(primary)写数据的时候，副复制集(secondary)会自动同步主复制集(Primary)的数据,当主复制集挂掉以后其中的一个副复制集会自动成为主复制集。提供服务器的可用性。和防止当机问题 mo
[宇宙与天文]宇宙时代的经济学 comsci 经济
宇宙尺度的交通工具一般都体型巨大，造价高昂。。。。。在宇宙中进行航行，近程采用反作用力类型的发动机，需要消耗少量矿石燃料，中远程航行要采用量子或者聚变反应堆发动机，进行超空间跳跃，要消耗大量高纯度水晶体能源以目前地球上国家的经济发展水平来讲，
Git忽略文件 Cwind git
有很多文件不必使用git管理。例如Eclipse或其他IDE生成的项目文件，编译生成的各种目标或临时文件等。使用git status时，会在Untracked files里面看到这些文件列表，在一次需要添加的文件比较多时（使用git add . / git add -u），会把这些所有的未跟踪文件添加进索引。 ==== ==== ==== 一些牢骚
MySQL连接数据库的必须配置 dashuaifu mysql 连接数据库配置
MySQL连接数据库的必须配置 1.driverClass：com.mysql.jdbc.Driver 2.jdbcUrl：jdbc:mysql://localhost:3306/dbname 3.user：username 4.password：password 其中1是驱动名；2是url，这里的‘dbna
一生要养成的60个习惯 dcj3sjt126com 习惯
一生要养成的60个习惯第1篇让你更受大家欢迎的习惯 1 守时，不准时赴约,让别人等,会失去很多机会。如何做到： ①该起床时就起床， ②养成任何事情都提前15分钟的习惯。 ③带本可以随时阅读的书，如果早了就拿出来读读。 ④有条理，生活没条理最容易耽误时间。 ⑤提前计划：将重要和不重要的事情岔开。 ⑥今天就准备好明天要穿的衣服。 ⑦按时睡觉，这会让按时起床更容易。 2 注重
[介绍]Yii 是什么 dcj3sjt126com PHP yii2
Yii 是一个高性能，基于组件的 PHP 框架，用于快速开发现代 Web 应用程序。名字 Yii （读作易）在中文里有“极致简单与不断演变”两重含义，也可看作 Yes It Is! 的缩写。 Yii 最适合做什么？ Yii 是一个通用的 Web 编程框架，即可以用于开发各种用 PHP 构建的 Web 应用。因为基于组件的框架结构和设计精巧的缓存支持，它特别适合开发大型应
Linux SSH常用总结 eksliang linux ssh SSHD
转载请出自出处：http://eksliang.iteye.com/blog/2186931 一、连接到远程主机格式： ssh name@remoteserver 例如： ssh [email protected] 二、连接到远程主机指定的端口格式： ssh name@remoteserver -p 22 例如： ssh i
快速上传头像到服务端工具类FaceUtil gundumw100 android
快速迭代用 import java.io.DataOutputStream; import java.io.File; import java.io.FileInputStream; import java.io.FileNotFoundException; import java.io.FileOutputStream; import java.io.IOExceptio
jQuery入门之怎么使用 ini JavaScript html jquery Web css
jQuery的强大我何问起（个人主页：hovertree.com）就不用多说了，那么怎么使用jQuery呢？首先，下载jquery。下载地址：http://hovertree.com/hvtart/bjae/b8627323101a4994.htm，一个是压缩版本，一个是未压缩版本，如果在开发测试阶段，可以使用未压缩版本，实际应用一般使用压缩版本(min)。然后就在页面上引用。
带filter的hbase查询优化 kane_xie 查询优化 hbase RandomRowFilter
问题描述 hbase scan数据缓慢，server端出现LeaseException。hbase写入缓慢。问题原因直接原因是： hbase client端每次和regionserver交互的时候，都会在服务器端生成一个Lease,Lease的有效期由参数hbase.regionserver.lease.period确定。如果hbase scan需
java设计模式-单例模式 men4661273 java 单例枚举反射 IOC
单例模式1，饿汉模式 //饿汉式单例类.在类初始化时，已经自行实例化 public class Singleton1 { //私有的默认构造函数 private Singleton1() {} //已经自行实例化 private static final Singleton1 singl
mongodb 查询某一天所有信息的3种方法，根据日期查询 qiaolevip 每天进步一点点学习永无止境 mongodb 纵观千象
// mongodb的查询真让人难以琢磨，就查询单天信息，都需要花费一番功夫才行。 // 第一种方式： coll.aggregate([ {$project:{sendDate: {$substr: ['$sendTime', 0, 10]}, sendTime: 1, content:1}}, {$match:{sendDate: '2015-
二维数组转换成JSON tangqi609567707 java 二维数组 json
原文出处：http://blog.csdn.net/springsen/article/details/7833596 public class Demo { public static void main(String[] args) { String[][] blogL
erlang supervisor wudixiaotie erlang
定义supervisor时，如果是监控celuesimple_one_for_one则删除children的时候就用supervisor:terminate_child (SupModuleName, ChildPid)，如果shutdown策略选择的是brutal_kill，那么supervisor会调用exit(ChildPid, kill)，这样的话如果Child的behavior是gen_

Scrapy项目 - 数据简析 - 实现腾讯网站社会招聘信息爬取的爬虫设计

你可能感兴趣的:(Scrapy项目 - 数据简析 - 实现腾讯网站社会招聘信息爬取的爬虫设计)