点击上方“Python大本营”,选择“置顶公众号”
Python大本营 IT人的职业提升平台
做过数据分析的程序员都知道:Excel、Tableau等这些亲民工具都是数据分析的得力助手。
但用Excel做分析,繁琐的每一步都是来自鼠标点击,中间如果一步有误,很多步骤都需要重新调整,浪费大量时间。
这不,前天临近下班时间,老板突然Q我:算一下近一年销售额总额TOP5的品牌以及对应的销售额。
接收完文档我傻眼了,公司旗下有20个品牌,这些品牌涉及到128个类目,业务部门总共发来了128张表,每一份表格对应着一个细分行业的数据,像什么各类户外服装、垂钓装备、救生装备应有尽有。
每张表,以月的维度记录着每个品牌的日期、访客、客单、转化、所属类目(细分行业)等数据:
习惯性的打开Excel,我开始盘算:最终需求是要筛选出近一年销售额总和排名前5的品牌,这一摊子数据,对单独的一张表进行分类汇总,能够得到该细分行业各品牌的销售额,想要得到所有行业的销售额总和,得分类汇总128次,最后对128次结果再次合并。
“这个任务看上去很艰巨,不过,考验的主要是体力。”我一眼就“看穿”了事情的本质,右手食指在鼠标上飞速跳动,以90秒一张表格的速度疯狂推进。按照这个速度,不考虑疲劳值对速度的拖累,大概3.2个小时就能够完成任务。
然而,刚开始还没3分钟,老板找到我:刚交你的任务暂时不用做了,新来的已经得出结论了,看着还挺专业。
多年来的职业敏感性驱使我立马跟新同事聊了一下,“刚刚那些表分分钟就搞定了,很简单!”他演示给我看,“我就使用了几行Python代码......”
首先,导入模块,打开单个表格:
接着,汇总不同品牌在这个细分行业下的销售额,没有销售额的字段,可以通过访客数*转化率*客单价三者的乘积来计算:
按品牌来汇总销售额,得到近一年各品牌销售额合计:
对于单独行业的销售额,应该加一个区分的标签以防覆盖,而打开时候的文件名,具有天然的区分和防覆盖优势,但要注意去掉文件的后缀。
OK,单个表格处理完成,我们把这一系列操作推而广之即可。用os.listdir方法来遍历文件名,批量循环访问并处理文件,同时引入time计时,打算看一看,面对128张表,Python完成这些操作到底能够比手动快多少:
WOC,整个过程一气呵成,不到3秒,平均一张表格0.02秒!真香!
为了确保数据正常,来预览一下:
这一串看起来很奇怪的销售额,是pandas自作主张把实际销售额变成了科学记数法形式来展示,要还原数值,需要更改一下原始的设置:
OK!
我本以为学会Excel走遍天下,没想到Python这么牛?!
这是一个全民Python的时代!20年前,你学英语不是为了成为翻译员;10年前,你学电脑不是为了成为打字员;今天,学Python数据分析与挖掘不是要你一定成为数据分析师。
而越来越多的互联网人利用Python完成自动化办公、表格处理、信息搜集、数据分析、数据可视化等工作,至少释放了你80%的劳动力!
什么样的程序员最受欢迎?绝不是只会写代码的码农,而是技术过硬又懂业务的,可以通过数据分析,优化代码解决实际业务问题的复合性人才!
因此,无论是做研发、系统架构,还是产品、运营,在数不清的场景下,用Python做数据分析与挖掘其实是基本功,它不是一个职位,而是一个技能。
你可能想知道——既然数据分析很重要,我该如何学习呢?
关于程序员学习数据分析,我不建议你把将大学的相关书籍拿出来啃一遍,耗费大量时间不说,关键是跟实际应用无法结合,学了还是不会用!
我们在了解新技术时,通常会分成三个阶段:
第一阶段是,怎么用;
第二阶段是,原理是什么;
第三阶段是,为什么是这样。
学数据分析也是这样,也有这样三个阶段,先用起来,了解原理,再知道为什么这么做。
基于这个思路,我向你推荐这门上线仅有20多天,就有1000+学员学习的《零基础搞定Python数据分析与挖掘》。这门系列课由CSDN学院联合数据分析畅销书作者刘顺祥老师共同研发完成,期望解决你在数据分析上的一些问题。
课程内容覆盖面广,集数据搜集、清洗、整理、可视化与建模于一体,帮你建立数据分析的底层逻辑思维!
Python为什么这么火?就是数据分析带起来的!课程从实际业务出发,基于Python3落地工作中经常碰到的分析与挖掘方法,教你通过数据分析,找到问题,形成方案,采取行动,反馈评估,形成一个闭环,让你的数据充分发挥业务价值!
真实案例项目操作,10+数据清洗案例、15+统计图形展现、10+挖掘算法的应用,每一个都能做为面试的作品展现!
业内超实用的数据课
《零基础搞定Python数据分析与挖掘》
原价199元,限时立减100元!
最低仅需99元
↓下单再送5门¥300编程课↓
99元=92讲课程+源码+讲师1对1答疑+300元编程课
为什么向你推荐这门课?
1.超实用课程内容
本课程将从实际业务出发,基于Python3落地工作中经常碰到的分析与挖掘方法。
内容涉及Python基础语法介绍、数据预处理、数据可视化以及数据分析与挖掘;使用到的技术包含Python3中的numpy、pandas、scipy、matplotlib、sklearn等模块。
实战部分会涵盖10多种数据清洗案例、至少15种统计图形展现以及10种挖掘算法的应用。
老师手把手教你使用Python解决日常工作中的数据分析与挖掘任务,你能达到中高级数据分析师的应用水平,可独立完成数据分析项目。
2.纯干货课程大纲
92讲视频课,详见课程大纲↓↓↓
上下滑动查看更多↑↑↑
喊破嗓子为你推荐
如果你想学数据分析,请别犹豫
↓↓↓这门课程非常适合你!↓↓↓
原价199元,限时立减100元!
↓下单再送5门¥300编程课↓
零基础丨理论+实战丨老师1V1答疑丨源码
3.超人气讲师
刘顺祥 | 统计学硕士,数据分析畅销书作者,目前就职于某大型数据咨询公司,负责商业智能、数据分析与挖掘等项目的实施。
4.我们保证你能收获到这些:
针对程序员常见的数据分析与挖掘问题,带你一一拆解落地;
几大实战项目,帮你解决面试中缺少项目经验的问题;
你能达到中高级数据分析师的应用水平,独立完成数据分析项目。
5.专业的社群答疑服务
CSDN为每位学员提供专属的学习答疑群,一旦学习过程中遇到任何问题,卡壳了,直接找授课老师答疑讲解,为你及时扫清学习障碍。
原价199,早鸟价仅需99元,现在下单再送300元编程课程大礼包。
这门课程适合谁来学习?
研发人员:数据工程师、Python开发、数据架构师等技术岗位,想了解商业问题,或者转型、进一步提升自己的业务能力水平。
数据分析新人:计划入行数据分析,了解真实企业分析工作状态,看清职业发展方向,找到自己的提升点。
IT业务岗:产品、运营、销售等业务岗,对数据分析感兴趣,想掌握不同业务中不同数据分析思路的同学。
数据分析从业者:数据分析师、数据运营、商业分析师等专业分析人员,遇到瓶颈想系统提升分析能力或期望借助机器学习算法提高分析效率与预测能力。
更多问题:
Q:课程有效期多长时间?
A:购课后可以马上学习,永久有效,随时观看。
Q:如何领取课程福利?
A:购课后加助教微信:csdn57,按提示领取福利。
Q:购买后在哪里学习?
A:方法一:手机登录【csdn学院】APP,微信登录,绑定手机号,在“我的”-“视频课”中即可学习。
方法二:电脑登录,https://edu.csdn.net/course/detail/6861,微信登录,绑定手机号,进行学习。
喊破嗓子为你推荐
如果你想学数据分析,请别犹豫
↓↓↓这门课程非常适合你!↓↓↓
原价199元,限时立减100元!
↓下单再送5门¥300编程课↓
零基础丨理论+实战丨老师1V1答疑丨源码
扫描上方二维码,立即试看
点击“阅读原文”成为全公司涨薪最快的人!