数据分析实战

数据分析实战之战略分析（二）

一种学理，究竟是对与不对，一定要做成事实，能够实行，才可以说是真学理。------孙中山上文我们确立数据分析的思路：思维导图本节我们我重点来谈谈怎样进行数据分析？或者说具体该怎么做？需要用到什么开发工具？和高大上的算法？人工智能？答案是：我们暂时还不要，我将从定性和定量两个角度去分析。Tips：定性分析通常采用一种归纳的方法来进行推理：观察（收集数据），然后试图将其发现的理论整合起来。所以它从数据
数据分析杂杂念·2023-09-08 22:50

Python数据分析实战-判断一组序列（列表）的变化趋势（附源码和实现效果）

实现功能判断一组序列（列表）的变化趋势实现代码fromsklearn.linear_modelimportLinearRegressionimportnumpyasnp#计算相邻两个数之间的差值的均值，并判断变化趋势。deftrend(lst):diff=[lst[i+1]-lst[i]foriinrange(len(lst)-1)]trend=sum(diff)/len(diff)iftrend
数据杂坛·2023-09-06 23:37

Python数据分析实战-Series转DataFrame并将index设为新的一列（附源码和实现效果）

实现功能Series转DataFrame并将index设为新的一列实现代码importpandasaspd#创创建seriesseries=pd.Series([1,2,3,4,5])#创建一个DataFrame对象data={'column_name':series}df=pd.DataFrame(data)#重新设置索引，将原有的索引作为新的一列df.reset_index(inplace=T
数据杂坛·2023-09-06 23:37

Python数据分析实战-使用装饰器为函数增加异常处理功能（附源码和实现效果）

实现功能使用装饰器增加异常处理功能实现代码#假设我有一个函数（原函数），可以实现两个数相除defdivide(x,y):returnx/yres=divide(10,2)print(res)#定义一个装饰器，使得原函数能够有处理异常的功能defhandle_exceptions(func):#外层函数：接受一个函数（原函数）作为参数，并返回一个函数（新函数）。defwrapper(*args,**
数据杂坛·2023-09-06 23:37

Python数据分析实战-将字符串中的空格替换为逗号且要保留特定词组（附源码和实现效果）

实现功能将字符串中的空格替换为逗号且要保留特定词组实现代码importrestring="LinuxPythonCloudNativeDistributedSystemAIC++DeepLearningFrameworkMicroServiceAutomationGitIoT"#定义要保留的特定词组special_phrases=["DeepLearningFramework","MicroSer
数据杂坛·2023-09-06 23:05

数据分析实战1：天猫商品评论情感词分析（基于SnowNLP）

SnowNLP是一个python写的类库，可以方便的处理中文文本内容，是受到了TextBlob的启发而写的，由于现在大部分的自然语言处理库基本都是针对英文的，于是写了一个方便处理中文的类库，并且和TextBlob不同的是，这里没有用NLTK，所有的算法都是自己实现的，并且自带了一些训练好的字典。而且SnowNLP非常适合商品评论的情感词分析。参考链接：github.com/isnowfy/snow
有趣的数据·2023-09-06 13:39

TCGA 数据分析实战 —— WGCNA

前言加权基因共表达网络分析（WGCNA,Weightedgeneco-expressionnetworkanalysis）是一种用来描述不同基因在样本中的表达关联模式的系统生物学方法。通过将表达高度相关的基因聚集成不同的模块，并探究不同模块与样本表型之间的关联。还可以探究模块内的关键基因的功能，作为潜在的生物标志物或治疗靶点进行后续分析WGCNA模块识别算法大致包含以下几个步骤：数据预处理构建加权
名本无名·2023-09-05 20:19

【R语言入门与数据分析-5】 数据分析实战

数据分析实战老师的吐槽大会，乐死我了。hhh线性回归regression，通常指
森尼啊·2023-09-02 05:18

4月10号星期天上午Python数据分析实战笔记

作业一读取“作业数据”数据增加一列数据“工作年限”，自定义数据删除“编号列”将“收入”列的第二个数据改成0查询前三行数据importpandasaspddata=pd.read_excel("D:\数据\作业数据_第五节.xlsx")#print(data)DataFrame=pd.DataFrame(data)#1、增加一列数据#DataFrame['工作年限']=[8,7,6,5,4,3,2,
汉口君呐·2023-09-01 17:29

数据分析实战│价格预测挑战【文末赠书】

文本分析是指对文本信息的表示及特征项的选取，商品文本的描述能够反映特定立场、观点、价值和利益。考虑到网上海量的商品数量，对产品的定价难度很大，因此可以使用商品描述帮助商户定价。比如，服装具有较强的季节性价格趋势，受品牌影响很大，而电子产品则根据产品规格波动。因此，根据商品提供的文本信息进行合理地定价，能够有效地帮助商家进行商品的销售。01、问题描述及数据挖掘目标本案例给出物品的商品描述、商品类别和
TiAmo zhang·2023-08-28 21:02

数据分析实战│时间序列预测

时间序列预测问题是一类常见的数据分析问题。数据中往往包含时间标签，这类问题往往根据过去一段时间的数据，建立能够比较精确地反映序列中所包含的动态依存关系的数学模型，并对未来的数据进行预测。01、问题描述及数据挖掘目标本案例给出二战时期的某气象站温度记录值，通过分析之前的天气状况来预测将来天气情况。与回归分析模型进行预测不同，时间序列模型依赖于事件发生的先后顺序预测接下来的输出模型的结果，改变输入值的
TiAmo zhang·2023-08-28 21:02

Python数据分析实战-找出两个列表中的不同元素（附源码和实现效果）

实现功能使用Python的集合操作来实现找出两个列表中的不同元素。将两个列表转化为集合类型，然后使用集合的操作来找出不同的元素。实现代码list1=[1,2,3,4,5]list2=[3,4,5,6,7]set1=set(list1)set2=set(list2)diff=set1.symmetric_difference(set2)print(diff)实现效果本人读研期间发表5篇SCI数据挖掘
数据杂坛·2023-08-24 18:39

Python数据分析实战-DataFrame按照某列指定的顺序排序（附源码和实现效果）

实现功能dataframe按照某列指定的顺序排序实现代码importpandasaspd#创建一个示例DataFramedf=pd.DataFrame({'name':['Alice','Bob','Charlie','David','Eva'],'age':[25,30,35,40,45],'gender':['F','M','M','M','F']})#按照指定顺序排序sort_order=[
数据杂坛·2023-08-24 18:39

Python数据分析实战-给定JSON格式的数据提取所需字段并转换为DataFrame（附源码和实现效果）

实现功能给定JSON格式的数据提取所需字段并转换为DataFrame实现代码importpandasaspdimportjson#假设给定的JSON数据已经存储在data变量中data=[{"title":"DataSourceAdapterforExcelSheets","project_code_url":"https://github.com/polypheny/Polypheny-DB/p
数据杂坛·2023-08-24 18:08

数据分析实战--保险公司客户分类分析

-)，而是待在家里好好地阅读了我的新书--陈哲老师的《活用数据，驱动业务的数据分析实战》，可谓收获满满。当然说的不是spss的使用技巧，而是分析的思路。
小文的数据之旅·2023-08-21 01:03

Python数据分析实战-dataframe 某一列数据每个元素做处理并新增一列（附源码和实现效果）

实现功能dataframe某一列数据每个元素做处理并新增一列实现代码importpandasaspd#创建示例数据df=pd.DataFrame({'A':[1,2,3],'B':['foo','bar','baz']})#对列B中的每个元素加上'processed_'前缀，并将结果添加为新列Cdf['C']=df['B'].apply(lambdax:'processed_'+x)#处理结果新增
数据杂坛·2023-08-18 15:11

Python数据分析实战-多线程并发处理列表（附源码和实现效果）

实现功能Python数据分析实战-多线程并发处理列表实现代码importthreading'''有15个列表，尝试多进程并发处理，每个列表一个进程，进程数和CPU核数一致'''defsum_list(lst
数据杂坛·2023-08-18 15:11

Python数据分析实战-*和**实现可变多参数的传入或变量的拆解（附源码和实现效果）

实现功能*和**实现多参数的传入或变量的拆解实现代码#1、实现多参数的传入defone(a,*b):"""a是一个普通传入参数，*b是一个非关键字星号参数"""print(b)one(1,2,3,4,5,6)'''其中，第一个的输入可以理解为：one(1,2,3,4,5,6)传入后，等价于：one(1,(2,3,4,5,6))'''#--------deftwo(a=1,**b):"""a是一个普
数据杂坛·2023-08-18 15:10

Python数据分析实战-多进程并发处理列表（附源码和实现效果）

实现功能有15个列表，尝试多进程并发处理，每个列表一个进程，进程数和CPU核数一致实现代码importmultiprocessing'''有15个列表，尝试多进程并发处理，每个列表一个进程，进程数和CPU核数一致'''defsum_list(lst):returnsum(lst)if__name__=='__main__':#获取CPU核数num_cores=multiprocessing.cpu
数据杂坛·2023-08-17 06:51

数据分析实战 | 银行 “信贷” 客户的可视化分析

作者：番茄酱的汪来源：简书客户信用等级影响因素目标：总结出信贷需求较高人群特征，找到与信用等级相关程度较高的变量。帮助银行决定是否审批通过该客户并对审批通过的客户设定初始信用额度，有利于银行降低信贷事前风险1.绘制客户基本特征的脑图，明确需要分析的特征注意连续变量和分类变量，连续需要进行分箱脑图2.分析过程（1）找到哪些人更需要使用信用卡（基本特征）①婚姻情况婚姻情况发现大部分的持卡人都是未婚为主
数据不吹牛·2023-08-14 14:33

Python数据分析实战-列表字符串、字符串列表、字符串的转化（附源码和实现效果）

实现功能str([None,'master','hh'])--->[None,"master","hh"]--->"None,'master','hh'"实现代码importreimportastx1=str([None,'master','hh'])print(x1)x2=ast.literal_eval(x1)print(x2)x3=",".join(str(item)foriteminx2)
数据杂坛·2023-08-12 06:11

Python大数据分析实战：豆瓣人的电影口味重吗？

在上一篇文章中，我们实战使用urllib和BeautifulSoup抓取了关于豆瓣电影TOP250的非常丰富的信息，包括导演、编剧、演员、上映时间和地区、语言、别名、短评数、影评数、多少人想看、多少人看过等多达23个字段。接下来，我们要做的就是对这些数据进行分析、挖掘，得到尽可能多的信息。毕竟有价值的不是数据，而是从数据中发掘而出的洞见。一、数据清洗我们先读取我们的数据，观察一下：importpa
老Q在折腾·2023-08-10 20:07

《连锁零售超市经营数据分析实战》学习笔记

这篇文章整理自接地气的陈老师x和鲸社区|连锁零售超市经营数据分析实战活动业务讲解会【接地气的陈老师】的讲解更多数据分析动手实践活动欢迎访问>>和鲸社区活动活动背景现在你是某零售企业的商业数据分析师，你为管理层提供日常经营数据
qazwsxpy·2023-08-10 08:29

Python数据分析实战-dataframe指定多列去重（附源码和实现效果）

实现功能Python数据分析实战-利用df.drop_duplicates(subset=['',''])对dataframe指定多列去重实现代码importpandasaspddata={'state
数据杂坛·2023-08-09 20:18

Python数据分析实战-格式化字符串的两种方法（附源码和实现效果）

实现功能格式化字符串的两种方法实现代码#方法一：format方法query='''SELECTcustomer_id,COUNT(*)asnum_ordersFROMordersWHEREdate>='{start_date}'ANDdate{min_orders}'''start_date=1end_date=2min_orders=3formatted_query=query.format(s
数据杂坛·2023-08-09 20:18

《网约车运营数据分析实战》学习笔记

这篇文章整理自接地气的陈老师x和鲸社区|网约车运营分析数据分析实战活动业务讲解会【接地气的陈老师】的讲解活动介绍假设你是某打车APP的商业数据分析师，为某大区提供日常数据报表。
qazwsxpy·2023-08-07 20:46

python是自然语言吗_Python自然语言处理

计算机热卖专区￥戳进来已售3500件下单优惠正版python基础教程零基础学Python编程从入门到实践计算机程序设计pathon3核心技术网络爬虫书籍数据分析实战教程教材￥戳进来已售5782件JS入门两件套
weixin_39905624·2023-08-05 10:41

NBIS系列单细胞转录组数据分析实战（八）：拟时序细胞轨迹推断

第八节：拟时序细胞轨迹推断在本节教程中，我们将学习如何通过拟时序分析推断细胞分化轨迹。slingshot包可以对单细胞RNA-seq数据进行细胞分化谱系构建和伪时间推断，它利用细胞聚类簇和空间降维信息，以无监督或半监督的方式学习细胞聚类群之间的关系，揭示细胞聚类簇之间的全局结构，并将该结构转换为由一维变量表示的平滑谱系，称之为“伪时间”。运行slingshot的至少需要两个输入文件：即细胞在降维空
Davey1220·2023-08-05 04:20

105贝叶斯方法数据分析实战--挑战者号的事故模拟

挑战者号的事故模拟数据加载1986年1月28号，挑战者号起飞不久后，一个火箭推动器发生了爆炸。这次事故造成航天飞机上的7名成员全部死亡，并导致美国的第25次航天飞行计划胎死腹中。这场事故的官方结论是，本次事故是由连接在火箭推进器上的，一个有缺陷的O型圈造成的。这种缺陷来自于设计的不合理，进而造成O型圈对外界环境非常敏感。数据显示之前的24次飞行中有23次的O型圈都是有缺陷的。但是，有时候由于O型线
Jachin111·2023-08-03 18:42

Python数据分析实战-提取DataFrame（Excel）某行（记录）最全操作（附源码和实现效果）

实现功能：提取DataFrame（Excel）某行（记录）实现代码：importpandasaspddf=pd.read_csv("D:\数据杂坛\\UCIHeartDiseaseDataset.csv")df=pd.DataFrame(df)#筛选行#单行提取返回series格式print('单行提取返回series格式,以下两种方式等价：')print(df.loc[0,:])#按位置索引名提
数据杂坛·2023-08-03 15:12

数据分析实战（1）：超市运营数据分析

Day45.数据分析实战（1）：超市运维数据分析文章目录Day45.数据分析实战（1）：超市运维数据分析前言一.读取数据二.看哪些类别的商品比较畅销三.哪些商品比较畅销四.不同门店的销售额占比五.超市客流高峰时间段总结前言本文主要是利用超市的运营数据进行分析
晶晶家的小可爱·2023-08-03 14:48

Python数据分析实战-dataframe筛选某字段是（精确匹配）某些值的记录（附源码和实现效果）

实现功能Python数据分析实战-data[data[''].isin([])]，筛选dataframe某字段是（精确匹配）某些值的记录实现代码importpandasaspddf={'DataBase
数据杂坛·2023-07-31 14:00

Python数据分析实战-dataframe筛选某字段包含（模糊匹配）某些值的记录（附源码和实现效果）

实现功能Python利用df[''].str.contains()对dataframe筛选某字段包含（模糊匹配）某些值的记录实现代码importpandasaspddf={'地址':['北京','上海','长沙','北京省会','广州市区'],'table':['user','student','course','sc','book']}df=pd.DataFrame(df)print(df)pr
数据杂坛·2023-07-31 14:28

数据分析实战 - 1 农民工数据预测（线性回归模型的使用）

文章目录农民工总收入预测（回归模型的使用）农民工分四大区总收入预测（回归模型的使用）农民工分六大行业总收入预测（回归模型的使用）importnumpyasnpimportpandasaspd农民工总收入预测（回归模型的使用）以下是农民工收入的统计数据，使用历史年份对总体农民工，外出农民工，本地农民工分别建立回归模型训练，并且对2023年的这几个维度的值进行预测；统计局数据2018年2019年202
大地之灯·2023-07-30 20:34

Python数据分析实战-利用limit 与 offset进行数据库数据批量查询与处理（附源码和实现效果）

实现功能利用limit与offset进行数据库数据批量查询与处理实现代码defquery_batch(self,engine,batch_step,end,sql):session=make_session(engine)cursor=session.execute(sql.format(batch_step,end))fields=cursor._metadata.keysdf=pd.DataF
数据杂坛·2023-07-26 10:41

Python数据分析实战-dataframe分组（对某列）求和（附源码和实现效果）

实现功能Python数据分析实战-dataframe分组（对某列）求和1、df.groupby()[].sum().to_frame().reset_index()2、df.columns=[]实现代码
数据杂坛·2023-07-26 10:11

Python数据分析实战-dataframe分组（对某列）计数（附源码和实现效果）

实现功能Python数据分析实战-dataframe分组（对某列）计数实现代码importpandasaspd#读取数据data=pd.read_csv('E:\数据杂坛\\UCIHeartDiseaseDataset.csv
数据杂坛·2023-07-26 10:11

Python数据分析实战-datafram按某（些）列按值进行排序（附源码和实现效果）

实现功能Python对datafram按某（些）列进行排序（附源码和实现效果）实现代码importpandasaspd#读取数据data=pd.read_csv('E:\数据杂坛\\UCIHeartDiseaseDataset.csv')df=pd.DataFrame(data)print(df.head())##按某列的值排序df1=df.sort_values(by=['age'],ascen
数据杂坛·2023-07-26 10:05

原理 + 代码 | 手把手教你基于不平衡数据的 Python 反欺诈模型实战(附源数据)

image.png本文将基于不平衡数据，使用Python进行反欺诈模型数据分析实战，模拟分类预测模型中因变量分类出现不平衡时该如何解决，具体的案例应用场景除反欺诈外，还有客户违约和疾病检测等。
Raiders_心理学·2023-07-25 21:32

TCGA 数据分析实战 —— GSVA、ssGSEA 和单基因富集分析

前言前面，我们介绍过了差异基因的功能富集分析，今天，我们对这部分的内容作一些补充主要介绍一下GEVA、ssGSEA和单基因的富集分析GSVA我们知道，GSEA富集分析方法是针对两组样本来进行评估的，也就是说对基因列表的排列方式是根据基因与表型的相关度（例如，FC值）来计算的，无法对单个样本使用其富集分数（EnrichmentScore，ES）的计算方式为依次判断基因列表中的基因是否在基因集合中，如
名本无名·2023-07-23 14:50

【Python统计与数据分析实战_01】位置与分散程度的度量

数据描述性分析1.描述统计量1.1位置与分散程度的度量1.1.1例子一单维数组1.1.2例子二多维数组1.2关系度量1.3分布形状的度量1.3.1统计量：偏度和峰度1.4数据特性的总括1.描述统计量数据的统计分析分为统计描述和统计推断两部分。前者通过绘制统计图、编制统计表、计算统计量等方法表述数据的分布特征，是数据分析的基本步骤，也是统计推断的基础。其优点在于方便、直观，利于对数据特征的理解。1.
fzu-wenxin·2023-07-19 11:31

【数据分析案例】深度分析超市零售商店数据--Python数据分析实战

前言咳咳，又是好久不见~这不高考已经结束了对python感兴趣的准大学生们，是打算好好玩几个月还是，继续研究学习python呢~我呢还是建议大家劳逸结合哈哈先玩再学习~当然啦最重要的还是看你们自己呀不过我以上这些都不能影响我今天发文章之前都是一些爬虫案例，今天就来一起看看关于数据分析的！有需要代码的可以看文末名片噢不要忘记备注啦~一、项目背景通过"扫描"零售商店电子销售点个别产品的条形码而获得的消
小圆-·2023-06-24 06:31

数据分析实战45讲 笔记五

11|数据科学家80%时间都花费在了这些清洗任务上？在数据挖掘中，数据清洗就是这样的前期准备工作。对于数据科学家来说，我们会遇到各种各样的数据，在分析前，要投入大量的时间和精力把数据“整理裁剪”成自己想要或需要的样子。数据清洗规则总结为以下4个关键点，统一起来叫“完全合一”。完整性：单条数据是否存在空值，统计的字段是否完善。全面性：观察某一列的全部数值，比如在Excel表中，我们选中一列，可以看到
小蛙的根据地·2023-06-23 14:44

『航班乘客满意度』场景数据分析建模与业务归因解释 ⛵

作者：韩信子@ShowMeAI数据分析实战系列：https://www.showmeai.tech/tutorials/40机器学习实战系列：https://www.showmeai.tech/tutorials
·2023-06-22 11:37

NBIS系列单细胞转录组数据分析实战（七）：空间转录组分析

第七节：空间转录组分析在本节教程中，我们将学习空间转录组的一些分析方法。10XVisium平台的空间转录组数据在许多方面是类似于scRNA-seq数据的，它包含5-20个细胞而不是单个细胞的UMI计数，但仍然与scRNA-seq相同，数据非常的稀疏，同时还具有相关组织中空间位置的附加信息。在这里，我们将使用小鼠大脑(Sagittal)的两个Visium空间转录组数据集进行实战练习。首先，以类似于s
Davey1220·2023-06-19 00:08

二十五、SQL 数据分析实战（9个中等难度的SQL题目）

文章目录题目1:App使用频率分析题目2:App下载情况统计题目3:寻找活跃学习者题目4:商品分类整理题目5:商品销售分析题目6:网约车司机收益统计题目7:网站登录时间间隔统计题目8:不同区域商品收入统计题目9:信贷逾期情况统计题目1:App使用频率分析现有一张用户使用App时间表middle_app_login，middle_app_login表的数据如下表所示：mysql>SELECT*FRO
Amo Xiang·2023-06-16 16:11

二十四、SQL 数据分析实战（12个简单的SQL题目）

文章目录题目1:"双十一"活动的电商GMV分析题目2:网站访问量分析题目3:用户购物信息统计题目4:连续售出的商品题目5:奇偶互换位置题目6:商品销量同环比题目7:文本记录连接题目8:行列互换题目9:寻找符合要求的订单题目10:优惠券使用分析题目11:员工绩效考核题目12:找出游戏中最活跃的用户题目1:"双十一"活动的电商GMV分析拓展:商品交易总额（GrossMerchandiseVolume，
Amo Xiang·2023-06-16 16:10

二十二、SQL 数据分析实战（案例1~案例10）

文章目录案例1：用户信息表stu_table案例2：员工绩效表score_table案例3：销售冠军信息表month_table案例4：月销售额记录表sale_table案例5：每季度员工绩效得分表score_info_table案例6：员工信息表stu_info_table案例7：行列互换row_col_table案例8：多列比较col_table案例9：学生成绩表subject_table案例
Amo Xiang·2023-06-16 16:40

二十三、SQL 数据分析实战（10个简单的SQL题目）

文章目录题目1:比赛名单整理题目2:热门游戏排行题目3:社区生鲜App覆盖分析题目4:社区团购行为分析题目5:统计字符出现次数题目6:找出各类别商品销量最高的商品题目7:找出每个部门薪资第二高的员工题目8:游戏玩家登录情况分析题目9:用户首单消费金额题目10:参与优惠活动的商品题目1:比赛名单整理现有一张参加比赛的队伍名称表easy_competition_list，easy_competitio
Amo Xiang·2023-06-16 16:37

一文读懂！异常检测全攻略！从统计方法到机器学习 ⛵

作者：韩信子@ShowMeAI数据分析实战系列：https://www.showmeai.tech/tutorials/40机器学习实战系列：https://www.showmeai.tech/tutorials
·2023-06-16 10:31
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他