E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
python数据处理
python绘制小提琴图数据_
Python数据处理
从零开始----第四章(可视化)(16)一文解决小提琴图violin plot...
原文:
Python数据处理
从零开始----第四章(可视化)(16)一文解决小提琴图violinplotwww.jianshu.com
Python数据处理
从零开始----第四章(可视化)(16)一文解决小提琴图
沈临白
·
2021-02-04 09:26
python绘制小提琴图数据
python数据处理
之0值的替换缺失值的填充
python数据处理
之0值的替换和缺失值的填充零值的替换:replace()方法里面填充的是键值对结构,注意空值必须用numpy.NaN来取而不是用字符串nulldata['AvgHomeValue']
强大的RGG
·
2021-01-27 12:25
python
python学习
python
数据分析
Python数据处理
基础
Python本身可以处理的数据类型是比较有限的,但numpy、pandas、xarray等库引入了丰富的数据类型,从而拓展了Python在数据处理领域的使用。1.1Python数据类型Python3中有六个标准的数据类型:number(数字)、string(字符串)、list(列表)、tuple(元组)、set(集合)、dict(字典)。其中不可变的数据类型有3种:number(数字)、strin
程序猿小白^
·
2021-01-15 09:41
学习Python
分享
python
python处理异常值循环_
Python数据处理
:异常值处理方法之3σ原则
原标题:
Python数据处理
:异常值处理方法之3σ原则一、3σ原则定义异常值是指样本中的个别值,其数值明显偏离其余的观测值。异常值也称离群点,异常值的分析也称为离群点的分析。
吴俏茜
·
2021-01-13 23:37
python处理异常值循环
python 数据处理 pandas+numpy 等使用技巧
python数据处理
python数据处理
pandas使用技巧最近在处理一些数据,发现以前所使用的一些方法可能比较笨拙,python之中有一些比较方便的数据处理函数和技巧,所以写下此篇博客记录一下1、数据转换
春天不是读书人
·
2021-01-10 12:04
经验篇
python
列表
字典
数据处理
如何进行聚类可视化_从爬虫到机器学习-高级
Python数据处理
与可视化
很多同学都听说过数据集(dataset)。实际上,熟练使用爬虫技术获取和整理数据集是机器学习的第一步。而下载下来的数据如何处理则是一门功课,几乎就是机器学习这门课的核心要义之一。今天我们来讨论一下,从网上获取数据后,如何对这些数据进行高级数据分析,可视化,最终你将学会如何建立你的第一个机器学习数据集。但在这之前,需要对数据进行预处理,作为入门计算机视觉的第二步,话不多说,我们开始吧。通过本文的学习
易近民
·
2021-01-08 17:38
如何进行聚类可视化
numpy 获取特定数值的索引_图解Numpy精翻版,一文带你入门
Python数据处理
本文精心翻译自JayAlammar的博客:https://jalammar.github.io/visual-numpy/,其用图解的方式详细介绍了NumPy的功能和使用示例。NumPy是Python生态中数据分析、机器学习和科学计算的基础。它极大地简化了向量和矩阵的操作处理。Python的一些主要软件包(如scikit-learn、SciPy、pandas和tensorflow)都以NumPy作
weixin_39655160
·
2020-12-30 07:02
numpy
获取特定数值的索引
python数据处理
高斯滤波_这可能是史上最全的 Python 算法集(建议收藏)
导读:本文是一些机器人算法(特别是自动导航算法)的Python代码合集。其主要特点有以下三点:选择了在实践中广泛应用的算法;依赖最少;容易阅读,容易理解每个算法的基本思想。希望阅读本文后能对你有所帮助。前排友情提示,文章较长,建议收藏后再看。本文经授权转自公众号:CSDN(ID:CSDNnews),作者:AtsushiSakai,译者:弯月一、目录环境需求怎样使用本地化扩展卡尔曼滤波本地化无损卡尔
苏欣妍
·
2020-12-30 06:53
python数据处理高斯滤波
python计算图解_图解Numpy精翻版,一文带你入门
Python数据处理
本文精心翻译自JayAlammar的博客:https://jalammar.github.io/visual-numpy/,其用图解的方式详细介绍了NumPy的功能和使用示例。NumPy是Python生态中数据分析、机器学习和科学计算的基础。它极大地简化了向量和矩阵的操作处理。Python的一些主要软件包(如scikit-learn、SciPy、pandas和tensorflow)都以NumPy作
风神有理
·
2020-12-30 06:10
python计算图解
python年数据怎么和日数据联系_
Python数据处理
分析(1):日期型数据处理
摘要:
Python数据处理
分析中,日期型数据的处理是相对复杂且非常重要的一环。本文以调用Tushare包获得股票的各种信息数据为案例,介绍日期数据的处理。
超级爱喝水
·
2020-12-28 22:55
#第17篇分享:
python数据处理
-pandas,numpy,matplotlib
#
python数据处理
-pandas,numpy,matplotlib:对于数据来说,有数据爬取-爬虫,数据处理-就是今天学习的,以及数据分析-sklearn,tensoflow机器学习及深度学习;因为我们步入了新的时代了
天甜费,
·
2020-12-27 22:51
python
pandas
numpy
数据分析
pandas
matplotlib
python操作excel并封装成exe文件_
python数据处理
excel和pdf,并打包成exe
之前零散的用过一点python做数据处理,这次又遇到一个数据处理的小功能,因此,记录一下整个流程,方便以后查阅。功能要求:读取excel,找指定的PDF文件的页数是否与excel中记录的一致整个处理过程包括python环境配置,插件安装,excel和PDF处理,exe打包1、python环境配置IDE用的是PyCharm社区版,pyhon环境用的是pandas,它内嵌了很多数据处理的插件,就有我们
weixin_39918961
·
2020-12-20 20:27
python numpy pandas 题目_Python解决Sql题目,pandas其他思路解法,原来这么简单
后来才发现,原来不是
Python数据处理
厉害,而是他有数据分析神器——pandas前言有不少小伙伴向我反映pandas专栏缺少练习题,因此这里我使用一套sql的题目,作为pa
weixin_39804059
·
2020-12-15 23:07
python
numpy
pandas
题目
python分析出nba球员的位置_python--NBA数据分析初探(下)
上回学习到利用jupyternotebook简单展示了一下单变量、双变量几多变量的数据可视化,本篇将在上篇的基础上,练习一下
python数据处理
及衍生变量的一些可视化实践。
weixin_39563722
·
2020-12-12 06:23
python数据处理
可视化_使用Python数据预处理,分析和可视化进行机器学习
在现实世界中,我们经常遇到许多原始数据,这些数据不适合机器学习算法。我们需要在将原始数据输入各种机器学习算法之前对其进行预处理。本章讨论在Python机器学习中预处理数据的各种技术。数据预处理在本节中,让我们了解如何在Python中预处理数据。最初,在文本编辑器(如记事本)中打开扩展名为.py的文件,例如prefoo.py文件。然后,将以下代码添加到此文件中-importnumpyasnpfrom
weixin_39893274
·
2020-12-10 14:28
python数据处理可视化
python异常值处理箱型图_
Python数据处理
:异常值处理方法之3原则
一、3σ原则定义异常值是指样本中的个别值,其数值明显偏离其余的观测值。异常值也称离群点,异常值的分析也称为离群点的分析。在进行机器学习过程中,需要对数据集进行异常值剔除或者修正,以便后续更好地进行信息挖掘。对于异常值的处理,3σ原则是最常使用的一种处理数据异常值的方法。那么,什么叫3σ原则呢?3σ原则,又叫拉依达原则,它是指假设一组检测数据中只含有随机误差,需要对其进行计算得到标准偏差,按一定概率
weixin_39870150
·
2020-12-07 12:57
python异常值处理箱型图
python数据处理
模块_Python数据分析模块一:NumPy
NumPy全称NumericalPython,是目前Python数值运算中最重要的基础模块,在命令行中输入pipinstallnumpy即可安装。NumPy中最重要的对象是多维数组(ndarray),它是一系列相同类型数据的集合。1.一维数组1)创建一维数组要创建一个一维数组,将一个列表作为参数传入numpy中的array()方法即可。importnumpyasnpdata=np.array([1
weixin_39919195
·
2020-11-23 05:52
python数据处理模块
python dataframe 去重_数据处理奇技巧——
python数据处理
小技能
有人说做数据无非几点:逻辑思路,技术工具和业务需求,1)逻辑思路中涵盖的大多是一些算法、规则;2)技术工具中主要是python、Excel和SQL;3)业务逻辑里面则多为一些指标、客群等。看着很多的内容,等处理过了才发现,无他,唯手熟尔~做数据以来,难免会遇到各种处理方法上的问题,每次遇到问题点就整理一下关键的语句,逐渐的,才发现原来整理了一整套,今天抽取一些比较常用的语句,分成了几篇:一篇是py
weixin_39708557
·
2020-11-20 22:34
python
dataframe
去重
python
python
pandas
drop
python处理一亿条数据
python数据处理
python数据平滑处理
pandas批量修改列值_
Python数据处理
- Pandas包之replace函数
使用Python处理数据,很多时候会遇到批量替换的情况,一个一个去修改效率过低,也容易出错,replace()是很好的方法。1.Replace():中文理解为替换函数。适用于批量替换的情况。2.如何使用2.1基本语法:df.replace(Value_old,Value_new)前面是需替换的值,后面是替换后的值。原DataFrame是并没有改变的,改变的只是一个复制品。replace()对Dat
weixin_39807352
·
2020-11-20 18:21
pandas批量修改列值
python 线性回归 统计检验 p值_使用Python进行统计建模
点击上方『早起python』关注早起和我一起,成为更好的自己前言大家好,在之前的文章中我们已经讲解了很多
Python数据处理
的方法比如读取数据、缺失值处理、数据降维等,也介绍了一些数据可视化的方法如Matplotlib
weixin_39611161
·
2020-11-19 23:06
python
线性回归
统计检验
p值
python summary_使用Python进行统计建模
===============我的公众号:早起python===============前言大家好,在之前的文章中我们已经讲解了很多
Python数据处理
的方法比如读取数据、缺失值处理、数据降维等,也介绍了一些数据可视化的方法如
weixin_39926042
·
2020-11-19 23:06
python
summary
python
回归
statsmodels
python
回归去掉共线性
python
最小二乘回归
高斯核
python
线性回归
统计检验
p值
Python数据可视化:pandas制图简介与图形选择
一.为什么用pandas来制作图表Pandas作为
Python数据处理
中常用的包,其中也集成了数据处理常用的功能,比如制图。
JY_Chen__
·
2020-11-08 16:30
Python
python
数据可视化
数据分析
可视化
pandas
python处理excel数据-
Python数据处理
之导入导出excel数据
欢迎点击上方"AntDream"关注我、Python的一大应用就是数据分析了,而数据分析中,经常碰到需要处理Excel数据的情况。这里做一个Python处理Excel数据的总结,基本受用大部分情况。相信以后用Python处理Excel数据不再是难事儿!Python处理Excel数据需要用到2个库:xlwt和xlrd。xlwt库负责将数据导入生成Excel表格文件,而xlrd库则负责将Excel表格
weixin_37988176
·
2020-10-29 21:09
拆分NumPy数组-
python数据处理
拆分NumPy数组我们可以把纵向、横向和深度方向来拆分数组,相关函数有hsplit()、vsplit()、dsplit()和split()。我们既可以把数组分成相同形状的数组,也可以从规定的位置开始切取数组。1.横向拆分:对于一个3*3数组,可以沿着横轴方向将其分解为3部分,并且各部分的大小和形状完全一致。2.纵向拆分:vsplit()函数将沿着纵轴方向分解数组。3.深向拆分:dsplit()函数
数模竞赛Paid answer
·
2020-10-22 16:31
python数据处理
2021深圳杯A题
笔记
python
机器学习
numpy
python数据处理
中Pandas数据处理及分析----超详细
实现Pandas自行车行驶数据分析假设现在有一组自行车行驶数据,这组数据记录的是蒙特利尔市内7条自行车道的自行车骑行人数,下面用python中的pandas对其进行分析。原始数据找我要就行QQ2534659467注明来意谢谢#第一步导入Pandasimportpandasaspdimportmatplotlib.pyplotasplt#导入Pandas那些屁事我就不说了不会的找我来#第二步准备画图
weixin_43292788
·
2020-10-20 17:09
笔记
python数据处理
python
数据分析
线性代数
Python数据处理
从零开始----第二章(pandas)③数据标准化(1)
目录第二章(pandas)
Python数据处理
从零开始----第二章(pandas)①删除列
Python数据处理
从零开始----第二章(pandas)②处理缺失数据
Python数据处理
从零开始----第二章
柳叶刀与小鼠标
·
2020-10-10 19:07
python数据处理
(tianchi)
数据处理流程:参考:天池论坛0.EDA:尽可能多的作图,目的是发现变量间关系以及变量与预测值之间的关系1.缺失值处理(去除噪声)(1)对一般特征,缺失值太多直接丢弃(drop函数)。不多则可以进行填充(2)如果选用树模型,则可以不处理缺失值,让模型自己优化(3)一般int/float数据缺失值为nan,可以用isnull()判断(4)对于object的缺失值,其可能形式会不一样,比如可以是’‘或者
weixin_45477892
·
2020-09-24 09:08
tianchi
pytorch
数据挖掘
机器学习
【
python数据处理
】pandas多表操作
pandas多表操作1.InnerMerge合并dataframepd.merge()将两张dataframe合成一张除了pandas的方法,eachDataFrame都有自己的merge()方法查询类似于SELECTWHEREresults=all_data[all_data.revenue>all_data.target]#1sales_vs_targets=pd.merge(sales,ta
姚尔摩斯
·
2020-09-17 04:54
数据处理
Python
python 数据处理(以Pandas为主)
python数据处理
:(以Pandas为主)读取数据添加、修改数据①添加数据②修改dataframe的列名字③将某一列数据转换为自己想要表达的字段④填充空值删除数据①删除指定一行的数据②删除指定一列的数据
YGY---未来可期
·
2020-09-17 03:38
python
python
python数据处理
(三)matplotlib的使用
一、基本用法1、matplotlib的基本用法importmatplotlib.pyplotaspltimportnumpyasnp#输出y=2x-1直线x=np.linspace(-1,1,50)#50个点y=2*x+1plt.plot(x,y)plt.show()2、figure图像importmatplotlib.pyplotaspltimportnumpyasnp#画y=2x-1直线和y=
tl3029
·
2020-09-17 03:43
python学习笔记
python数据处理
python
plot
data
visualization
【
python数据处理
】seaborn
简化了matplotlib不存在直方图Seaborn是一个Python数据可视化库,它提供简单的代码,为统计探索和洞察创建优雅的可视化。Seaborn基于Matplotlib,但在几个方面改进了Matplotlib:Seaborn提供更具视觉吸引力的绘图风格和简洁的语法。Seaborn本身了解PandasDataFrames,可以更轻松地直接从CSV绘制数据。Seaborn可以轻松地将包含许多行数
姚尔摩斯
·
2020-09-17 03:02
Python
数据处理
半小时拿下
Python数据处理
之Matplotlib篇
半小时拿下
Python数据处理
之Matplotlib篇matplotlib三种代码风格pyplotpylabObjectOriented子图多图散点图(scatter)条形图(bar)直方图(hist)
AI异构
·
2020-09-17 03:12
半小时Python系列
python
matplotlib
绘图
半小时拿下
Python数据处理
之Seaborn篇
半小时拿下
Python数据处理
之Seaborn篇Seaborn简介Seaborn样式matplotlib与seaborn绘图比较Seaborn5种主题风格用despine()移除轴线临时设置图表样式重载
AI异构
·
2020-09-17 03:38
半小时Python系列
python
可视化
Seaborn
python利用sympy库对某个函数求导,numpy库使用该求导结果计算的程序
**python利用sympy库对某个函数求导,numpy库使用该求导结果计算的程序**在
python数据处理
过程中,我们经常会遇见这样一种情况。需要对一个函数表达式求偏导,并将具体数值代入导数式。
子非鱼icon
·
2020-09-16 22:05
python
python
sympy库
numpy库
函数求导
【
python数据处理
】pandas行列操作及聚合
1.列操作applydf.coulumn.function()(df.count.mean()这种)例子:将Name列全部大写fromstringimportupperdf['Name']=df.Name.apply(upper)用lambda操作列例子:创建一列email的供应商df['EmailProvider']=df.Email.apply(lambdax:x.split('@')[-1]
姚尔摩斯
·
2020-09-13 23:14
Python
数据处理
python数据处理
——pandas更换列名
importpandasaspddf=pd.DataFrame({'A:1,'B':2,'C:3})df=df.rename(columns={'A':'AA'})#即可完成列名称的更改,列A变为列AA
樱花城堡的小侍卫
·
2020-09-13 12:30
python学习
python数据处理
Python数据处理
工具 ——Pandas(数据的预处理)
0、前言本文将介绍强大的数据处理模块Pandas,该模块可以帮助数据分析师轻松地解决数据的预处理问题,如数据类型的转换、缺失值的处理、描述性统计分析、数据的汇总等。通过本章内容的学习,读者将会掌握如下知识点,进而在数据处理过程中做到游刃有余,为后续的数据分析或机器学习做准备:两种重要的数据结构,即序列和数据框;如何读取外部数据(如文本文件、电子表格或数据库中的数据);数据类型转换及描述性统计分析;
Fo*(Bi)
·
2020-09-11 23:11
数据挖掘与数据分析
python
python数据处理
遇到一个问题,需要读取一个csv文件,然后取其中一列,然后求这一列每个数据出现的概率,然后求其信息熵。importnumpyasnp;importmathimportpandasaspd;df=pd.read_csv("table10.csv")#读取文件h=df.loc[:,'firstSeenSrcIp'].value_counts(normalize=True)#求出其概率valueList
入门弟弟 梦呓君
·
2020-09-11 09:33
自学记录
Python数据处理
从零开始----第二章(pandas)⑧pandas读写csv文件(3)
目录第二章(pandas)
Python数据处理
从零开始----第二章(pandas)①删除列
Python数据处理
从零开始----第二章(pandas)②处理缺失数据
Python数据处理
从零开始----第二章
柳叶刀与小鼠标
·
2020-08-26 23:41
python数据处理
必会,pandas包中DataFrame和Series的常用方法整理
文章目录PandasSeriesDataFrame叮!Pandaspandas是python中用于处理数据的常用包,主要用于处理表格型或者异质型数据,其经常与numpy或者scipy等数值计算工具包一起使用。pandas常用的三种数据类型为logical(逻辑型)、Numeric(数值型)和Character(字符型)。最常用的两种数据结构为Series(系列)和DataFrame(数据框)。要使
你大佬来啦
·
2020-08-26 22:12
python
jie
python
数据分析
学习简单两步,大幅提高
python数据处理
速度
在数据分析领域,最热门的莫过于Python和R语言。其中,数据分析库pandas是Python最经典的库之一。它使用一个二维的DataFrame来表示表格式的数据,相比较于Numpy,Pandas可以存储混合的数据结构,同时使用NaN来表示缺失的数据,而不用像Numpy一样要手工处理缺失的数据,并且Pandas使用轴标签来表示行和列。一般来说,用pandas处理小于100兆的数据,性能不是问题。但
龙皓晨
·
2020-08-26 16:38
Python数据处理
从零开始----第二章(pandas)④数据合并和处理重复值
目录第二章(pandas)
Python数据处理
从零开始----第二章(pandas)①删除列
Python数据处理
从零开始----第二章(pandas)②处理缺失数据
Python数据处理
从零开始----第二章
柳叶刀与小鼠标
·
2020-08-26 14:37
只需这个简单的两步,能大幅提高你的
Python数据处理
速度
在数据分析领域,最热门的莫过于Python和R语言。其中,数据分析库pandas是Python最经典的库之一。它使用一个二维的DataFrame来表示表格式的数据,相比较于Numpy,Pandas可以存储混合的数据结构,同时使用NaN来表示缺失的数据,而不用像Numpy一样要手工处理缺失的数据,并且Pandas使用轴标签来表示行和列。一般来说,用pandas处理小于100兆的数据,性能不是问题。但
妄心xyx
·
2020-08-25 16:29
Python数据处理
从零开始----第二章(pandas)(十)pandas合并数据
目录第二章(pandas)
Python数据处理
从零开始----第二章(pandas)①删除列
Python数据处理
从零开始----第二章(pandas)②处理缺失数据
Python数据处理
从零开始----第二章
柳叶刀与小鼠标
·
2020-08-25 03:06
解决:slate报错 AttributeError: module 'importlib._bootstrap' has no attribute 'SourceFileLoade
在学习《
python数据处理
》时遇到了安装slate出错,这个问题不仅在slate、在之前按照pycurl时也出现,一直没有解决,原因差不多,都是这个报错,涉及pythonsetup.pyegg_infoCheckthelogsforfullcommandoutput
python__reported
·
2020-08-25 03:56
笔记
《python数据处理》
PDF
Python数据处理
从零开始----第二章(pandas)⑥相关性分析
image.png目录第二章(pandas)
Python数据处理
从零开始----第二章(pandas)①删除列
Python数据处理
从零开始----第二章(pandas)②处理缺失数据
Python数据处理
从零开始
柳叶刀与小鼠标
·
2020-08-23 20:07
Python 学习及项目笔记
前言近期在做的项目中有一些关于
Python数据处理
——Numpy的东西,以及一些Python的基本操作,在这里进行一些分享和记录吧,也记录一些自己掉进去过的坑,也希望能帮到大家啦。
Stockholm_Sun
·
2020-08-23 01:03
极化码与神经网络
科学计算基础包 - numpy
Numpy量化投资实际上就是分析数据从而做出决策的过程
Python数据处理
相关模块:NumPy:数组批量计算pandas:灵活的表计算Matplotlib:数据可视化1,IPython交互式的python
desv5583
·
2020-08-22 12:35
python数据处理
-新书-第四章-处理EXCEL文件----不成功,有错误 进行不下去
https://pypi.org/在这里下载包pipinstallxlrd加入xlsx的excel文件文件内容:看一下工作表有哪些名字:importxlrdbook=xlrd.open_workbook('SOWC2014StatTables_Table9.xlsx')forsheetinbook.sheets():print(sheet.name)找Table9这个工作表importxlrdbo
任宪
·
2020-08-22 02:43
python数据处理
python数据处理
——使用pandas 压缩存储hdf5文件
这是一个比较扯的问题,如果你已经能够通过我找到的这几个博文解决的话,下面我的纠结和探讨就不用看了。如下:TuShare(3):使用pandas压缩存储hdf5文件pandas写入读取h5文件Py之PyTables:PyTables的简介、安装、使用方法详细攻略解决问题ImportError:HDFStorerequiresPyTables,"Nomodulenamed'tables'"proble
樱花城堡的小侍卫
·
2020-08-21 19:47
程序人生
python数据处理
python学习
上一页
3
4
5
6
7
8
9
10
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他