《python数据处理》

【python数据处理】seaborn

简化了matplotlib不存在直方图Seaborn是一个Python数据可视化库，它提供简单的代码，为统计探索和洞察创建优雅的可视化。Seaborn基于Matplotlib，但在几个方面改进了Matplotlib：Seaborn提供更具视觉吸引力的绘图风格和简洁的语法。Seaborn本身了解PandasDataFrames，可以更轻松地直接从CSV绘制数据。Seaborn可以轻松地将包含许多行数
姚尔摩斯·2020-09-17 03:02

半小时拿下Python数据处理之Matplotlib篇

半小时拿下Python数据处理之Matplotlib篇matplotlib三种代码风格pyplotpylabObjectOriented子图多图散点图（scatter）条形图(bar)直方图（hist）
AI异构·2020-09-17 03:12

半小时拿下Python数据处理之Seaborn篇

半小时拿下Python数据处理之Seaborn篇Seaborn简介Seaborn样式matplotlib与seaborn绘图比较Seaborn5种主题风格用despine()移除轴线临时设置图表样式重载
AI异构·2020-09-17 03:38

python利用sympy库对某个函数求导，numpy库使用该求导结果计算的程序

**python利用sympy库对某个函数求导，numpy库使用该求导结果计算的程序**在python数据处理过程中，我们经常会遇见这样一种情况。需要对一个函数表达式求偏导，并将具体数值代入导数式。
子非鱼icon·2020-09-16 22:05

【python数据处理】pandas行列操作及聚合

1.列操作applydf.coulumn.function()(df.count.mean()这种)例子：将Name列全部大写fromstringimportupperdf['Name']=df.Name.apply(upper)用lambda操作列例子：创建一列email的供应商df['EmailProvider']=df.Email.apply(lambdax:x.split('@')[-1]
姚尔摩斯·2020-09-13 23:14

python数据处理——pandas更换列名

importpandasaspddf=pd.DataFrame({'A:1,'B':2,'C:3})df=df.rename(columns={'A':'AA'})#即可完成列名称的更改，列A变为列AA
樱花城堡的小侍卫·2020-09-13 12:30

Python数据处理工具 ——Pandas（数据的预处理）

0、前言本文将介绍强大的数据处理模块Pandas，该模块可以帮助数据分析师轻松地解决数据的预处理问题，如数据类型的转换、缺失值的处理、描述性统计分析、数据的汇总等。通过本章内容的学习，读者将会掌握如下知识点，进而在数据处理过程中做到游刃有余，为后续的数据分析或机器学习做准备：两种重要的数据结构，即序列和数据框；如何读取外部数据（如文本文件、电子表格或数据库中的数据）；数据类型转换及描述性统计分析；
Fo*(Bi)·2020-09-11 23:11

python数据处理

遇到一个问题，需要读取一个csv文件，然后取其中一列，然后求这一列每个数据出现的概率，然后求其信息熵。importnumpyasnp;importmathimportpandasaspd;df=pd.read_csv("table10.csv")#读取文件h=df.loc[:,'firstSeenSrcIp'].value_counts(normalize=True)#求出其概率valueList
入门弟弟 梦呓君·2020-09-11 09:33

Python数据处理从零开始----第二章（pandas）⑧pandas读写csv文件(3)

目录第二章（pandas）Python数据处理从零开始----第二章（pandas）①删除列Python数据处理从零开始----第二章（pandas）②处理缺失数据Python数据处理从零开始----第二章
柳叶刀与小鼠标·2020-08-26 23:41

python数据处理必会，pandas包中DataFrame和Series的常用方法整理

文章目录PandasSeriesDataFrame叮！Pandaspandas是python中用于处理数据的常用包，主要用于处理表格型或者异质型数据，其经常与numpy或者scipy等数值计算工具包一起使用。pandas常用的三种数据类型为logical(逻辑型)、Numeric(数值型)和Character(字符型)。最常用的两种数据结构为Series(系列)和DataFrame(数据框)。要使
你大佬来啦·2020-08-26 22:12

学习简单两步，大幅提高python数据处理速度

在数据分析领域，最热门的莫过于Python和R语言。其中，数据分析库pandas是Python最经典的库之一。它使用一个二维的DataFrame来表示表格式的数据，相比较于Numpy，Pandas可以存储混合的数据结构，同时使用NaN来表示缺失的数据，而不用像Numpy一样要手工处理缺失的数据，并且Pandas使用轴标签来表示行和列。一般来说，用pandas处理小于100兆的数据，性能不是问题。但
龙皓晨·2020-08-26 16:38

Python数据处理从零开始----第二章（pandas）④数据合并和处理重复值

目录第二章（pandas）Python数据处理从零开始----第二章（pandas）①删除列Python数据处理从零开始----第二章（pandas）②处理缺失数据Python数据处理从零开始----第二章
柳叶刀与小鼠标·2020-08-26 14:37

只需这个简单的两步，能大幅提高你的Python数据处理速度

在数据分析领域，最热门的莫过于Python和R语言。其中，数据分析库pandas是Python最经典的库之一。它使用一个二维的DataFrame来表示表格式的数据，相比较于Numpy，Pandas可以存储混合的数据结构，同时使用NaN来表示缺失的数据，而不用像Numpy一样要手工处理缺失的数据，并且Pandas使用轴标签来表示行和列。一般来说，用pandas处理小于100兆的数据，性能不是问题。但
妄心xyx·2020-08-25 16:29

Python数据处理从零开始----第二章（pandas）（十）pandas合并数据

目录第二章（pandas）Python数据处理从零开始----第二章（pandas）①删除列Python数据处理从零开始----第二章（pandas）②处理缺失数据Python数据处理从零开始----第二章
柳叶刀与小鼠标·2020-08-25 03:06

解决：slate报错 AttributeError: module 'importlib._bootstrap' has no attribute 'SourceFileLoade

在学习《python数据处理》时遇到了安装slate出错，这个问题不仅在slate、在之前按照pycurl时也出现，一直没有解决，原因差不多，都是这个报错，涉及pythonsetup.pyegg_infoCheckthelogsforfullcommandoutput
python__reported·2020-08-25 03:56

Python数据处理从零开始----第二章（pandas）⑥相关性分析

image.png目录第二章（pandas）Python数据处理从零开始----第二章（pandas）①删除列Python数据处理从零开始----第二章（pandas）②处理缺失数据Python数据处理从零开始
柳叶刀与小鼠标·2020-08-23 20:07

Python 学习及项目笔记

前言近期在做的项目中有一些关于Python数据处理——Numpy的东西，以及一些Python的基本操作，在这里进行一些分享和记录吧，也记录一些自己掉进去过的坑，也希望能帮到大家啦。
Stockholm_Sun·2020-08-23 01:03

科学计算基础包 - numpy

Numpy量化投资实际上就是分析数据从而做出决策的过程Python数据处理相关模块：NumPy：数组批量计算pandas：灵活的表计算Matplotlib：数据可视化1，IPython交互式的python
desv5583·2020-08-22 12:35

python数据处理-新书-第四章-处理EXCEL文件----不成功，有错误 进行不下去

https://pypi.org/在这里下载包pipinstallxlrd加入xlsx的excel文件文件内容：看一下工作表有哪些名字：importxlrdbook=xlrd.open_workbook('SOWC2014StatTables_Table9.xlsx')forsheetinbook.sheets():print(sheet.name)找Table9这个工作表importxlrdbo
任宪·2020-08-22 02:43

python数据处理——使用pandas 压缩存储hdf5文件

这是一个比较扯的问题，如果你已经能够通过我找到的这几个博文解决的话，下面我的纠结和探讨就不用看了。如下：TuShare（3）：使用pandas压缩存储hdf5文件pandas写入读取h5文件Py之PyTables：PyTables的简介、安装、使用方法详细攻略解决问题ImportError:HDFStorerequiresPyTables,"Nomodulenamed'tables'"proble
樱花城堡的小侍卫·2020-08-21 19:47

4.14Python数据处理篇之Matplotlib系列(十四)---动态图的绘制

目录目录前言（一）需求分析（二）随机数的动态图1.思路分析：2.源代码：2.输出效果:目录前言学习matplotlib已经到了尾声，没有必要再继续深究下去了，现今只是学了一些基础的操作，满足日常的需求，精力有限，时间不允许，以后有额外的需求，再去官网查一下，能用就好，今天我们来实战一下，绘制动态图。（一）需求分析我的本科专业是学机械的，当然我也要往机械方向发展，我们老师给我这么一个任务：在我们实验
DragonWar%·2020-08-20 04:10

python数据处理与可视化初探

引言欢迎各路大能前来指正错误，以便于共同进步！在利用python对数据进行处理时，本文用到数学绘图库matplotlib、pygal包，基于python3.x。（python3.x的安装不解释，可以访问http://python.org/downloads/下载安装）本文会用到python的几个模块csv、json和扩展包xlrd，在下文具体的位置将会介绍安装过程。利用以上所说的工具，对csv文件
小晴洛·2020-08-19 22:59

python数据处理之日期格式转换

python运用to_datetime函数日期格式转换version：python3.6环境：anaconda/JupyterLab0.27.0操作系统：Windows10日期格式的数据可以整列进行转换，不需要进行for循环。这也是python处理数据时的强大之处。具体操作如下：importpandasaspdtmp=pd.to_datetime(df.datetime,format="%Y/%m
zpr_pandas·2020-08-19 21:26

python数据处理——攻破cookies之cf_clearance

可能很多小伙伴在做网站爬虫的时候，会遇到这样一种情况，在设置requests的header的时候，只设置User-Agent字段的时候，返回的结果是503，这时候的话，首先第一步要做的是看一看是不是自己之前太狂了，爬页面时候没加个延时，被对方主机干掉了，一般这种也不是永久性的。但是如果确定不是这种原因而是第一次就不行的话，那就可能是要用到本文提到的这个攻破cf_clearance的工具了。首先呢，
樱花城堡的小侍卫·2020-08-18 21:59

python数据处理:对类别Category进行编码(转化为数值)

今天在用tensorflow处理线性回归的时候,提到两个数据集,adult_set数据集,可以用来做逻辑回归.但是其中一些标记是列表标记,既然是做分析,就得将起转化为数值编码.比如男(male),女(female),就得转化为1和2,或者one_hot编码.不少包都有对应的方式.总结一下.sklearn.DictVectorizersklearn.feature_extraction中的DictV
selous·2020-08-18 02:20

Python数据处理中的问题汇总.....

1、ThetruthvalueofaSeriesisambiguous.Usea.empty,a.bool(),a.item(),a.any()ora.all().所选的真值不明确。可能是将一个值与多个值或一个列表中的值相比较、匹配，导致的问题**不能使用orand，需要用|和&来代替2、KeyError:‘labels[12]notcontainedinaxis’本项目中，要用到df.dropn
周五见·2020-08-17 02:19

4.13Python数据处理篇之Matplotlib系列(十三)---轴的设置

目录目录前言（一）设置轴的范围1.同时对于x,y轴设置2.分别对与x,y轴的设置（二）设置刻度的大小1.普通的刻度设置2.添加文本的刻度设置3.主副刻度的设置（三）设置轴的数据1.说明：2.源代码3.输出效果：（四）设置axes脊柱1.属性列表2.实例1-修改默认的坐标样式3.实例2-带箭头的坐标系目录前言本章节讲的是关于轴的设置，尽可能举例多种情况。（一）设置轴的范围1.同时对于x,y轴设置（1
weixin_34124577·2020-08-15 16:28

吴裕雄 数据挖掘与分析案例实战（4）——python数据处理工具：Pandas

#导入模块importpandasaspdimportnumpyasnp#构造序列gdp1=pd.Series([2.8,3.01,8.99,8.59,5.18])print(gdp1)#取出gdp1中的第一、第四和第五个元素print('行号风格的序列：\n',gdp1[[0,3,4]])#数学函数--取对数print('通过numpy函数：\n',np.log(gdp1))#平均gdpprin
weixin_30457065·2020-08-14 20:50

[Python数据处理] 怎样用Python预处理csv文档提取数据

[问题背景]处理以下文本文件：grade_gbk.csv(GBK编码格式)grade_uft-8.csv(UTF-8编码格式)每个文件内容相同，共三条数据，每条数据的第一项是姓名，第二项是语文，第三项是数学，第四项是英语首先打开Excel，输入以下内容：姓名语文数学英语张三128136112李四9910673王五10214888然后另存为两次，第一次的文件名为'grade_gbk.csv'，保存类
swordtraveller·2020-08-14 19:15

Python小记

Python数据处理pd.set_option('display.max_columns',None)#全部列打印pd.set_option('display.max_rows',None)#全部行打印
丶L--·2020-08-14 19:34

Python数据处理PDF高清下载|百度云盘

Python数据处理提取码：h844内容简介······本书采用基于项目的方法，介绍用Python完成数据获取、数据清洗、数据探索、数据呈现、数据规模化和自动化的过程。
pythion那些事·2020-08-13 21:00

【python】matplotlib.pyplot怎样移除图表的刻度线（ax.tick_params）

创作日志：我们的python数据处理Educoder实训里有一个任务是移除图表的全部刻度线，奇怪的是，网上到处都是设置刻度线样式的博客，却没有移除的，所以我来啦！
木土九日·2020-08-13 18:20

Python数据分析示例（1）Day2

说明：本文章为Python数据处理学习日志，主要内容来自书本《利用Python进行数据分析》，WesMcKinney著，机械工业出版社。
图图酱·2020-08-12 12:59

安利10款免费的Python数据处理工具

原文章作者：ParulPandey英文原文:10Pythonimagemanipulationtools译者：Regina我们的世界充满了数据，而图像数据占据着其中很大的比例。如果想要利用这些图像数据，我们就必须对他们进行适当的处理。简单来说，图像处理就是对数字图像进行分析转化从而提高质量或是提取关键信息的过程。常见的图像处理任务包括图像显示，图像的基本操作（如裁剪，翻转，旋转等),图像分割，图像
鲤吻·2020-08-12 12:04

python处理blog文件数据

以下是Python数据处理的题目说明与要求：Theattachmentisalogfileusedtoshowrunningstatusofset-top-box,andeachlineinthefilefollowstheformatof
weixin_34268843·2020-08-11 19:20

python数据处理——dataframe里的行列分割

有时候会遇到一种情况，就是在dataframe的某一列中是比较复杂的数据结构，比如一个dict，或者一个list，或者一个listoflist，其实都有很好的办法可以解决的，不需要用多重的for循环，这里放两个例子：SplittingalistinaPandascellintomultiplecolumns源dataframedf=pd.DataFrame(data=[[[8,10,12],'A'
樱花城堡的小侍卫·2020-08-11 10:26

python数据处理——pandas Dataframe.mean()没有返回值，返回series[]

博主真真是个遍历BUG的小能手，这个问题的原因是在pd.read_csv()之类的操作时候，没有指定数值类型，导致的这个问题，因此包括在内的，数值运算之后数据变得很奇怪啊，数据为nan啊之类的问题都有解了，所以说，在read的时候，dtype一下，是一种态度要问我怎么发现的，我在使用DEBUG功能时候，使用了这个函数：意思就是对dataframe的某一列求均值啦，返回typeerror，我就秒懂了
樱花城堡的小侍卫·2020-08-11 03:00

用 Python 做数据处理必看：12 个使效率倍增的 Pandas 技巧（上）

本文旨在提供Python数据处理的12种方法。文中也分享了一些会让你
智享AI·2020-08-11 02:22

Python进行统计建模

前言大家好，在之前的文章中我们已经讲解了很多Python数据处理的方法比如读取数据、缺失值处理、数据降维等，也介绍了一些数据可视化的方法如Matplotlib、pyecharts等，那么在掌握了这些基础技能之后
·2020-08-10 19:50

20 python数据处理numpy

文章目录20python数据处理numpy引言ndarray数组的基本操作ndarray创建数组array函数ones和zeros随机数组的创建均匀分布正态分布ndarray数组属性数组和标量之间的运算索引和切片数学统计方法
bj_zhb·2020-08-07 12:35

python数据处理之OneHot

1.OneHot变换importpandasaspddf1=pd.DataFrame({'key':['a','b','c'],'data1':[1,2,3]})print(df1)df2=pd.get_dummies(df1['key'])print(df2)df3=pd.get_dummies(df1)print(df3)2.OneHot编码手动实现#手动实现onehotfromnumpyim
i徒然·2020-08-06 12:58

4.4Python数据处理篇之Matplotlib系列(四)---plt.bar()与plt.barh条形图

目录目录前言（一）竖值条形图（二）水平条形图1.使用bar()绘制：2.使用barh()绘制：（三）复杂的条形图1.并列条形图：2.叠加条形图：3.添加图例于数据标签的条形图：目录前言今天我们学习的是条形图，导入的函数是：plt.bar（）于plt.barh（一）竖值条形图（1）说明：原函数定义：bar(x,height,width=0.8,bottom=None,,align='center',
weixin_34405354·2020-08-06 12:10

python数据处理-整理表格数据

利用python整理表格数据由于疫情数据量大，且时间跨度大从2020.1.23-2020.2.2日，可以利用‘’日期‘标签进行筛选：首先需要python环境以及都三方库pandas一下是实现代码：importpandasaspddata=[]dfd=pd.read_excel('F:\gbh\python\practice\大创\data\武汉疫情数据\迁徙.xlsx')#dfd.head(10)
菜鸟高·2020-08-04 20:11

python数据处理excel和pdf，并打包成exe

之前零散的用过一点python做数据处理，这次又遇到一个数据处理的小功能，因此，记录一下整个流程，方便以后查阅。功能要求：读取excel，找指定的PDF文件的页数是否与excel中记录的一致整个处理过程包括python环境配置，插件安装，excel和PDF处理，exe打包1、python环境配置IDE用的是PyCharm社区版，pyhon环境用的是pandas，它内嵌了很多数据处理的插件，就有我们
weixin_34144848·2020-08-04 20:34

Python数据处理之（二 十）np.random.rand()函数 与 np.random.randn()函数的区别

一、np.random.rand()本函数可以返回一个或一组服从“0~1”均匀分布的随机样本值。随机样本取值范围是[0,1)，不包括1。>>>importnumpyasnp>>>np.random.rand()0.21844306516262169>>>np.random.rand()0.581733668489196>>>np.random.rand(1)array([0.27682255])>
布衣书生-Python·2020-07-29 16:00

python数据处理（招聘信息薪资字段的处理）

爬取了51job上面的数据，其中有薪资字段需要做处理数据部分格式如下图：处理好之后的数据截图：处理需求：1.把“salary”列中带“万/年元/天”关键字的行都删除2.把“salary”列中带“千/月”关键字的数据变换一下如“6-9千/月”转化为“6k-9k”3.把“salary”列中带“万/月”关键字的数据变换一下如“1-1.5万/月”转换为"10k-15k"处理代码：#-*-coding:ut
BRYTLEVSON·2020-07-29 09:32

我要和import说再见了！这个Python库能让我偷偷懒

还记得入门Python数据分析时经常会import几个库，下面这几个可谓是入门学习时的四大护法，Python数据处理和可视化常会用的工具。
千锋python和唐唐·2020-07-29 05:07

Python数据处理的一些总结-1

importpandasaspdimportnumpyasnp#载入数据train=pd.read_csv('Train.csv')test=pd.read_csv('Test.csv')#显示一下数据的大小#可以通过train.shape,test.shape查看train.dtypes#查看每个属性的类型train.head(5)#查看前五条数据#合并成一个总的datatrain['sourc
zhentoufei·2020-07-29 03:31

python数据处理随笔总结

可能写的有些杂乱，毕竟是遇到哪个就写了哪个，可以直接看目录，找自己想要的哪个函数.csv文件读取pandas中，常用的载入函数是read_csv。除此之外还有read_excel和read_table，table可以读取txt。importpandasaspdfile=pd.read_csv("77.csv",encoding='utf-8')#encoding选择编码方式file提取文件中的某个
小白不白nie·2020-07-28 23:44

超声波测距+python数据处理+可视化实时图像绘制

本文介绍的是使用arduino驱动超声波测量距离，并通过串口将数据发送给python，从而进行数据处理，处理结果如图所示。准备工作超声波模块+arduino开发板+杜邦线数根+python开发环境思路首先使用arduino车辆距离，通过串口将数据发送给python代码进行数据处理并绘制成图像进行实时显示。超声波模块介绍如上图所示，VCC供5V电源，GND为地线，TRIG触发控制信号输入，ECHO回
James Bin·2020-07-28 10:27
上一页 3 4 5 6 7 8 9 10 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他