pandas100个骚操作五:使用 explode 实现 pandas 列转行的 2 个常用技巧

大家好,我是你们的东哥。

本篇是pandas100个骚操作的第5篇:使用 explode 实现 pandas 列转行的 2 个常用技巧

查看全部骚操作可以点击专栏:pandas 100个骚操作


在我们处理数据的过程中,经常会遇到这样的情况。

pandas100个骚操作五:使用 explode 实现 pandas 列转行的 2 个常用技巧_第1张图片

工作中比如用户画像的数据中,客户使用的app类型就会以这种长列表的形式或者以逗号隔开的字符串形式展现出来。

那么面对这样的数据格式,我们希望把它转换为结构化的表,脑海中想象的是下面这种格式。

pandas100个骚操作五:使用 explode 实现 pandas 列转行的 2 个常用技巧_第2张图片

使用pandas如何实现呢?

一、直接explode

其实非常简单,使用explode爆炸方法即可,东哥平时喜欢叫它爆炸。其实,这个和hive中的lateral view explode有异曲同工的效果,也就是列转行的功能。

仍用上面这个例子,要达到想要的效果,只需要这么做。

df.explode('爱好')

pandas100个骚操作五:使用 explode 实现 pandas 列转行的 2 个常用技巧_第3张图片

看到爱好这个字段被爆炸开了,列表里所有特征都被转换为对应程序员的行数据。

但列表有重复的值,就可能导致爆炸出来的行存在重复行,如上面小码哥出现了两次敲代码。所以一般我们会在后面跟一个去重的方法。

df.explode('爱好').drop_duplicates()

pandas100个骚操作五:使用 explode 实现 pandas 列转行的 2 个常用技巧_第4张图片

二、explode不能直接处理的

但是,explode这个爆炸方法只能处理列表元组Seriesnumpyndarray的类型。

如果面对下面这种格式,该如何爆炸?

pandas100个骚操作五:使用 explode 实现 pandas 列转行的 2 个常用技巧_第5张图片

其实也不难,只要运用一个小技巧即可,就是Series.str.split()分割字符串的方法来创建列表。

df["爱好"] = df["爱好"].str.split()

pandas100个骚操作五:使用 explode 实现 pandas 列转行的 2 个常用技巧_第6张图片

然后,我们再用explode爆炸就完事了。

以上就是本次关于explode的骚操作分享。

我是东哥,和我一起学pandas 100个骚操作,欢迎关注我的原创公众号:Python数据科学

你可能感兴趣的:(pandas100个骚操作,pandas,explode)