pandas删除重复列

需求: 因某种原因,数据列出现重复的数据,怎样实现重复数据删除
场景分析: 一般而言,我们日常经常要处理重复行数据的删除,且只需要drop_duplicates方法就能实现。那么,重复的列数据无法直接通过drop_duplicate方法实现。这时,就可以巧妙的用到一个关键方法:转置 。我们可以通过转置把列数据转为行数据,再删除重复行数据,最后再次转置即可。
转置方法: df.T
实例

import pandas as pd
import numpy as np

#创建一个带有重复列的数据框df2
df1=pd.DataFrame(np.arange(12).reshape((4,3)),columns=list('abc'))
df2=pd.concat([df,df[['a']]],axis=1)
df2

pandas删除重复列_第1张图片

#两次转置实现重复列数据删除
df=df2.T.drop_duplicates().T
df

pandas删除重复列_第2张图片
可以参考另一种情景的解决方法
删除列名相同但数据不同的列

你可能感兴趣的:(pandas,python,数据分析)