判断dataframe是否有重复行索引或列索引和drop_duplicates用法
判断列索引是不是重复
print(data.index.is_unique)
False#表示有重复
判断列是不是有重复
print(data.index.is_unique)
False#表示有重复
drop_duplicates删去重复数据
DataFrame.drop_duplicates(subset=None, keep=‘first’, inplace=False)
subset : column label or sequence of labels, optional
用来指定特定的列，默认所有列
keep : {‘first’, ‘last’, False}, default ‘first’
删除重复项并保留第一次或者最后一次出现的项
inplace : boolean, default False
是直接在原来数据上修改还是保留一个副本