Pandas中进行数据类型转换有二种基本方法:
1.1转float类型
df['金额'].astype('float')
1.2转int类型
df['金额'].astype('int')
1.3转bool
df['状态'].astype('bool')
1.4字符串日期转datetime
df['单据日期'] = pd.to_datetime(df['单据日期'])
df['year'] = df['单据日期'].dt.strftime('%Y')
df['month'] = df['单据日期'].dt.strftime('%m')
1.5数字转字符串
df['金额'].astype(str)
2.使用to_numeric()
import pandas as pd
import numpy as np
s = pd.Series(['apple', '1.0', '2','2019-01-02',1, False,None,pd.Timestamp('2018-01-05')])
# to_numeric是在object,时间格式中间做转换,然后再使用astype做numeric类型的内部转换
pd.to_numeric(s, errors='raise') # 遇到非数字字符串类型报错,bool类型报错,时间类型转换为int
pd.to_numeric(s, errors='ignore') # 只对数字字符串转换,其他类型一律不转换,包含时间类型
pd.to_numeric(s, errors='coerce') # 将时间字符串和bool类型转换为数字,其他均转换为NaN
# downcast 可以进一步转化为int或者float
pd.to_numeric(s) # 默认float64类型
pd.to_numeric(s, downcast='signed') # 转换为整型
# astype中的error没有`coerce`选项,所以只适合`numeric`内部类型的转换,比如将int32转换为int64,int32转换为float32
# 而不适合在object,时间格式之间做转换,
s.astype('int32',errors='raise')
s.astype('int32',errors='ignore') # 对object无效,astype只能对numeric类型生效
可以看到NaN
类型在比较的是不相等的,原因是numpy.NaN
是一种特殊的numpy.float64
,如果想比较NaN
是否相同,需要将其转换为该类型自己定义的特殊值(注意不能转换为None,None在Series里不能比较,而单独的值才能比较
import pandas as pd
import numpy as np
s = pd.Series(['apple', '1.0', '2','2019-01-02',1, False,None,pd.Timestamp('2018-01-05')])
# 缺失值的比较 np.NaN == np.NaN返回是False
a = pd.to_numeric(s, errors='coerce') # 将时间字符串和bool类型转换为数字,其他均转换为NaN
b = pd.to_numeric(s, errors='coerce') # 将时间字符串和bool类型转换为数字,其他均转换为NaN
a==b
a[a==np.NaN] # 索引不到np.NaN
a[a.isnull()] = None # 能索引到,但是不能赋值为None
a[a.isna()] =None # 能索引到,但是不能赋值为None
a = a.where(a.notnull(), None) # 可以转换
b = b.where(b.notnull(), None)
a == b # 但是Series里的None不能比较,返回False,这个坑太大了,在Python中None == None 返回是Ture
a[a.isnull()] = -1000 # 可以转换
a[a.isna()] = -1000 # 可以转换
a = a.where(a.notnull(), -10000) # 可以转换
b = b.where(b.notnull(), -10000) # 可以转换
a==b # 可以判断