《Python数据分析与应用》第5章使用Pandas进行数据预处理 实训部分

《Python数据分析与应用》第5章使用Pandas进行数据预处理 实训部分(源于大学课程python数据分析)

实训1合并线损、用电量趋势与线路告警数据

1.读取两表《Python数据分析与应用》第5章使用Pandas进行数据预处理 实训部分_第1张图片《Python数据分析与应用》第5章使用Pandas进行数据预处理 实训部分_第2张图片
2.查看两表形状
《Python数据分析与应用》第5章使用Pandas进行数据预处理 实训部分_第3张图片
3.以ID和date两个键值作为主键进行内连接
在这里插入图片描述在这里插入图片描述
在这里插入图片描述
4.查看数据
《Python数据分析与应用》第5章使用Pandas进行数据预处理 实训部分_第4张图片
《Python数据分析与应用》第5章使用Pandas进行数据预处理 实训部分_第5张图片

实训2 插补用户电量数据缺失值

1.读取missing_data.csv表中的数据并将列名进行重命名操作
《Python数据分析与应用》第5章使用Pandas进行数据预处理 实训部分_第6张图片
《Python数据分析与应用》第5章使用Pandas进行数据预处理 实训部分_第7张图片
2.查询缺失值所在位置
《Python数据分析与应用》第5章使用Pandas进行数据预处理 实训部分_第8张图片
3.使用SciPy库中interpolate模块中的lagrange对数据进行拉格朗日插值
data删除缺失值行后数据赋值给data2
《Python数据分析与应用》第5章使用Pandas进行数据预处理 实训部分_第9张图片
生成x列表
《Python数据分析与应用》第5章使用Pandas进行数据预处理 实训部分_第10张图片
分别提取data2中的数据放入y、y1、y2,之后分别与x进行拟合
《Python数据分析与应用》第5章使用Pandas进行数据预处理 实训部分_第11张图片
《Python数据分析与应用》第5章使用Pandas进行数据预处理 实训部分_第12张图片
《Python数据分析与应用》第5章使用Pandas进行数据预处理 实训部分_第13张图片
用拟合函数填补缺失值(A用户缺失行为5,12;B用户缺失行为3.10,19,20;C用户缺失行为4,7,10,16。借此进行填充)

《Python数据分析与应用》第5章使用Pandas进行数据预处理 实训部分_第14张图片
4.查看数据中是否存在缺失值,若不存在则说明插值成功
查看拉格朗日插值后缺失值的位置
《Python数据分析与应用》第5章使用Pandas进行数据预处理 实训部分_第15张图片
查看每一列缺失值个数
《Python数据分析与应用》第5章使用Pandas进行数据预处理 实训部分_第16张图片

实训3 标准化建模专家样本数据

1.读取model.csv数据
《Python数据分析与应用》第5章使用Pandas进行数据预处理 实训部分_第17张图片
2.定义标准差标准化函数

《Python数据分析与应用》第5章使用Pandas进行数据预处理 实训部分_第18张图片
3.使用函数分别对3列数据进行标准化;查看标准化后的数据

《Python数据分析与应用》第5章使用Pandas进行数据预处理 实训部分_第19张图片
《Python数据分析与应用》第5章使用Pandas进行数据预处理 实训部分_第20张图片
《Python数据分析与应用》第5章使用Pandas进行数据预处理 实训部分_第21张图片
《Python数据分析与应用》第5章使用Pandas进行数据预处理 实训部分_第22张图片

你可能感兴趣的:(数据分析,python,数据挖掘)