从1763-2019年的全球气象站点(GSOY)数据,提取特定指标信息,并按照年份汇总(86602个文件--2428861行数据)

欢迎客官移步到简研–简简单单科研中学习和交流

主要完成86602个文件–2428861行数据处理:
1、数据下载;
2、提取特定字段数据;
3、按照年份汇总数据。


1、数据下载

通过数据网站下载CSV格式数据(共86602个文件),官方提供统一下载所有文件

2、提取特定字段数据

先从86602个CSV文件,提取具体的监测指标,提取后的指标信息分成三个csv文件存储,主要是因为2016 office csv文件最多存储1048756行数据,而提取后的指标信息共2428861行。代码如下:
从1763-2019年的全球气象站点(GSOY)数据,提取特定指标信息,并按照年份汇总(86602个文件--2428861行数据)_第1张图片

导出结果文件

从1763-2019年的全球气象站点(GSOY)数据,提取特定指标信息,并按照年份汇总(86602个文件--2428861行数据)_第2张图片

3、按照年份汇总数据

上段代码导出的csv文件数据,是按照字段存储的,下面按照年份汇总这些数据

从1763-2019年的全球气象站点(GSOY)数据,提取特定指标信息,并按照年份汇总(86602个文件--2428861行数据)_第3张图片

最终导出文件

从1763-2019年的全球气象站点(GSOY)数据,提取特定指标信息,并按照年份汇总(86602个文件--2428861行数据)_第4张图片
从1763-2019年的全球气象站点(GSOY)数据,提取特定指标信息,并按照年份汇总(86602个文件--2428861行数据)_第5张图片

源码和结果文件

移步到简研–简简单单科研中获取

你可能感兴趣的:(Python)