python处理多级目录下(文件夹下)的多个CSV表格内容,并将其指定内容汇总到一个自定义表格中

实战背景

目前服务器跑多盘(30+)性能测试需要将其带宽数据汇总到一个表格中,然性能测试脚本生成的读写test_data.csv在以盘符为命名的文件夹下,如果汇总的话需要在OA电脑上形如打开sda文件夹再打开test_data文件夹,然后再打开如下形式的sdaa_seq_read_data_op.csv数据表格,然后博主这样的文件有30+个文件夹那岂不是我一上午就敲100+次键盘鼠标才能完成这个任务,既费时又费力。这时候博主就想到了要开发一个脚本自动化完成操作,才有个这个课题,如果有相同类似需求需要处理处理多级目录下(文件夹下)的多个CSV表格内容,并将其指定内容汇总到一个自定义表格中这篇文章你肯定不会白看,我将深入浅出每一行代码讲解已开发好的多盘数据处理脚本。
为了更好让大家理解当前需求,请参看如下图所示内容
python处理多级目录下(文件夹下)的多个CSV表格内容,并将其指定内容汇总到一个自定义表格中_第1张图片

一. 软硬件环境

硬件环境: 能运行python的笔记本
软件环境: python3.6+、python模块(re、csv、pandas)

1.1 安装python 3.6+

可以点击该蓝色字体在python官网上下载即可,博主用的3.6.8版本,也可以手动复制以下链接进行下载https://www.python.org/downloads/windows/

1.2 安装pytho

你可能感兴趣的:(服务器测试之脚本开发篇,python,pandas,开发语言)