Python提取多张excel表上的数据,合并汇总到一张新表

本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理

以下文章来源于财会学习联盟,作者:我是刀哥啊

Python 自动化办公,处理Excel表格视频讲解

https://www.bilibili.com/video/BV1Lh411R7Kd/

前言

这篇文章要做的事情,如标题所述,就是提取多张excel表上的数据或信息,合并汇总到一张新表上,这是我们工作中经常会遇到的事情。

比如将每月销售情况汇总到一张表上进行销售情况分析,比如将各月发票信息汇总到一张表上进行统计分析,还比如将每月工资表上的某些信息汇总到一张表上进行工资成本分析等等。

具体看表即为:

Python提取多张excel表上的数据,合并汇总到一张新表_第1张图片

Python提取多张excel表上的数据,合并汇总到一张新表_第2张图片

Python提取多张excel表上的数据,合并汇总到一张新表_第3张图片

Python提取多张excel表上的数据,合并汇总到一张新表_第4张图片

各期科目余额表截图

最后得到的新表为:

Python提取多张excel表上的数据,合并汇总到一张新表_第5张图片

要实现上述目标,可以分如下四步进行。

1.获取各科目余额表文件路径

将2017年1-12月、2018年1-12月、2019年1-12月及2020年1-6月各期科目余额表放在同一文件夹下,要读取多少个文件,就把多少个文件全部放在同一个文件夹下,如下图。

Python提取多张excel表上的数据,合并汇总到一张新表_第6张图片

然后读取所有文件的路径,代码如下。

1dir_xls = []
2def get_file(folder_path):  #获取同一文件夹下所有科目余额表各自的文件路径
3    dir_file = os.listdir(folder_path)
4    #print(dir_file)  
5    for path in dir_file:
6        if path[-4:] == 'xlsx' or path[-3:] == 'xls':
7            whole_path = r'd:/F:学习/python/账龄分析/科目余额表/{}'.format(path)
8            dir_xls.append(whole_path)
9    return dir_xls

2.获取各科目余额表中应收账款一级科目编码所在的行列

比如在2017年科目余额表中,应收账款一级科目编码为“1122”,其所在的单元格为C12,也即为第12行第3列,这里的行号12、列号3,即为其定位。

Python提取多张excel表上的数据,合并汇总到一张新表_第7张图片

其余科目余额表同理,均为获取一级科目编码“1122”的行号和列号,获取代码如下。

1dict_row_col = {}
 2def get_row_col(dir_xls):  #获取每一张表中应收账款一级科目编码所在的行号和列号
 3    for i in dir_xls:
 4        #print(i)
 5        account_balance_sheet_data = pd.DataFrame(pd.read_excel(i))
 6        for a in account_balance_sheet_data.index:
 7            for b in range(len(account_balance_sheet_data.loc[a].values)):
 8                if account_balance_sheet_data.loc[a].values[b] == '1122':
 9                    row = a+1
10                    col = b+1
11                    dict_row_col[i] = [row,col]
12    return dict_row_col

3.获取各科目余额表中应收账款所有二级科目编码

根据获取到的应收账款一级科目编码行号和列号,即根据其定位,再获取每一张表中应收账款所有二级科目编码,并将其不重复且升序排列添加到一张新表中,代码如下。

1def get_ar_code(dict_row_col):
 2    i = 0
 3    ar_list1 = []
 4    ar_list2 = []
 5    for key in dict_row_col.keys():
 6        workbook = xlrd.open_workbook(key)
 7        balance_sheet = workbook.sheet_by_index(0)
 8        row = dict_row_col[key][0]
 9        col = dict_row_col[key][1]
10        while True:
11            if '1122' in balance_sheet.cell_value(row+1,col-1):
12                ar_code = balance_sheet.cell_value(row+1,col-1)
13                if ar_code not in ar_list1:
14                    ar_list1.append(ar_code)
15                else:
16                    pass                
17                row = row+1                
18            else:
19                break
20    ar_list1.append('科目编码')    
21    ar_list1.sort(reverse=False) #科目编码列表升序排列
22    #将“科目编码”从最后一个元素整体移动到第一个元素
23    ar_list2.append(ar_list1[len(ar_list1)-1]) 
24    for i in range(1,len(ar_list1)):
25        ar_list2.append(ar_list1[i-1])
26    #将所有元素写入到excel表中
27    for i in range(len(ar_list2)):
28        ar_sheet.write(i,0,ar_list2[i])

得到的新表内容如下。

Python提取多张excel表上的数据,合并汇总到一张新表_第8张图片

由上可看出,2017年至2020年1-6月,四张科目余额表,应收账款共有617个二级科目,对应着617个不同的客户。

4.根据二级科目索引获取全部所需信息

此步的操作过程,即上一篇《如何用python实现excel中的vlookup功能?》所分享的过程,这里就不再详述了,代码如下。

1def get_ar_info(dict_row_col):
 2    #读取导入目标表
 3    file_target = r'd:\F:学习\python\账龄分析\AR.xls'
 4    list_ar_code = []
 5    workbook = xlrd.open_workbook(file_target)
 6    balance_sheet = workbook.sheet_by_index(0)
 7    rows = balance_sheet.nrows
 8    for i in range(1,rows):
 9        list_ar_code.append(balance_sheet.cell_value(i,0))
10    #print(list_ar_code)
11    data = {'科目编码':list_ar_code}
12    df_target = pd.DataFrame(data)
13
14    for key in dict_row_col.keys():
15        #读取原始数据来源表
16        file_source = key
17        df_source = pd.read_excel(file_source)
18        #将原始数据来源表及导入目标表信息合并到同一表上
19        dfneed = df_source[['科目编码','科目名称','期初借方','期初贷方','本期发生借方','本期发生贷方','期末借方','期末贷方']]
20        df_target = pd.merge(df_target,dfneed,how='left',on='科目编码')
21    df_target.to_excel(file_target,index=False)

5.最终目标实现

前四步即为封装的四个函数,每个函数为其中一个步骤,最终汇总可以实现此文总体目标,调用代码及运行代码如下。

1import os
 2import pandas as pd
 3import xlrd,xlwt
 4
 5folder_path = r'd:\F:学习\python\账龄分析\科目余额表'
 6f = xlwt.Workbook()
 7ar_sheet = f.add_sheet(u'ar_sheet',cell_overwrite_ok=True)
 8dir_xls = get_file(folder_path)
 9dict_row_col = get_row_col(dir_xls)
10get_ar_code(dict_row_col)
11f.save(r'd:\F:学习\python\账龄分析\AR.xls')
12get_ar_info(dict_row_col)

运行后生成的表格如下。

Python提取多张excel表上的数据,合并汇总到一张新表_第9张图片

再经过简单整理后,便可得出上文最终表格,至此实现了从多张excel表中提取所需数据或信息并汇总到同一张新表上的目的。


 

你可能感兴趣的:(python,python,机器学习,大数据,java,数据分析)