Python中批量读取文件,并合并成一个文件,以csv为例

import warnings
warnings.filterwarnings('ignore')
import  pandas as pd
import re
import os

#数据探索
#1 获取所有文件的名称和路径
data_path = './data/'  #数据存储路径     !!!!!按需修改这里
data_names = os.listdir(data_path)  #列举出data_path里面所有的文件名称
data = pd.DataFrame([])
for data_name in data_names:
    # 删除不是的文件
    if data_name.endswith('.csv'): #  !!!!不同各格式  按需修改
        print((data_name))
        #3 循环读取文件
        tmp =pd.read_csv(os.path.join(data_path,data_name),encoding='gbk')
        #4 文件存储
        data = pd.concat([data,tmp])
#data = pd.read_csv('./data/订单表2018-5.csv',encoding='gbk')  #读取

按需自取 修改一下路径
Python中批量读取文件,并合并成一个文件,以csv为例_第1张图片

你可能感兴趣的:(【日常Debug】,数据分析,数据挖掘,python)