妙招!如何用Python巧妙的批量合并 Excel!

本文介绍了如何使用Pandas的ExcelWriter方法将多个DataFrame保存到一个Excel文件的不同工作表中,包括通过循环读取目录下所有Excel文件并自动保存的实现方式。

92e82a80035d403777df74a96a3baee1.png

今天分享一个利用Pandas进行数据分析的小技巧,也是之前有粉丝在后台进行提问的,即如何将多个pandas.dataframe保存到同一个Excel中。

其实只需要灵活使用pandas中的pd.ExcelWriter()方法即可。

假设现在我们有df1 df2 df3三个dataframe,需要将它们保存到同一个Excel的不同sheet中,只需要先创建一个ExcelWriter对象,然后不停写入就行

df1 = pd.read_csv('东京奥运会奖牌数据.csv')
df2 = pd.read_excel("TOP250.xlsx")
df3 = pd.read_excel("2020年中国大学排名.xlsx")

writer = pd.ExcelWriter('test.xlsx')
df1.to_excel(writer,sheet_name="df1",index=False)
df2.to_excel(writer,sheet_name="df2",index=False)
df3.to_excel(writer,sheet_name="df3",index=False)
writer.save()

是不是和常见的文件读写with方法类似,我们也可以使用同样的方法

with pd.ExcelWriter("test1.xlsx") as xlsxwriter:
    df1.to_excel(xlsxwriter,sheet_name="df1",index=False)
    df2.to_excel(xlsxwriter,sheet_name="df2",index=False)
    df3.to_excel(xlsxwriter,sheet_name="df3",index=False)

得到的结果是一样的,可以将多个df保存到一个Excel中
04f1b6b9a644318ff62c2d66e1adb9bb.png

这个方法虽然简单好用,但是如果要保存的 df 太多了,一个一个手动去读取再手动去保存就显得十分麻烦,另外我们希望sheet是文件名,如果手动复制粘贴,就更麻烦了。

我们先简单拿来一个小脚本「获取指定目录下的全部Excel文件名」

import os
def getfile(dirpath):
    
    filelist = []
    for root,dirs,files in os.walk(dirpath):
        for file in files:
            if file.endswith("xlsx") or file.endswith("csv"):
                filelist.append(os.path.join(root,file)) 
    
    return filelist

执行一下,可以看到指定目录下的全部Excel文件名
7f43a239b1a3ee99278282de17c34342.png

下面要做的,我想不用多说了「循环读取,自动保存」

filelist = getfile('/Users/liuzaoqi/Desktop/zaoqi/2022公众号文章/如何保存多个df')
writer = pd.ExcelWriter('test.xlsx')
for file in filelist:
    if file.endswith("xlsx"):
        df = pd.read_excel(file)
    else:
        df = pd.read_csv(file)
    df.to_excel(writer,sheet_name=file.split('/')[-1].split('.')[0],index=False)
writer.save()

现在,当前目录下的全部Excel就自动合并到一个Excel中的不同sheet中,并且sheet名是对应的文件名
860eaff0e3a1dcaf2220567be31a4d30.png

来源:早起python

推荐阅读:
入门: 最全的零基础学Python的问题  | 零基础学了8个月的Python  | 实战项目 |学Python就是这条捷径
干货:爬取豆瓣短评,电影《后来的我们》 | 38年NBA最佳球员分析 |   从万众期待到口碑扑街!唐探3令人失望  | 笑看新倚天屠龙记 | 灯谜答题王 |用Python做个海量小姐姐素描图 |碟中谍这么火,我用机器学习做个迷你推荐系统电影
趣味:弹球游戏  | 九宫格  | 漂亮的花 | 两百行Python《天天酷跑》游戏!
AI: 会做诗的机器人 | 给图片上色 | 预测收入 | 碟中谍这么火,我用机器学习做个迷你推荐系统电影
小工具: Pdf转Word,轻松搞定表格和水印! | 一键把html网页保存为pdf!|  再见PDF提取收费! | 用90行代码打造最强PDF转换器,word、PPT、excel、markdown、html一键转换 | 制作一款钉钉低价机票提示器! |60行代码做了一个语音壁纸切换器天天看小姐姐!|

年度爆款文案

点阅读原文,看B站我的20个视频!

### 使用Python批量合并多个Excel文件 为了实现这一目标,可以利用`pandas`库来读取并处理Excel文件。下面是一个完整的解决方案,该方案能够遍历指定目录下的所有Excel文件并将它们的内容合并到一个新的工作表中。 #### 安装必要的库 首先需要安装两个重要的第三方库——`openpyxl`用于操作.xlsx格式的工作簿;而`pandas`则提供了强大的DataFrame结构来进行数据分析与转换。可以通过pip命令轻松完成这两个包的安装: ```bash pip install pandas openpyxl ``` #### 批量合并Excel文件的代码示例 接下来展示一段具体的Python脚本,它会自动扫描给定路径下所有的`.xlsx`文件,并将其内容追加至最终的结果集中保存下来。 ```python import os import pandas as pd def merge_excel_files(directory, output_file): all_data = [] # 遍历目录中的每一个文件 for filename in os.listdir(directory): if not filename.endswith('.xlsx'): continue file_path = os.path.join(directory, filename) try: df = pd.read_excel(file_path) # 尝试加载当前Excel文件的数据 all_data.append(df) except Exception as e: print(f"无法读取 {filename}: {e}") combined_df = pd.concat(all_data, ignore_index=True) # 合并所有数据框 with pd.ExcelWriter(output_file, engine='openpyxl') as writer: combined_df.to_excel(writer, index=False) if __name__ == '__main__': input_dir = './excels/' # 输入Excel文件所在的文件夹位置 result_xlsx = 'combined_result.xlsx' # 输出合并后的Excel文件名 merge_excel_files(input_dir, result_xlsx) ``` 此段程序通过循环访问指定文件夹内的每一份Excel文档,依次调用`pd.read_excel()`函数获取其内部表格信息,再借助于列表收集这些独立的数据集。最后一步则是运用`pd.concat()`方法将各个子集合纵向堆叠起来形成统一的整体视图,并写入新的Excel文件之中[^1]。
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值