返回顶部
首页 > 资讯 > 后端开发 > Python >如何用 Python 批量循环读取 Excel ?
  • 927
分享到

如何用 Python 批量循环读取 Excel ?

pythonexcel开发语言 2023-09-06 06:09:20 927人浏览 八月长安

Python 官方文档:入门教程 => 点击学习

摘要

在使用 python 批量处理 excel 时经常需要批量读取数据,常见的方式是结合glob模块,可以实现将当前文件夹下的所有csv批量读取,并且合并到一个大的DataFrame中 df_list = []for file in glob

在使用 python 批量处理 excel 时经常需要批量读取数据,常见的方式是结合glob模块,可以实现将当前文件夹下的所有csv批量读取,并且合并到一个大的DataFrame

df_list = []for file in glob.glob("*.csv"):    df_list.append(pd.read_excel(file))df = pd.concat(df_list)

但是这样要求读取的每一个csv文件格式、列名都是一样的。

如果想要将每一个csv独立的进行读取,可以使用 os 模块来循环遍历当前文件夹中的 CSV 文件,然后使用 pandas 的 read_csv 函数来读取每个文件

import osimport pandas as pddf_list = []for file in os.listdir():    if file.endswith(".csv"):        df_list.append(pd.read_csv(file))

现在,df_list 中的每个元素都是一个 DataFrame,但是这样依旧不够完美,调用的时候依旧需要手动从列表中提取。

那如何自动读取当前文件夹下全部CSV数据,并将每个CSV赋给不同的变量

可以使用Python中的globals() 函数,它返回一个字典,其中包含当前程序的所有全局变量,例如我们可以使用如下语法来为字典中的某个键赋值:

globals()[key] = value

所以,使用下面的代码可以实现自动读取当前文件夹下全部CSV数据,并将每个CSV赋给不同的变量

df_list = []for i, file in enumerate(os.listdir()):    if file.endswith(".csv"):        df_list.append(pd.read_csv(file))for i, df in enumerate(df_list):    globals()[f'df{i+1}'] = df

当然,类似的方法还可以应用于读取Excel的不同sheet,例如假设data.xlsx有10个sheet

df_list = [pd.read_excel("data.xlsx", sheet_name=i) for i in range(10)]for i, df in enumerate(df_list):    globals()[f"df{i+1}"] = df

如果你不清楚数据有多少Sheet,也可以使用 sheet_name=None,然后根据返回的字典自动读取

df_list = pd.read_excel("data.xlsx", sheet_name=None)for i, (name, df) in enumerate(df_list.items()):    globals()[f"df_{name}"] = df

以上就是利用 Python 读取多份 Excel 的小技巧

来源地址:https://blog.csdn.net/2301_78588786/article/details/131752035

--结束END--

本文标题: 如何用 Python 批量循环读取 Excel ?

本文链接: https://lsjlt.com/news/396541.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

猜你喜欢
  • 如何用 Python 批量循环读取 Excel ?
    在使用 Python 批量处理 Excel 时经常需要批量读取数据,常见的方式是结合glob模块,可以实现将当前文件夹下的所有csv批量读取,并且合并到一个大的DataFrame中 df_list = []for file in glob...
    99+
    2023-09-06
    python excel 开发语言
  • python如何循环读取文件
    在python中循环读取文件的方法:1.新建python项目;2.导入codecs模块;3.使用codecs.open方法打开文件;4.利用for循环获取文件内容;具体步骤如下:首先,打开python,并新建一个python项目;pytho...
    99+
    2024-04-02
  • R语言-如何循环读取excel并保存为RData
    之前写过一个循环读取excel的代码,最近又有了新的需求:循环读取xlsx文件中的多个sheet,处理完之后循环输出到xlsx文件中的多个sheet中,总结一下。 1、循环读取csv...
    99+
    2024-04-02
  • Python读取Excel数据实现批量生成PPT
    目录背景需求准备PPT数据PPT模板实战导入相关模块读取电影数据读取PPT模板插入数据背景 大家好,我是J哥。 我们常常面临着大量的重复性工作,通过人工方式处理往往耗时耗力易出错。而...
    99+
    2024-04-02
  • python如何读取环境变量
    在Python中,可以使用os.environ模块来读取环境变量。os.environ是一个字典对象,它包含当前系统的所有环境变量,...
    99+
    2024-02-29
    python
  • Python读取Excel数据实现批量生成合同
    目录一、背景二、准备三、实战1.安装相关库2.读取合同数据3.批量合同生成大家好,我是J哥。 在我们的工作中,面临着大量的重复性工作,通过人工方式处理往往耗时耗力易出错。而Pytho...
    99+
    2024-04-02
  • python如何批量读取一个文件夹里的所以excel文件
    绪论 在数据分析工作中,尝尝需要处理多个不同月的excel文件,但无奈与excel文件的局限性,不能同时处理多个月的excel数据,所以python的批量读取excel文件就显得十分重要,下面我将展示如何用python将每个月度的excel...
    99+
    2023-09-03
    excel python numpy pandas 数据分析
  • 怎么用Python读取Excel数据实现批量生成合同
    这篇文章主要介绍“怎么用Python读取Excel数据实现批量生成合同”,在日常操作中,相信很多人在怎么用Python读取Excel数据实现批量生成合同问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”怎么用Py...
    99+
    2023-06-30
  • python之批量读取文件
    python的os模块可以实现普遍的操作系统功能,并且和平台无关。以下为实现根目录下文件的批量读取。 os.listdir(dirname)可以列出dirname下的目录和文件,依次读取相应的文件即可。 # -*- coding...
    99+
    2023-01-31
    批量 文件 python
  • python--读取环境变量
    转载请注明出处:python–读取环境变量 python中经常会通过环境变量来进行参数传递和环境配置。 本章记录读取环境变量的方案 首先设置环境变量 $ export ENV_PORT=3333 $ echo $ENV_PORT...
    99+
    2023-01-31
    环境变量 python
  • Python如何读取Excel表内容
    用python读取excel表中的数据 假如说有如下一张存储了数据的excel表,其中x1-x6是特征,y_label是特征对应的类别标签。我们想要使用python对以下数据进行数据分析,那么第一步就...
    99+
    2023-09-02
    python 数据分析 数据挖掘
  • VBS如何批量读取文件夹内所有的文本到Excel
    这篇文章主要介绍VBS如何批量读取文件夹内所有的文本到Excel,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!代码如下:'This code is done by KangKang@ Option expli...
    99+
    2023-06-08
  • python如何使用xlrd模块读取excel
    这篇文章主要介绍了python如何使用xlrd模块读取excel,具有一定借鉴价值,感兴趣的朋友可以参考下,希望大家阅读完这篇文章之后大有收获,下面让小编带着大家一起了解一下。一、安装xlrd模块:mac下打开终端输入命令:pip ...
    99+
    2023-06-29
  • python 3.x 循环读取文件用户登
    1 import os # 导入python自带库的模块 2 import sys ...
    99+
    2023-01-31
    文件 用户 python
  • Python如何批量操作Excel文件
    小编给大家分享一下Python如何批量操作Excel文件,希望大家阅读完这篇文章之后都有所收获,下面让我们一起去探讨吧!批量操作OS模块介绍OS的全称是Operation System,指操作系统。在Python里面OS模块中主要提供了与操...
    99+
    2023-06-25
  • pandas读取Excel批量转换时间戳的实践
    目录一、安装二、 代码如下python将GPS时间戳批量转换为日期时间(年月日时分秒)一、安装 pip install pandas 如果出报错,不能运行,可以安装 pip ins...
    99+
    2023-02-28
    pandas Excel批量转换时间戳 pandas 转换时间戳
  • Python如何读取Excel表格数据
    环境: Pycharm IDE 3.9  2021.2.1 Excel作为目前主要的流行数据表格,其存储的数据整齐,强可观性。需要对大量的数据进行分析时,可以利用python脚本语言进行数据分析。 python读取excel数据: 打开py...
    99+
    2023-09-07
    excel
  • python如何实现读取excel表格
    本篇内容介绍了“python如何实现读取excel表格”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!一、python读取excel表格数据1...
    99+
    2023-07-02
  • 使用Python循环读取数据时内存不足如何解决
    使用Python循环读取数据时内存不足如何解决?针对这个问题,这篇文章详细介绍了相对应的分析和解答,希望可以帮助更多想解决这个问题的小伙伴找到更简单易行的方法。1.read()与readlines():随手搜索python读写文件的教程,很...
    99+
    2023-06-15
  • 使用python批量处理excel
    看看结果: ...
    99+
    2023-01-31
    批量 python excel
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作