关于使用数据导出为excel的时间问题

最新推荐文章于 2023-02-07 20:32:16 发布
最新推荐文章于 2023-02-07 20:32:16 发布
阅读量1k 收藏
点赞数
分类专栏： 数据库 python 文章标签： openpyxl
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/zhiranyouni/article/details/89456471
版权

在公司的业务操作上，很多时候需要查看后台数据，而查看后台数据经常使用excel进行导出，以及进行后续的操作，有时候数据量很大，导致导出数据很慢，因此进行了一些原因查找，一次判断时间消耗在了那里。

如图可知，文件大小约5M，执行时间将近44s。

在这里插入图片描述
在这里插入图片描述

以下是执行结果

在这里插入图片描述

分析发现

时间大头还是消耗在数据写入openpyxl的workbook中的时间以及将数据保存的内存中。

具体怎么解决，暂时还不知道

POI-Excel表格生成速度优化
weixiang2039的博客
03-19 1924
从实际上看，笔者之前的项目用的Excel表格工具类，是一个单线程的工具类，执行效率比较慢。 在生成Sheet，1W行数据时，花费大概在10秒左右，多Sheet数据量叠加，时间开销也会线性叠加。 笔者项目用的框架是阿帕奇开源的POI，本篇文章的主体聚焦于优化的思路，如POI的使用、线程池细节、并发工具类的使用等，不在讨论范围。 在生产环境，通过以下优化之后，生成Excel的速度能快上好几倍(产品赶紧给我加鸡腿)。 分Sheet优化 Excel表格中，不同的sheet应该没有什么关联关系，起码对于笔者的
js实现数据导出为EXCEL（支持大量数据导出）
01-19
数据导出为excel是前端比较常用的功能。笔者近期在网上收集汇总了几种常用的方法，供大家使用。 1、ActiveXObject(“Excel.Application”) 这种方法只能在IE下使用。 优点：参照VBA控制excel对象。（代码不会的可以...
python多线程生成excel一些感悟吧...
xdn541的博客
11-03 2148
最近，做了很多个报表，一开始并没有考虑到效率的问题，只是实现了excel的导出，后来慢慢做出现好多问题。 1、每一个excel 的sheet很多，大概四五十个，跑完一个excel得花四十多分钟，甚至一个小时。。。有时候甚至线程直接卡死了不动了。可能是io的交互太长了，也不知道撒原因。 2、每一类型的excel至少也得需要出30多个吧，考虑到进程池用多进程去跑，但是发现多进程消耗太大，机器也就4核的...
导出Excel数据量大时间过慢问题
Ellis_li 的博客
10-23 1万+
导出Excel数据量大时间过慢问题 最近在工作中遇到一个问题，就是一个普通的导出Excel功能，响应时间居然需要一分多钟，导出的数据量为 10W-15W条 问题发现： 导出Excel无非就三个步骤 1: 查询数据 2: 数据处理 3: 导出数据 通过打日志的方式,发现查询和导出占用的时间很短,大量的时间都用来处理数据了。 查看代码发现，数据处理部分用的for循环处理，那就意味着需要遍历10W+遍，所以这个地方肯定是不可以这么写的 解决思路: 1: 结果集判断,如果结果集数据量较大,则将结果集进行分组 2:
导出Excel导出的时间有时分秒的问题和Ecexl表列宽度的调整
JAVA_YLL的博客
02-07 1071
解决Excel问题
关于Java使用EasyExcel导出动态数据为Excel文件SpringBoot代码项目示例
02-15
或者写入到多个Sheet页，或者设置列宽、行高，或者合并单元格，或者自动列宽，或者插入批注，或者读取Excel数据，又或者日期、数字或者自定义格式转换等等的需求时，可以参考本资源里面的《导出Excel教程.docx》里面...
浅谈mysql导出表数据到excel关于datetime的格式问题
09-08
当我们需要将MySQL中的数据导出到Excel进行进一步的数据分析或报告时，可能会遇到一些格式上的问题，特别是涉及到日期时间（datetime）类型的数据。本文将探讨如何处理这种MySQL导出到Excel时datetime格式的变化。 ...
java web开发中大量数据导出Excel超时(504)问题解决
08-30
在Java Web开发中，当需要将大量数据导出到...总之，解决Java Web开发中大量数据导出Excel超时问题，关键在于优化数据处理和传输方式，同时关注服务器配置和资源管理。通过上述策略，可以显著提高性能并降低超时风险。
java解析Excel文件并把数据存入数据库和导出数据为excel文件SpringBoot代码示例
05-08
2、java读取数据库数据，并导出为excel文件。 3、README.md中有详细的操作步骤示例。 使用说明： 1. 先使用postman导入：other/excel相关.postman_collection.json 2. 导入sql到数据库：other/excel.sql 3. idea导入...
关于导出Excel文件时间的处理遭遇
一颗洛米
12-07 1785
项目中需要导出excel，导出命名中包含了 “2018/12/4” 这样的时间格式。 在代码中坐了如下处理 Date date = new Date(); SimpleDateFormat sdf = new SimpleDateFormat("yyyy/MM/dd"); 但是实际导出之后的格式变成了 “2018_12_4”这个样子 跟踪了源码也没有找到原...
linux date 2007-01-01,Excel日期格式问题（00/01/1990）(Excel date format issue (00/01/1990))
weixin_34746495的博客
05-26 243
Excel日期格式问题(00/01/1990)(Excel date format issue (00/01/1990))我只是试图将0(实际上是日期格式= 00/01/201)替换为NA所以我录制了宏。 我在不同的文件中检查了该宏，但它无法正常工作。 如果我为每个单元格单击F2 ，那么我尝试重新运行宏，然后它正常工作。 任何其他跳过的方法按每个范围按F2 (有数千个范围)..例如，如果A1，B1...
EasyExcel第一次导出文件耗时长的问题
zzz_zjz的博客
09-08 5357
在使用Easyexcel进行excel文件导出时，程序启动后的第一次执行导出时耗时非常久，排查后发现是程序默认加载了全部字体。
解决导出excel表格时间慢的问题
arivn_jianming的博客
02-18 6518
在最近使用POI对excel操作过程中，发现当excel表格数据超过1000多行时会使网页导不出数据、时间过慢的问题。找了很多资料，发现将excel导出类型从2007(.xlsx)换成2003(.xls)后变快了很多，不知道什么原因 ... 既xssfsheet改成sheet，xssfworkbook改成workbook，xssfcell改成cell，之后提高了速度和导出数据。
mongodb进行整库备份与恢复,以及对单表的备份恢复,单表支持json格式和csv(excel)格式
奔跑的菜鸡
01-17 1183
如果是docker部署的mongo先docker exec -it mongo bash登录mongo容器，然后在bin文件夹下，运行指令 mongodump -h 127.0.0.1:27017 -d xwms -u XXX -p XXX -c "interface_log_body" -q '{"expireAt":{$gte:ISODate("2020-02-16T00:00:00.000Z...
关于excel导出日期格式变化问题处理
热门推荐
qq_24347541的博客
03-13 6万+
关于excel导出日期格式变化问题处理 1.问题描述：java web项目，本来部署在windows下，导出数据库数据是，创建日期格式为2018-08-08 08:08:08。因服务器性能问题，迁移服务器至linux（centos 7.5）。现成操作人员导出后发现时间格式为：。 2.查找原因： 发现代码中导出用的GBK。 发现服务器为英文版的centos 7.4 解决办法： 修改英文版为中文版...
C#使用NOPI实现DataGridView数据导出为Excel教程
在当前的IT行业，将WinForm应用程序中的DataGridView数据导出到Excel是一种常见的数据处理需求。这可以通过使用开源的NPOI库来实现。NPOI是.NET环境下的一个库，它提供了操作Microsoft Office文档的API接口，包括...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值