热门标签 | HotTags
当前位置:  开发笔记 > 程序员 > 正文

pandas的to_excel,在几十万条数据(也可能上百万)的情况下太慢了该怎么解决?

有个需求是导出某个部门下的所有数据,以某个部门为例查询出来就有60+W条数据。目前是后端查询出来给pandas、pandas用to_excel方法生成excel,最后传文

有个需求是导出某个部门下的所有数据,以某个部门为例查询出来就有 60+W 条数据。
目前是后端查询出来给 pandas 、pandas 用 to_excel 方法生成 excel,最后传文件流给前端。
然后发现时间全耗在了 to_excel 这里,生成 40+M 大小的文件耗时 10 分钟左右。
有什么办法能优化到一两分钟以内吗

to_csv


推荐阅读
author-avatar
tina田小甜Shirley
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有