论坛求助与自行摸索相结合,基本解决python大文件解析效率问题。现将过程与结论存档,供有需要者参考。
=================前言====================
看着python很火,就跑到python怀抱蹭蹭,list,dict的普通化应用,让很多编程简便了很多。
感觉还不错,就开始着手写了个常用程序,磕磕碰碰的写完。却发现大型文件处理有严重的效率问题,只好到论坛找高手。
貌似python在csdn的论坛也不火,主要靠管理员wn0112 一直帮忙互相印证改进。折腾来折腾去,效率提升仍旧不是数量级层次。
就在快要放弃,准备用c写模块来实现基础解析功能的时候,看到网上一个用法,灵机一现,总算是解决了。
结果来之不易,多啰嗦几句,感慨感慨。各位看官休怪。
=================结论=======================
环境以下没注明的情况下,python采用python.org的3.6.1版本,机器AMD AthlonII x3 450- *, win10
在讨论过程中发现,几个简单结论,
- python的运行速度,受电脑软硬件的影响,差不多有1倍左右的差距。【