本文探讨了在处理大量文件时使用多线程反而降低效率的现象，并分析了背后的原因是单个硬盘只能响应一个IO请求。文章给出了三种解决方案：使用多个硬盘、升级为固态硬盘以及先将文件读入内存再进行多线程处理。
项目中，需要对30个文件进行读取并处理数据。
想到能不能通过多线程，每个线程处理一部分文件来提高程序效率，实测发现效率反而下降了。
通过查阅资料，发现单个硬盘只能响应一个io，cpu是多核单硬盘不是。
多线程切换时，硬盘去不同的地方读东西会增加耗时。
解决方法：
1、多个硬盘存取
2、换用固态硬盘提升硬盘本身的性能
3、将文件都读到内存，然后多线程处理数据
关于多线程io能否提高程序效率
扫一扫
评论
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
查看更多评论
添加红包
