python中使用多进程和单进程分别拷贝大量文件效率对比

system_is_error

于 2017-10-10 22:12:38 发布

阅读量3.1k

点赞数

CC 4.0 BY-SA版权

文章标签： python 进程池多进程单进程效率对比

本文链接：https://blog.youkuaiyun.com/longdreams/article/details/78198283

本文探讨了在Python中使用多进程Pool和单进程拷贝大量文件的效率差异。实验结果显示，多进程拷贝200个文件耗时25.05s，而单进程耗时99.66s，表明多进程拷贝效率约为单进程的4倍。实际效率倍数受硬件、文件数量等因素影响。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

此贴用于研究多进程和单进程拷贝大量文件的效率问题

首先建立test文件夹，然后使用下列代码批量创建200个py文件

#创建２００个文件
i = 0
while i < 200:
    o = open("test/"+str(i)+".py","w")
    content = str(i);
    o.write(content)
    o.close()
    i += 1

一：使用进程池Pool拷贝文件
下列代码中将创建5个进程用于拷贝文件

from multiprocessing import Pool,Manager
import time
import os
import

200万优质内容无限畅学