[python] Multiprocessing.Pool使用-多线程并发执行代码

需求

根据文件某一列的数据，多线程并发执行代码，返回结果写入文件中，提升执行效率

Multiprocessing模块

Multiprocessing.Pool可以提供指定数量的进程供用户调用
当有新的请求提交到pool中时，如果池还没有满，那么就会创建一个新的进程用来执行该请求；但如果池中的进程数已经达到规定最大值，那么该请求就会等待，直到池中有进程结束，才会创建新的进程来执行它。
流程图

Pool类用于需要执行的目标很多，而手动限制进程数量又太繁琐时，如果目标少且不用控制进程数量则可以用Process类。

class multiprocessing.pool.Pool([processes[, initializer[, initargs[, maxtasksperchild[, context]]]]])

传参说明
processes： 是要使用的工作进程数。
如果进程是None，那么使用返回的数字os.cpu_count()。
也就是说根据本地的cpu个数决定，processes小于等于本地的cpu个数；
initializer： 如果initializer是None，那么每一个工作进程在开始的时候会调用initializer(*initargs)。
maxtasksperchild：工作进程退出之前可以完成的任务数，完成后用一个新的工作进程来替代原进程，来让闲置的资源被释放。
maxtasksperchild默认是None，意味着只要Pool存在工作进程就会一直存活。
context: 用在制定工作进程启动时的上下文，
一般使用 multiprocessing.Pool() 或者一个contex