如何在Python中实现多线程和多进程？

最新推荐文章于 2025-12-25 14:57:52 发布
原创 最新推荐文章于 2025-12-25 14:57:52 发布 · 886 阅读 · 9 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#python #开发语言

本文介绍了如何在Python中使用threading模块实现多线程，以及multiprocessing模块实现多进程，讨论了它们的优缺点，特别提到了GIL对多线程性能的影响，并强调了根据任务特性和系统需求选择合适并发方案的重要性。

如何在Python中实现多线程和多进程？

在Python中，多线程和多进程是实现并发编程的两种主要方式。它们各自有其特点和适用场景。下面将分别介绍如何在Python中实现多线程和多进程，并探讨它们的优缺点。

一、多线程

Python的标准库提供了threading模块来实现多线程。下面是一个简单的多线程示例：

 

python复制代码
 

 
  
  
 
    
   import threading  
  
 
  
 
    
    
  
 
  
 
    
   def worker():  
  
 
  
 
    
   """线程执行的函数"""  
  
 
  
 
    
   print("Worker thread is running")  
  
 
  
 
    
    
  
 
  
 
    
   # 创建线程对象  
  
 
  
 
    
   t = threading.Thread(target=worker)  
  
 
  
 
    
    
  
 
  
 
    
   # 启动线程  
  
 
  
 
    
   t.start()  
  
 
  
 
    
  

 


                

        

    



  


        

            

                      
                        最低0.47元/天 解锁文章
                          
                      
            

        


    



                



	

		

			

				
					
python中socket+multiprocessing多进程

				
			

			

				

					One of them的博客
				

				

					08-23
					
					3923
					
				

			

		

		

			
				
sockect的multiprocessing多进程使用



# 多进程.
import socket
import multiprocessing


def func(cnn):
    while True:
        try:
            request = cnn.recv(1024)
            print(request)
            cn...

			
		

	



                

            
              



	

		

			

				
					
利用multiprocessing做进程间通信

				
			

			

				

					kbreath的专栏
				

				

					11-28
					
					1256
					
				

			

		

		

			
				
3.3 multiprocess 创建进程
         能批量产生进程。
         采用Process类创建进程。用于创建代码可控的进程，非脚本执行进程和系统命令进程。
3.3.1 建立两个子进程的Queue通信
         创建两个队列，分别作为两个进程的读写管道。
q1 = Queue()
q2 = Queue()

consoleP = Process(targ

			
		

	



              


  
              

                


	

		

			

				
					
Python实现多进程、多线程以及多协程任务

				
			

			

				

					qq_51350363的博客
				

				

					06-19
					
					3149
					
				

			

		

		

			
				
第三步：进程对象使用multiprocessing.Process();第四步：进程对象.start()正式创建进程。1.4 通过Quene实现多进程之间的通信。3.2 使用gevent实现协程多任务。3.1 使用gevent实现协程。第五步：主进程继续向下运行代码。1.1 多进程函数实现多任务。二、 python实现多线程。2.2 多线程函数实现多任务。三、 python实现多协程。一、python实现多进程。1.2 多进程类实现多任务。2.1 创建对象并传递参数。2.3 多线程类实现多任务。

			
		

	





	

		

			

				
					
Python 多任务 (多进程multiprocessing、多线程threading)

				
			

			

				

					NUDTer的博客
				

				

					08-06
					
					1447
					
				

			

		

		

			
				
但是实际上这个值是不确定的，可能是任意值。但是如果使用多进程来实现多任务是比较耗费资源的，因为进程是分配资源的最小单位，一旦创建一个进程就必须要向其分配一定的资源，就像跟两个人聊QQ就需要打开两个QQ软件一样，很明显这是比较浪费资源的。为了防止这种情况的发生，我们希望对共享的一些资源进行可控的管理，因此引入了线程的互斥（对某一临界资源（也就是希望被可控管理的共享资源）在某一时刻，只允许一个线程去进行获取、修改等所有与之相关的操作），并使用。在上面的输出中，出现的奇怪的换行，这是因为线程的执行顺序是无序的。

			
		

	



		

			
		



	

		

			

				
					
Python多进程与多线程的实现

				
			

			

				

					m0_73150539的博客
				

				

					08-31
					
					1382
					
				

			

		

		

			
				
我们写的程序大多是单个.py文件，在执行过程中，程序会顺着代码行执行，但是如果我们想要让一个.py文件同时干两件事情呢？这就需要使用多进程和多线程

先简单的概述一下进程和线程：

一个进程总是有多个线程（至少一个），但一个线程不能单独存在，必须在一个进程中。使用windows系统的小伙伴们可以用鼠标在任务栏上右键一下，然后单击‘任务管理器’，再点击‘性能’，就可以看到当前电脑所运行的进程数和线程数啦！那么就让我们先来看看多线程↓↓↓

打开cmd，使用pip安装threading模块




pip in

			
		

	





	

		

			

				
					
python 的多核利用

				
			

			

				

					yuanzhoulvpi的博客
				

				

					08-13
					
					4229
					
				

			

		

		

			
				
python 的多核利用

平时也就使用 python 的处理数据的几个包做数据处理，很少使用 python 的一些其他的功能，之前一直想搞懂 python 自带的多线程/多进程包，反复看了很多次，也不太会用。这次端午节在家又好好研究了一遍，不负有心人，终于可以用起来了：大概知道这个包怎么用，怎么按照我的想法用。我一直看的都是 python 的 multiprocessing 包。这次也是我的个人学习积累。

什么是 multiprocessing

python 的官方文档是这么说的：



mult..

			
		

	





	

		

			

				
					
关于socket收发信息与多线程，多进程问题总结

				
			

			

				

					lkxd194257的博客
				

				

					12-06
					
					732
					
				

			

		

		

			
				
关于socket收发信息与多线程，多进程问题总结

			
		

	





	

		

			

          精选资源
				
					
python爬虫之多线程、多进程爬虫

				
			

			

				

					02-24
				

			

		

		

			
				
多线程对爬虫的效率提高是非凡的，当我们使用python的多线程有几点是需要我们知道的：1.Python的多线程并不如java的...3.这点其实和多线程关系不大，scrapy的并发并不是采用多线程来实现，它是一个twisted应用，通过异

			
		

	





	

		

			

          精选资源
				
					
Python实现的多进程和多线程功能示例

				
			

			

				

					01-20
				

			

		

		

			
				
本文实例讲述了Python实现的多进程和多线程功能。分享给大家供大家参考，具体如下： 听了朋友说起，他们目前开发的测试框架，用python实现的分布式系统。虽然python的执行效率没有c和c++那么高，但是依靠集群的力量...

			
		

	





	

		

			

				
					
Python并发技术实现：多线程、多进程(实例爬虫代码)中文PDF合集版最新版本

				
			

			

				

					11-30
				

			

		

		

			
				
另外包含Python多线程、异步+多进程爬虫实现代码详解，需要的可下载试试！  多线程对爬虫的效率提高是非凡的，当我们使用python的多线程有几点是需要我们知道的：1、Python的多线程并不如java的多线程，其差异在于当...

			
		

	





	

		

			

          精选资源
				
					
Python中多线程与多进程的应用和技术详解

				
			

			

				

					10-15
				

			

		

		

			
				
适合人群：Python开发者尤其是有一定基础想要深化理解和应用多线程多进程的知识的人群。 使用场景及目标：适用于任何需要优化执行效率的情况，特别是涉及到I/O密集或CPU密集型工作的项目。学习如何根据不同业务特征...

			
		

	





	

		

			

				
					
Python 进程和线程-多线程

				
			

			

				

					分享编程知识与技巧 致力于技术交流与学习 找我合作私聊 
有偿解决计算机问题
				

				

					03-12
					
					687
					
				

			

		

		

			
				
多任务可以由多进程完成，也可以由一个进程内的多线程完成。我们前面提到了进程是由若干线程组成的，一个进程至少有一个线程。由于线程是操作系统直接支持的执行单元，因此，高级语言通常都内置多线程的支持，Python也不例外，并且，Python的线程是真正的Posix Thread，而不是模拟出来的线程。_thread和threading_thread是低级模块，threading是高级模块，对_thread进行了封装。绝大多数情况下，我们只需要使用threading这个高级模块。

			
		

	





	

		

			

				
					
python multiprocessing socket server example

				
			

			

				

					dai451954706的专栏
				

				

					06-16
					
					2105
					
				

			

		

		

			
				
client.py









import socket if __name__ == "__main__":    sock = socket.socket(socket.AF_INET, socket.SOCK_STREAM)    sock.connect(("localhost", 9000))    data = "some data"    sock.sen

			
		

	





	

		

			

				
					
python多进程关闭socket_python multiprocess不能完全关闭socket的验证

				
			

			

				

					weixin_39649965的博客
				

				

					12-03
					
					332
					
				

			

		

		

			
				
近日项目有原来的多线程升级成为多进程模型后，但出现了个问题，在持续运行一天左右系统处理能力开始变慢，并不时打印以下信息：too many opened files修改ulimit中open files为10240之后,运行时间稍微变长，但还是会出现该问题。使用iostat查看统计信息没发现异常，使用netstat 发现系统连接信息如下#netstat -n | awk '/^tcp/ {++S[$...

			
		

	





	

		

			

				
					
python 使用socket、multiprocessing、re模块，模拟简易HTTP服务器

				
			

			

				

					zxy987872674的博客
				

				

					09-09
					
					588
					
				

			

		

		

			
				
python 使用socket、multiprocessin、re模块，模拟简易HTTP服务器，我使用的多进程，也可以使用多线程！#coding=utf-8
# '''
# write by zxy987872674
# '''
#HTTP请求信息：
# GET /images/trolltech-logo.png HTTP/1.1
# Host: localhost:8080
# Connection

			
		

	





	

		

			

				
					
Python并发编程实例教程

				
			

			

				

					aijiagui7454的博客
				

				

					07-07
					
					224
					
				

			

		

		

			
				
有关Python中的并发编程实例,主要是对Threading模块的应用,文中自定义了一个Threading类库。
一、简介　　我们将一个正在运行的程序称为进程。每个进程都有它自己的系统状态，包含内存状态、打开文件列表、追踪指令执行情况的程序指针以及一个保存局部变量的调用栈。通常情况下，一个进程依照一个单序列控制流顺序执行，这个控制流被称为该进程的主线程。在任何给定的时刻，一个程序只做一...

			
		

	





	

		

			

				
					
通过EtherCAT报文中的LRW字段分析位置指令与位置反馈的方案

				
			

			

				

					ID349287114的博客
				

				

					12-23
					
					437
					
				

			

		

		

			
				
作为这篇博客的延申，在报文有时间戳的情况下，通过提取出来LRW字段中的Target Position 与 Actual Positon 数据，画成曲线，可以直观得分析出指令跟随情况。

			
		

	





	

		

			

				
					
判断ceph osd 节点磁盘异常

					
最新发布

				
			

			

				

					呼吸
				

				

					12-25
					
					208
					
				

			

		

		

			
				
refresh  是异步刷新，等待五分钟，再执行一次，没有刷新的磁盘是异常的。比如 ceph01 上的两个磁盘没有按时刷新。ceph-volume inventory 是用来获取当前节点所有可用磁盘清单的命令 ，会显示当前节点异常的磁盘。1 执行 ceph orch device ls --refresh。2 执行 ceph-volume inventory。

			
		

	





	

		

			

				
					
Python的人工智能-入门概念

				
			

			

				

					路漫漫其修远兮，吾将上下而求索
				

				

					12-24
					
					662
					
				

			

		

		

			
				
自计算机或机器发明以来，它们执行各种任务的能力呈指数级增长。人类在计算机系统多样化的工作领域、速度的提升以及随时间缩小的规模方面，已经发展出了计算机系统的力量。

计算机科学的一个分支——人工智能，致力于创造与人类一样智能的计算机或机器。

			
		

	





	

		

			

				
					
Python多线程与多进程的实现技巧

				
			

			

				

					
				

			

		

		

			
				
尽管如此，Python多线程在I/O密集型任务中仍然可以提高效率，因为I/O操作不会占用CPU资源，而GIL在这种情况下会释放。  在Python中实现多线程通常使用`threading`模块。`threading`模块提供了`Thread`类，可以通过...

			
		

	



              




          




        



    





    



      

      

        
      

      





	

		评论	
	

  
	




  

    

      添加红包
      
    

    

      

        
        

          
          
        

        
请填写红包祝福语或标题

      

      

        
        

          
          个
        

        
红包个数最小为10个

      

      

        
        

          
          元
        

        
红包金额最低5元

      

      

        
        

          当前余额3.43元
          前往充值 >
        

      

      

        

          需支付：10.00元
        

        
        
      

    

  





  

    
    
  

  

    
    
  








  

    

      

        

          

            
            
成就一亿技术人!

          

          

        

        

          

          

            领取后你会自动成为博主和红包主的粉丝
            规则
          

        

      

      

        

          

            
              
            
            

              
hope_wisdom
 发出的红包
            

          

        

        

          

          

          

        

      

    

    

  



      
      

      
实付元

      
使用余额支付

      

        

          

            
            点击重新获取
          

        

        
扫码支付

      

      

        
          
            
          
          
        
      

      

        
        钱包余额
          0
          

            
            

              

                
抵扣说明：

                
 1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
 2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

              

            

          

      

      余额充值