python 进程

又又土

已于 2024-01-24 10:51:40 修改

阅读量756

点赞数 6

分类专栏： python多线程多任务文章标签： python 开发语言

于 2024-01-23 17:09:47 首次发布

本文链接：https://blog.youkuaiyun.com/chenyuan1111/article/details/135775357

版权

本文介绍了如何使用Python编写一个基本的爬虫程序，抓取cnblogs.com页面，并通过单进程和多进程的方式执行爬虫任务，展示了多线程在提高效率方面的优势。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

1创建一个爬虫程序

import requests
urls = [
    'https://www.cnblogs.com/#p{page}'
    for page in range(1, 50+1)
]

def craw(url):
    r = requests.get(url)
    print(url, len(r.

最低0.47元/天解锁文章