给你156个爬虫资源,你还怕入不了门?不存在的,大兄弟!
异步treq - 基于twisted、与requests类似的APIaiohttp - asyncio的HTTP客户端/服务器 (PEP-3156)
网络爬虫框架
全能型爬虫grab - 网络爬虫框架(基于pycurl/multicurl)scrapy - 网络爬虫框架(基于twisted)pyspider - 一个强力的爬虫系统cola - 一个分布式爬虫框架
其他portia...
转载
2018-12-19 15:08:28 ·
2683 阅读 ·
0 评论