python爬虫的几个常用库

Fungiii

于 2019-07-10 17:36:36 发布

阅读量801

点赞数

CC 4.0 BY-SA版权

文章标签： python

本文链接：https://blog.youkuaiyun.com/For_wamp/article/details/95352770

博客提及了urllib的request模块和parse模块，还表示暂停爬虫学习。urllib模块在Python编程中常用于网络请求和解析，此次学习涉及相关内容，后续将暂停爬虫学习进程。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

urllib的request模块

#urllib的请求模块
import urllib.request    
#用请求模块打开百度网站，并返回给response
response = urllib.request.urlopen('http://www.baidu.com')   
#读取response，并以utf-8的编码形式
print(response.read().decode('utf-8'))

urllib的parse模块（PS：不懂）

import urllib.parse
import urllib.request

data = bytes(urllib.parse.urlencode({'word':'hello'}),encoding='utf8')
response = urllib.request.urlopen('http://httpbin.org/post', data=data)
print(response.read())

暂停爬虫学习