Python爬虫百度360信息搜索并爬取

最新推荐文章于 2024-09-14 00:16:27 发布

cycy小陈

最新推荐文章于 2024-09-14 00:16:27 发布

阅读量2k

点赞数

分类专栏： # Python网络爬虫与信息提取

本文链接：https://blog.youkuaiyun.com/qq_40390825/article/details/82630364

版权

Python网络爬虫与信息提取专栏收录该内容

16 篇文章

订阅专栏

对百度输入要搜索的信息，并怕去返回的网页信息

import requests
keyword = "Python"
try:
    kv = {'wd': keyword}
    r = requests.get('https://www.baidu.com/s', params=kv)
    print(r.request.url)
    r.raise_for_status()
    r.encoding = r.apparent_encoding
    print(len(r.text))
    
except:
    print("爬去失败")

输出：

https://www.baidu.com/s?wd=Python
227
>>>

360搜索：

import requests
keyword = "Python"
try:
    kv = {'q': keyword}
    r = requests.get('https://www.so.com/s', params=kv)
    print(r.request.url)
    r.raise_for_status()
    r.encoding = r.apparent_encoding
    print(len(r.text))
    
except:
    print("爬去失败")