网络爬虫与信息提取实例3：百度360搜索关键词提交

最新推荐文章于 2025-02-11 11:37:42 发布

原创最新推荐文章于 2025-02-11 11:37:42 发布 · 353 阅读

1 ·

CC 4.0 BY-SA版权

文章标签：

#python

python爬虫学习专栏收录该内容

7 篇文章

订阅专栏

本文介绍了如何使用Python进行网络爬虫，通过示例展示了如何向百度和360搜索引擎提交关键词搜索请求。分别利用params参数发送请求，获取搜索结果。

百度的关键词接口为：
http://www.baidu.com/s?wd=keyword
我们可以利用params来提交关键词，代码如下：

import requests
kv={'wd':'python'}
try:
    r=requests.get("http://www.baidu.com/s",params=kv)
    r.raise_for_status()
    print(r.request.url)
    r.encoding=r.apparent_encoding
    print(len(r.text))
except:
    print("爬取失败")

输出结果为：
百度关键词提交

360的关键词接口为：
http://www.so.com/s?q=keyword
我们可以用与上面相同的方法来提交关键词，代码如下：

import requests
kv={'q':'python'}
try:
    r=requests.get("http://www.so.com/s",params=kv)
    r.raise_for_status()
    print(r.request.url)
    r.encoding=r.apparent_encoding
    print(len(r.text))
except:
    print("爬取失败")