百度搜索借口

最新推荐文章于 2024-12-07 16:17:31 发布

原创最新推荐文章于 2024-12-07 16:17:31 发布 · 408 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#python #爬虫

Python 专栏收录该内容

38 篇文章

订阅专栏

本文提供了一个使用Python进行百度搜索的简单爬虫示例代码。该爬虫通过输入搜索内容，构造URL并设置请求头来获取百度搜索结果页面的HTML内容。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

from urllib import request,parse

headers = {
    'User-Agent':'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/67.0.3396.79 Safari/537.36'
}

def baidu():
    while True:
        base_url = 'http://www.baidu.com/s?wd='
        search = input('请输入搜索内容：')
                if search == '\q':
            break
        else:
            qs = {
                'search':search
            }

            qs = parse.urlencode(qs)

            base_url = base_url + qs

            req = request.Request(base_url,headers=headers)

            response = request.urlopen(req)

            html = response.read().decode('utf-8')

            print(html)

baidu()