【爬虫】ip地址查询/亚马逊反爬虫/百度关键字搜索

最新推荐文章于 2024-05-21 20:55:00 发布

poptox

最新推荐文章于 2024-05-21 20:55:00 发布

阅读量778

点赞数

CC 4.0 BY-SA版权

分类专栏： python

本文链接：https://blog.youkuaiyun.com/qq_41514794/article/details/89716916

python 专栏收录该内容

4 篇文章

订阅专栏

本文演示了如何使用Python的Requests库从不同网站抓取数据，包括IP查询、商品页面信息及百度搜索结果，展示了设置请求头和参数的方法。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

import requests
url = "http://www.ip138.com/ips138.asp?ip="
ip = "202.204.80.112"
r = requests.get(url+ip)
r.encoding=r.apparent_encoding
print(r.text)




import requests
url = "http://www.amazon.cn/gp/product/B01M8L5Z3Y"
try:
    kv={'user-agent':'Mozilla/5.0'}
    r = requests.get(url,headers=kv)
    print(r.raise_for_status())
    r.encoding = r.apparent_encoding
    print(r.text)
except:
    print("Error!")



import requests
key = "python"
try:
    kv={'wd':key}
    r = requests.get("http://www.baidu.com/s",params=kv)
    print(r.raise_for_status())
    r.raise_for_status()
    print(len(r.text))
except:
    print("Error!")