python网络爬虫五个小实例

最新推荐文章于 2025-07-11 11:43:43 发布

WangGangdan

最新推荐文章于 2025-07-11 11:43:43 发布

阅读量2.5w

点赞数 17

CC 4.0 BY-SA版权

分类专栏：学习笔记 python 网络爬虫文章标签：网络爬虫 python

本文链接：https://blog.youkuaiyun.com/qq_41589031/article/details/81120421

实例一

爬取京东商品信息

import requests
url="https://item.jd.com/6946605.html"
try:
    r=requests.get(url)
    r.raise_for_status()
    r.encoding=r.apparent_encoding
    print(r.text[:1000])
except:
    print("爬取失败")

实例二

爬取亚马逊商品信息

import requests
url="https://www.amazon.cn/gp/product/B07D51Y714"
try:
    kv={'user-agent':'Mozailla/5.0'}
    r=requests.get(url,headers=kv)
    r.raise_for_status()
    r.encoding=r.apparent_encoding
    print(r.text[1000:2000])
except:
    print("爬取失败")

实例三

百度搜索

import requests
keyword="Python"
try:
    kv={'wd':keyword}
    r=requests.get("http://www.baidu.com/s",params=kv)
    print(r.request.url)
    r.raise_for_status()
    print(len(r,text))
except:
    print("爬取失败")