Python爬取京东双十一商品可视化价格曲线示例代码

最新推荐文章于 2023-11-27 19:24:50 发布

原创

最新推荐文章于 2023-11-27 19:24:50 发布 · 1k 阅读

2 ·

CC 4.0 BY-SA版权

文章标签：

#python #计算机网络 #经验分享 #开发语言 #计算机科技 #程序人生 #学习

本文介绍了如何使用Python抓取京东商品价格并存储到SQLite数据库，通过schedule模块设定定时任务，结合pyecharts绘制价格变化折线图，以揭示双十一期间价格波动，帮助避免购物陷阱。

文章目录

前言
抓取京东价格
总结
- - 关于Python技术储备

前言

一年一度的双十一已经结束了，不管是双十一之前还是双十一之后各种优惠券降价提示。玩过多次双十一活动的小编表示一顿操作猛如虎，一看结果2毛5。浪费时间不说而且未必得到真正的优惠，双十一电商的“明降暗升”已经是默认的潜规则了。打破这种规则很简单，可以用 Python 写一个定时监控商品价格的小工具。

思路第一步抓取商品的价格存入 Python 自带的 SQLite 数据库每天定时抓取商品价格使用 pyecharts 模块绘制价格折线图，让低价一目了然。
在这里插入图片描述

抓取京东价格

从商品详情的页面中打开 F12 控制面板，找到包含 p.3 的链接，在旁边的 preview 面板中可以看到当前商品价格
在这里插入图片描述
defget_jd_price(skuId):

sku_detail_url = 'http://item.jd.com/{}.html'
  sku_price_url = 'https://p.3.cn/prices/get?type=1&skuid=J_{}'

  r = requests.get(sku_detail_url.format(skuId)).content

  soup = BeautifulSoup(r, 'html.parser', from_encoding='utf-8')
  sku_name_div = soup.find('div', class_="sku-name")

  if not sku_name_div:
    print('您输入的商品ID有误！')
    return
  else:
    sku_name = sku_name_div.text.strip()

  r = requests.get(sku_price_url.format(skuId))
  price = json.loads(r.text)[0]['p']

  data = {
   
   
    'sku_id': skuId,
    'sku_name'