【Python爬虫】爬取京东手机名字和价格(搜索的第一页)，存入Excel表

最新推荐文章于 2020-12-07 12:32:22 发布

chibuqikendeji

最新推荐文章于 2020-12-07 12:32:22 发布

阅读量2.4k

点赞数 3

CC 4.0 BY-SA版权

分类专栏： python简单爬虫 Python基础文章标签： Pyhton入门到放弃爬虫

本文链接：https://blog.youkuaiyun.com/chibuqikendeji/article/details/81273528

本文介绍使用Python爬虫抓取京东手机搜索结果第一页的商品名称和价格，并将数据保存到Excel表格中。目前仅实现第一页的爬取，后续将学习如何抓取更多页面及实现首页搜索功能。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

在爬取了网易云歌单之后，在网上找各种爬虫实战，然后就觉得这个简单一点，然后就开始了我的懵逼之路。这个代码只是爬取搜索出来的信息的第一页，后续会学习爬取下一页，还有添加京东首页搜索能力，现在就先写着第一页，大佬看一下：

import requests
import re
from bs4 import BeautifulSoup
from selenium import webdriver
from openpyxl import workbook
import time

#创建wb对象，用于将信息存入Excel表
wb = workbook.Workbook()
ws = wb.active

#先存入第一行
ws.append(['商品名称','商品价格'])

#使用selenium模块，模拟浏览器访问网页，获取所有的源代码
url = 'https://search.jd.com/Search?keyword=%E6%89%8B%E6%9C%BA&enc=utf-8&wq=%E6%89%8B%E6%9C%BA&pvid=d6c4c2602be049be8b4fe6129f72f6ef'
chromedriver = "/home/l1/PycharmProjects/untitled/spider练习/chromedriver"
driver = webdriver.Chrome(chromedriver)
driver.implicitly_wait(3)
driver.get(url)

#模拟鼠标下拉到底部
for i in range(1,5):
    driver.execute_script("window.scrollTo(0, document.body.scrollHeight)")
    time.sleep(1)

#接受获取到的内容
soup = BeautifulSoup(driver.page_source,'lxml')
goods_list = soup.select('.gl-item')

#对内容进行筛选
for goods in goods_list:
    title = goo