利用selenium爬取淘宝商品信息

最新推荐文章于 2025-06-23 17:45:42 发布

baidu_252253

最新推荐文章于 2025-06-23 17:45:42 发布

阅读量2.6k

点赞数

CC 4.0 BY-SA版权

分类专栏： Selenium

本文链接：https://blog.youkuaiyun.com/baidu_32542573/article/details/79545393

# coding: utf-8
from selenium import webdriver
import time
# 1.创建浏览器对象
driver = webdriver.Firefox()
# 2.打开淘宝首页
driver.get('http://www.taobao.com')
# 3.找到搜索输入框
search_ele = driver.find_element_by_id('q')
# 4.输入搜索关键词
search_ele.send_keys(u'笔记本电脑')
# 5.找到搜索按钮
search_btn = driver.find_element_by_class_name('btn-search')
# 6.点击按钮
search_btn.click()
# 打开文件
file_handle = open('shops.txt','w')
for i in range(1, 11):
    print '正在爬取第%s页数据.......'%i
    # 让浏览器滚动，加载数据
    for x in range(1,11,2):
        # 暂停1秒再开始滚动
        time.sleep(0.5)
        j = x/10.0
        # %f float小数类型的占位符
        js = 'document.documentElement.scrollTop = document.documentElement.scrollHeight * %f'%j