利用 Python 爬虫按关键字搜索淘宝商品

最新推荐文章于 2025-04-18 16:46:03 发布

原创最新推荐文章于 2025-04-18 16:46:03 发布 · 1.4k 阅读

18 ·

CC 4.0 BY-SA版权

文章标签：

#python #爬虫 #开发语言

在电商领域，通过关键字搜索商品是常见的需求。淘宝作为国内知名的电商平台，提供了丰富的商品搜索功能。本文将详细介绍如何使用 Python 爬虫技术按关键字搜索淘宝商品，并获取搜索结果的详细信息。

一、准备工作

1. 注册淘宝开放平台账号

要使用淘宝商品搜索 API，首先需要在淘宝开放平台（淘宝开放平台）注册账号，并创建应用以获取 App Key 和 App Secret。这些是调用 API 所必需的凭证。

2. 安装必要的 Python 库

确保你的 Python 环境中已经安装了以下库：

requests：用于发送 HTTP 请求。
json：用于处理 JSON 数据。

如果尚未安装这些库，可以通过以下命令进行安装：

bash

pip install requests

二、代码实现

以下是一个完整的 Python 示例代码，展示如何按关键字搜索淘宝商品，并处理返回的数据。

1. 发送 HTTP 请求

使用 requests 库发送请求，并获取 API 返回的数据。

Python

import requests
import hashlib
import time

def generate_signature(app_key, app_secret, timestamp, params):
    # 生成签名
    sign_str = app_key + timestamp + app_secret
    for key in sorted(params.keys()):
        sign_str += str(params[key])
    return hashlib.md5(sign_str.encode('utf-8')).hexdigest()

def search_taobao_products(app_key, app_secret, keyword, page=1):
    timestamp = str(int(time.time() * 1000))
    params = {
        'method': 'taobao.item.search',
        'app_key': app_key,
        'timestamp': timestamp,
        'v': '2.0',
        'sign_method': 'md5',
        'format': 'json',
        'q': keyword,
        'page_size': 40,
        'page_no': page,
    }
    params['sign'] = generate_signature(app_key, app_secret, timestamp, params)

    response = requests.get('https://gw.api.taobao.com/router.json', params=params)
    if response.status_code == 200:
        return response.json()
    else:
        print(f"请求失败，状态码：{response.status_code}")
        return None

2. 解析返回的 JSON 数据

解析 API 返回的 JSON 数据，并提取商品的详细信息。

Python

def parse_response(data):
    if data['code'] == '0':
        items = data['taobao_item_search_response']['item']
        for item in items:
            print(f"商品标题: {item['title']}")
            print(f"商品价格: {item['price']}")
            print(f"商品图片: {item['pic_url']}")
            print(f"商品详情页 URL: {item['detail_url']}")
    else:
        print(f"API 请求失败，错误信息: {data['error_response']['sub_msg']}")

3. 主程序

在主程序中调用上述函数，按关键字搜索商品并展示搜索结果。

Python

if __name__ == '__main__':
    app_key = 'your_app_key'  # 替换为你的 App Key
    app_secret = 'your_app_secret'  # 替换为你的 App Secret
    keyword = 'iPhone 13'  # 设置搜索关键字
    page = 1  # 设置搜索结果的页码

    response_data = search_taobao_products(app_key, app_secret, keyword, page)
    if response_data:
        parse_response(response_data)

三、API 返回值说明

淘宝商品搜索 API 的返回值是一个 JSON 对象，其结构如下：

返回值示例

JSON

{
    "code": "0",
    "taobao_item_search_response": {
        "item": [
            {
                "title": "商品标题",
                "price": "120.00",
                "pic_url": "https://example.com/image.jpg",
                "detail_url": "https://item.taobao.com/1234567890.html"
            }
        ]
    },
    "error_response": {
        "code": "0",
        "msg": "success",
        "sub_code": "0",
        "sub_msg": "success"
    }
}

返回值字段说明

code：返回的状态码，表示请求的结果。0 表示成功，其他值表示失败。
errorMessage：错误信息，描述了返回状态码对应的错误原因。
taobao_item_search_response：商品搜索结果的响应数据。
- item：商品列表，包含多个商品的详细信息。
  - title：商品标题。
  - price：商品当前价格。
  - pic_url：商品图片的 URL。
  - detail_url：商品详情页的 URL。