Python爬虫v1-API接口数据获取&处理&保存到excel

最新推荐文章于 2025-01-07 15:49:08 发布

Backup and share

最新推荐文章于 2025-01-07 15:49:08 发布

阅读量1.1k

点赞数

分类专栏：数据分析基础 Python数据分析文章标签： python json excel 爬虫

本文链接：https://blog.youkuaiyun.com/ISIS7Protessional/article/details/115383698

版权

本文介绍了使用Python进行API接口数据抓取，详细解析了如何处理JSON格式的数据，并展示了将抓取到的数据保存到Excel文件的具体步骤。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

curl查看：

curl http://www.kuaidi100.com/query?type=yuantong&postid=11111111111

#!/usr/bin/python
# -*- coding: utf-8 -*-

from bs4 import BeautifulSoup
from urllib.request import Request,urlopen
from urllib.parse import quote
import json
import openpyxl

def get_data(search_url):
    requests = Request(search_url)
    # requests.add_header('Cookie',cookie)
    response = urlopen(requests)
    html = BeautifulSoup(response, 'html.parser', from_encoding='utf-8')
    # print(html)
    return html

def handle_data(html):
    # get all text from html
    rawdata = html.get_text()
    print(rawdata)
    json1 = json.loads(rawdata)
    print(json1)
    json2 = json1['data']
    print(json2