学了2天的Python，自己写了个简单的爬虫，可是爬虫有什么用呢？

最新推荐文章于 2025-07-09 07:50:02 发布

原创

最新推荐文章于 2025-07-09 07:50:02 发布 · 1w 阅读

2 ·

CC 4.0 BY-SA版权

本文介绍了使用Python编写的简单爬虫，通过requests和BeautifulSoup库从新浪新闻API获取并解析新闻数据，包括新闻标题、正文、发布时间和来源。最终将数据导出到Excel文件。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

# -*- coding: UTF-8 -*-
import requests
import pandas
import   re
import json
from bs4 import BeautifulSoup
import  openpyxl





def parseLinkedNews(url):
    newsDetails = []
    res = requests.get(url)
    res.encoding = 'utf-8'
    jd = json.loads(res.text.lstrip('  newsloadercallback(').rstrip(');'))


    for  ent in jd['result'