爬取疫情等关键词的新浪新闻，存到excel

最新推荐文章于 2025-03-03 18:46:31 发布

司薇

最新推荐文章于 2025-03-03 18:46:31 发布

阅读量948

点赞数 1

文章标签： python 爬虫

本文链接：https://blog.youkuaiyun.com/qq_46513570/article/details/124446291

版权

该博客分享了使用Python爬虫技术，针对特定关键词如‘疫情’，从新浪新闻网站抓取相关新闻，并进一步深入爬取每个新闻的内容，最终将所有数据存储到Excel文件"data.xlsx"中的过程。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

直接代码：

import requests
import json
import xlwt
from bs4 import BeautifulSoup
def getData(page, news):
    headers = { "Host": "interface.sina.cn", "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:74.0) Gecko/20100101 Firefox/74.0", "Accept": "*/*", "Accept-Language": "zh-CN,zh;q=0.8,zh-TW;q=0.7,zh-HK;q=0.5,en-US;q=0.3,en;q=0.2", "Accept-Encoding": "gzip, deflate, br", "Connection": "keep-alive", "Referer": r"http://www.sina.com.cn/mid/search.shtml?range=all&c=news&q=%E6%97%85%E6%B8%B8&from=home&ie=utf-8", "Cookie": "ustat=__172.16.93.31_1580710312_0.68442000; genTime=1580710312; vt=99; Apache=9855012519393.69.1585552043971; SINAGLOBAL=9855012519393.69.1585552043971; ULV=1585552043972:1:1:1:9855012519393.69.1585552043971:;