python爬虫抓取某平台的文章标题，进行词频统计并生成词云

最新推荐文章于 2024-07-12 11:35:49 发布

写python的鑫哥

最新推荐文章于 2024-07-12 11:35:49 发布

阅读量973

点赞数

分类专栏：爬虫实战进阶文章标签：爬虫 python 词云

本文链接：https://blog.youkuaiyun.com/Leexin_love_Ling/article/details/118768164

版权

爬虫实战进阶专栏收录该内容

80 篇文章 ¥69.90 ¥99.00

订阅专栏

本文介绍如何使用Python爬虫抓取某平台的文章标题，通过词频统计分析后，生成词云图。运行代码后，将自动生成包含词云的aa.html文件。若对内容感兴趣，欢迎点赞关注。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

假设现在有个爬虫需求，抓取某平台的历史文章标题，对标题的文字进行词频统计分析，并最终生成词云图。

平台如下:

代码如下:

import requests
from lxml import etree
import re
import json
from pyecharts import options as opts
from pyecharts.charts import WordCloud


# 发送请求
def demo(url):
    # 添加请求头
    headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) \
                Chrome/91.0.4472.124 Safari/537.36'}
    response = requests.get(url, headers=headers).text
    # print(response)
    html

了解本专栏