python 爬虫大众点评美食排名

最新推荐文章于 2025-03-16 23:40:18 发布

learn_is_happy

最新推荐文章于 2025-03-16 23:40:18 发布

阅读量2.5k

点赞数

CC 4.0 BY-SA版权

文章标签：爬虫 python

本文链接：https://blog.youkuaiyun.com/learn_is_happy/article/details/78816536

本文通过Python爬虫技术，详细解析如何获取并分析大众点评上的美食排名数据，包括使用requests库发送HTTP请求，BeautifulSoup进行HTML解析，以及数据整理和存储的步骤。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

import requests
from bs4 import BeautifulSoup
import re

def getHTMLText(url):
    try:
        r = requests.get(url)
        r.raise_for_status()
        r.encoding = r.apparent_encoding
        return r.text
    except:
        return ""

def getStockList(lst, stockURL,city_lst,infodict):
    html = getHTMLText(stockURL)
    soup = BeautifulSoup(html,