python 爬虫大众点评美食排名

最新推荐文章于 2025-10-19 08:41:21 发布

原创

最新推荐文章于 2025-10-19 08:41:21 发布 · 2.5k 阅读

10 ·

CC 4.0 BY-SA版权

文章标签：

#爬虫 #python

本文通过Python爬虫技术，详细解析如何获取并分析大众点评上的美食排名数据，包括使用requests库发送HTTP请求，BeautifulSoup进行HTML解析，以及数据整理和存储的步骤。

import requests
from bs4 import BeautifulSoup
import re

def getHTMLText(url):
    try:
        r = requests.get(url)
        r.raise_for_status()
        r.encoding = r.apparent_encoding
        return r.text
    except:
        return ""

def getStockList(lst, stockURL,city_lst,infodict):
    html = getHTMLText(stockURL)
    soup = BeautifulSoup(html,