使用python抓取美团商家信息

dawndd1345

于 2017-06-25 18:52:39 发布

阅读量6.2k

点赞数 2

CC 4.0 BY-SA版权

分类专栏： python 文章标签： python

本文链接：https://blog.youkuaiyun.com/Loweir/article/details/73724716

本文介绍如何利用Python进行网络爬虫，详细阐述了抓取美团网站上商家信息的过程，包括数据获取、解析及存储等关键步骤。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

抓取美团商家信息

import requests
from bs4 import BeautifulSoup
import json

url = 'http://bj.meituan.com/'
url_shop = 'http://bj.meituan.com/shop/{}'
headers = {
    'Accept':'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,*/*;q=0.8',
    'Accept-Encoding':'gzip, deflate, sdch',
    'Accept-Language':'zh-CN,zh;q=0.8',
    'Cache-Control':'max-age=0',
    'DNT':'1',