python爬取携程景点信息，mysql插库(自己瞎测试的，如有问题请告知)

最新推荐文章于 2024-07-01 10:02:25 发布

原创

最新推荐文章于 2024-07-01 10:02:25 发布 · 1.2k 阅读

5 ·

CC 4.0 BY-SA版权

文章标签：

#python

本文介绍了使用Python爬虫从携程网站抓取北京景点信息，并将其存储到MySQL数据库的过程。详细步骤包括确定爬取地址、编写爬虫代码以及展示结果。参考链接提供了一个实现示例。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

1 爬地址

https://you.ctrip.com/sight/Beijing1.html

2.直接干代码

# -*- coding: gbk -*-
import urllib.request
import re
import pymysql
config = {
          'host':'127.0.0.1',
          'port':3306,#MySQL默认端口
          'user':'root',#mysql默认用户名
          'password':'root',
          'db':'test',#数据库
          'charset':'utf8',
          }
course={}
# 打开数据库连接
headers = ("User-Agent",
           "Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.26 Safari/537.36 Core/1.63.6726.400 QQBrowser/10.2.2265.400")
opener = urllib.request.build_opener()
opener.addheaders = [headers]
urllib.request.install_opener(opener)
for j in range(0, 336):
    # 主页URL
    baseUr