python爬取豆瓣电影top250并保存为xlsx_python抓取豆瓣电影Top250数据并写入Excel

该博客介绍了如何使用Python抓取豆瓣电影Top250的数据,包括电影标题、评分、上映日期等信息,并将这些数据存储到MySQL数据库,最后将数据导出为Excel文件。

douban

python抓取豆瓣电影Top250数据并写入Excel

1.将目标网站上的页面抓取下来

2.将抓取下来的数据根据一定的规则进行提取

create table `tb_movie`(

id int(11) primary key auto_increment,

title varchar(255),

score varchar(255),

date varchar(255),

region varchar(255),

category varchar(255),

directorAndActor varchar(255),

quote varchar(255),

thumbnail varchar(255)

)ENGINE=InnoDB DEFAULT CHARSET=utf8;

#!/usr/bin/env python

# -*- coding: utf-8 -*-

# @Author : nacker 648959@qq.com

# @Time : 2020/3/4 6:25 下午

# @Site :

# @File : douban.py

# @Software: PyCharm

# 1.将目标网站上的页面抓取下来

# 2.将抓取下来的数据根据一定的规则进行提取

import time

import requests

import xlwt

from lxml import etree

from MysqlHelper import MysqlHelper

headers = {

'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值