[练手]爬豆瓣电影名和导演名

最新推荐文章于 2024-12-31 00:10:09 发布

原创

最新推荐文章于 2024-12-31 00:10:09 发布 · 3.5k 阅读

1 ·

CC 4.0 BY-SA版权

因为直接看书有些抽象，所以参考了某位大佬源码，在他基础上改动了一些

爬豆瓣电影名和导演名

总览
index
output
download
parser
数据分析统计

总览

分为四个包实现
调度、下载、解析、写入
在这里插入图片描述

index

#!/usr/bin/python
# coding:utf-8

# 进度条
from time import sleep
from tqdm import tqdm

import download
import parser
import output

#程序入口
if __name__ == '__main__':
    output.main()

output

import csv
import download
import index
import parser_
import xlrd
import xlwt
from xlwt import Workbook
from time import sleep
from tqdm import tqdm


#写入
daoyan = parser_.daoyan 

def main():
    print('已找到作品名(250/250)')
    print('已找到导演名(25/250)')
    print('=======================================')
    print('                                       ')
    print('          正在写入csv文件，请稍后        ')
    print('                                       ')
    print('==========