Python爬虫（三）：爬取猫眼电影网经典电影TOP100信息并存入本地Markdown文件（下）

Leo-Woo

于 2017-11-26 16:53:39 发布

阅读量1.5k

点赞数

CC 4.0 BY-SA版权

分类专栏： Python 爬虫文章标签： python 爬虫 markdown

本文链接：https://blog.youkuaiyun.com/IMW_MG/article/details/78638140

本文介绍了如何使用Python爬虫抓取猫眼电影网站上的经典电影TOP100信息，并将数据保存到本地Markdown文件中，以实现数据的可视化和方便阅读。通过GitHub分享了完整的爬虫代码，并展示了运行效果。

运行环境：Python3.6.2、Pycharm2017.2
附此爬虫代码GitHub地址：https://github.com/IMWoolei/MaoYanMovies

==>【效果链接】

上一篇博客【链接】

正文

Markdown作为一个易上手的标记书写语言，能够提供高效清晰的书写板是，一直是我很喜欢的书写工具。
Python的第三方库中提供了Markdown模块，用于Markdown的书写，以及提供转html等功能。
实际上Markdown是一个纯文本的标记语言，其文件的拓展名为*.md，我们甚至可以直接使用记事本书写。上一篇博客中我们得到了经典TOP100的电影信息，我们将其信息写入到Markdown文件中，使其更好的可视化。因为没有将其转为html文件，所以在这次代码中就没有使用到markdown模块，而是直接将其写入拓展名为*.md的文本文件中。

完整代码

import requests
import re
import json

headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/62.0.3202.94 Safari/537.36',