python 爬取网站的博客目录

第一步，安装 requests-html

• 升级 pip

pip install --upgrade pip

• 升级 urllib3

sudo python3 -m pip install   urllib3   --upgrade

• 安装 requests-html

 sudo python3 -m pip install requests-html

第 1.1 步，给项目，安装 requests-html

• 修改 setup.py 文件,

添加

install_requires=[
          'requests-html',
      ],

• 修改 launch.json
  添加

 "pythonPath": "/usr/bin/python3"

• 命令行，安装

sudo python3 -m   setup install

• python 文件中，使用

from requests_html import HTMLSession

第 2 步，继续使用 youtube - dl

• 新建一个信息提取类

 class XxxIE(InfoExtractor):