CCH²¹的博客

需求描述  打开东方财富网的中国国内数据总值数据页，进入如下页面。  现在需要把页面上的国内生产总值数据表爬取下来，写入CSV文件以持久化存储。在这之后，将CSV文件内的数据做成折线图，实现数据可视化。  在爬取数据的过程中需要注意：数据表在该网页中分3页显示，我们需要在Python程序中实现换页的操作。需求分析  任意选取数据表中的一行，单击鼠标右键检查元素（这里我使用的是Firef...

需求描述  打开天气网，点击上方城市名称，再点击“15天天气”，进入如下页面。这里以天津为例。  可以看到，这里是有未来15天的天气和气温状况的。我们要做的就是把每天的最高和最低气温爬取下来，并做成折线图的形式。需求分析  任意选取一天的气温，单击鼠标右键检查元素（这里我使用的是Firefox浏览器，不同浏览器可能略有不同）进入查看器。我们得到了下图所示的HTML结构。  可以看出...

学习资源：中国大学MOOC Python网络爬虫与信息提取 北京理工大学计算机学院 嵩天信息标记的三种形式  在学习信息标记的三种形式之前，我们有必要了解一下信息标记的作用。  1.标记后的信息可形成信息组织结构，增加了信息维度。  2.标记的结构与信息一样具有重要价值。  3.标记后的信息可用于通信、存储或展示。  4.标记后的信息更利于程序理解和运用。  信息标记的三种形式分别...

学习资源：中国大学MOOC Python网络爬虫与信息提取 北京理工大学计算机学院 嵩天安装BeautifulSoup模块  和requests模块一样，如果使用Anaconda 3的话，是自带BeautifulSoup模块的。如果没有BeautifulSoup模块的话，只需要以管理员身份打开cmd，输入命令pip install beautifulsoup4即可安装。BeautifulS...

学习资源：中国大学MOOC Python网络爬虫与信息提取 北京理工大学计算机学院 嵩天安装requests模块  我使用的是Anaconda 3，其中自带了requests模块供我们使用。如果没有requests模块的话，只需要以管理员身份打开cmd，输入命令pip install requests即可。requests模块的7个主要方法方法说明requests.r...