- 博客(6)
- 收藏
- 关注
原创 基于爬虫结果的数据展示网站搭建(二)
基于爬虫结果的数据展示网站搭建(二)——后端摘要项目要求registerlogin摘要本节将介绍网站的后端开发。项目要求基于第一个项目爬虫爬取的数据,完成数据展示网站。基本要求1.用户可注册登录网站,非注册用户不可登录查看数据2、用户注册、登录、查询等操作记入数据库中的日志3、爬虫数据查询结果列表支持分页和排序4、用Echarts或者D3实现3个以上的数据分析图表展示在网站中5、实现一个管理端界面,可以查看(查看用户的操作记录)和管理(停用启用)注册用户。扩展要求(非必须):1、实
2021-07-01 01:33:24
404
原创 基于爬虫结果的数据展示网站搭建(一)
基于爬虫结果的数据展示网站搭建(一)摘要项目要求网站主页设计登录界面注册界面爬虫结果检索界面图表展示Echarts简介实现管理界面摘要本节主要介绍网站的前端开发。项目要求基于第一个项目爬虫爬取的数据,完成数据展示网站。基本要求1.用户可注册登录网站,非注册用户不可登录查看数据2、用户注册、登录、查询等操作记入数据库中的日志3、爬虫数据查询结果列表支持分页和排序4、用Echarts或者D3实现3个以上的数据分析图表展示在网站中5、实现一个管理端界面,可以查看(查看用户的操作记录)和管理(
2021-07-01 01:33:08
1180
原创 新闻爬虫以及爬取结果查询网站搭建(四)
新闻爬虫以及爬取结果查询网站搭建(四)概要网页后端框架什么是Express:Express 框架核心特性:Express的使用:框架中目录结构app.jsbin/www 文件:routes/index.js 文件:实现查询功能和时间热度分析根据新闻标题进行搜索根据网站名进行搜索根据关键词进行搜索时间热度分析概要本节主要介绍:如何搭建网站后端实现查询功能和时间热度分析。网页后端框架本次网站后端使用了Express框架什么是Express:Express 是一个简洁而灵活的 node.j
2021-04-28 20:55:42
398
原创 新闻爬虫以及爬取结果查询网站搭建(三)
新闻爬虫以及爬取结果查询网站搭建(三)概要前端网页设计设计一设计二对查询结果进行分页显示最终网页效果如下:概要本节主要介绍如何进行爬虫结果展示网站搭建。有以下几部分:1、前端网页设计2、前端发送http post请求到后端3、express构建后端访问pgsql4、后端响应前端请求并在前端网页中用表格显示查询结果前端网页设计设计一首先构造简单的前端,代码如下:<!DOCTYPE html><html><body><title>新闻检
2021-04-27 19:33:57
373
原创 新闻爬虫以及爬取结果查询网站搭建(二)
新闻爬虫以及爬取结果查询网站搭建概要爬取网站中国新闻网新的改变功能快捷键合理的创建标题,有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能,丰富你的文章UML 图表FLowchart流程图导出与导入导出导入概要本章节将介绍爬虫的主要流程和代码实现。步骤如下:读取种子页面分析页面的新闻链接爬取新闻链接的内容(标题,
2021-04-27 19:33:06
485
原创 新闻爬虫以及爬取结果查询网站搭建(一)
新闻爬虫以及爬取结果查询网站搭建(一)实验要求技术要求爬虫准备工作Node.js 介绍与安装配置Node.js介绍Node.js安装Request库安装Cheerio安装数据库安装实验要求1、选取3-5个代表性的新闻网站(比如新浪新闻、网易新闻等,或者某个垂直领域权威性的网站比如经济领域的雪球财经、东方财富等,或者体育领域的腾讯体育、虎扑体育等等)建立爬虫,针对不同网站的新闻页面进行分析,爬取出编码、标题、作者、时间、关键词、摘要、内容、来源等结构化信息,存储在数据库中。2、建立网站提供对爬取内容的分
2021-04-27 15:13:58
710
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅