上午我申请了腾讯会议进行线上培训,下午申请了教室线下答疑,今日工作重点主要有
- python分组细化——数据的爬取、解析、入库
共计划爬取六个网站,国内国外各三个。不同网站的布局不同,这就使得数据爬取的逻辑不太一样。我们开会决定爬取Youtube、Facebook、twitter、知乎、哔哩哔哩、微博这几大平台的用户信息,由六个人分别负责爬取。另外两个人负责数据库整合和前后端的融合。
- Java培训
view渲染页面需要展示的数据库、数据,前端使用controller页面跳转实现,restful结构实现前后端分离。
本项目相对来说是一个难度相对较高的项目,需要学习的东西很多,对代码水平的要求较高,需要学习许多从前未用过的新技术。期待最后能够顺利结项。
项目来源:浩睿智源(山东)人工智能有限公司