- 博客(11)
- 资源 (28)
- 收藏
- 关注
原创 网络爬虫:电影数据
1、说明:将使用Requests、Lxml和re第三方库,爬取豆瓣电影TOP250的数据,并保存到mysql数据库中2、爬取信息包括:电影名称、导演、主演、类型、制片国家、上映时间、片长和评分等;3、爬取思路:(1)网址信息及规律:https://movie.douban.com/top250https://movie.douban.com/top250?start=25https://movie.douban.com/top250?start=50(2)具体实现:(小细节待调整)D:\An
2021-09-25 18:07:09
846
2
原创 网络爬虫:爬取段子信息
1、说明:利用requests和正则表达式方法,爬取糗事百科网中”文字“专题的段子信息,并把爬取的数据存储在本地文件中。2、爬虫分析:(1)网址信息及规律:https://www.qiushibaike.com/text/page/1/https://www.qiushibaike.com/text/page/2/https://www.qiushibaike.com/text/page/3/(2)爬取信息:用户ID、用户等级、用户性别、发表段子文字信息、好笑数量和评论数量(3)将数据保存在t
2021-09-24 14:21:23
261
原创 网络爬虫:爬取小说数据
1、说明:本案例将利用Requests库和正则表达式方法,爬取斗破苍穹小说网中该小说的全文信息,并把爬取的数据存储在本地文件中。2、爬取思路:(1)网址信息及规律:http://www.doupoxs.com/doupocangqiong/2.htmlhttp://www.doupoxs.com/doupocangqiong/3.htmlhttp://www.doupoxs.com/doupocangqiong/4.htmlhttp://www.doupoxs.com/doupocangqion
2021-09-24 14:20:37
943
原创 网络爬虫:爬取某地区短租房信息
1、爬虫思路分析(1)原来的北京短租房的地址规则如下:http://bj.xiaozhu.com/http://bj.xiaozhu.com/search-duanzufang-p2-0/http://bj.xiaozhu.com/search-duanzufang-p3-0/http://bj.xiaozhu.com/search-duanzufang-p4-0/(2)需要爬取的信息有:标题、地址、价格、房东名称、房东性别和房东头像的链接"""# 案例要求:# 将利用到 Reques
2021-09-24 14:18:52
330
原创 边缘计算(EC)仿真平台:iFogSim安装部署
1 操作说明下载链接(1)目前看到的用于搭建边缘计算虚拟平台的仿真平台有:EdgeCloudSim、SimpleIOTSimulator、iFogSim。而本文档以iFogSim为例展开;(2)iFogSim仿真平台由Java开发,可在Eclipse或者Idea中进行调试开发,故需先安装好Eclipse或者IDEA工具;2 操作流程(1)下载iFogSim仿真包:下载链接(2)解压任意路径下(3)打开Eclipse开发工具,指定工作空间到指定路径(4)新建一个同名JavaPr
2021-09-24 13:58:07
11891
3
原创 VMware安装Centos系统
1 安装说明(1)安装Centos系统之前需先安装虚拟机软件,本案例以VMwareStation15为例(2)注意本文使用桥接方式作为网络连接方式!2 安装过程2.1 新建虚拟机(1)新建(2)分配核数及内存(3)配置网络连接方式:建议为桥接方式!(4)创建虚拟硬盘2.2启动安装系统2.3 必要设置(1)设置桥接模式中,关联的网卡:(2)ifconfig指令没...
2021-09-24 13:09:05
126
原创 VirtualBox安装Centos系统
1 安装说明(1)安装Centos系统之前需先安装虚拟机软件,本案例以VirtualBox为例,具体可参考安装文档:VirtualBox安装(2)安装参考链接:https://www.cnblogs.com/xyinjie/p/9437049.html2 安装过程2.1 新建虚拟机(1)新建(2)分配内存(3)创建虚拟硬盘2.2 配置(1)配置内核(2)配置网络:.
2021-09-24 12:50:32
199
原创 VirtualBox安装Ubuntu系统
1 安装说明(1)安装Ubuntu系统之前需先安装虚拟机软件,本案例以VirtualBox为例,具体可参考安装文档:VirtualBox安装.docx(2)安装参考链接:http://dblab.xmu.edu.cn/blog/337-2/2 安装过程(1)启动已安装的VirtualBox软件,点击新建虚拟机,注意选择相关类型与版本(2)选择虚拟机内存:配置2048M(3)新建虚拟机磁盘:配置10G(4)配置系统镜像:
2021-09-24 11:58:58
174
原创 VirtualBox安装
1、安装说明本系统安装手册是为了学习大数据系列课程所需环境搭建2、安装过程(1)软件准备下载VirtualBox软件,本课程以VirtualBox_5.2.22为例(2)安装流程点击上述安装包,并按如下步骤安装:跳出来的弹框,选中“安装”即可!到此,VirtualBox软件安装完成!...
2021-09-24 10:47:51
1634
原创 Ubuntu14 python3.5 visualvenv 中安装opencv3.1.0
Ubuntu14 python3.5 visualvenv 中安装opencv3.1.0(1)若是碰到缺少各种module时,按照下面链接来http://blog.youkuaiyun.com/u010098331/article/details/50924712(2)缺少ippicv_lnx就按照链接的进行下载,然后把相应的压缩包放在相应的路径下即可:http://blog.youkuaiyun.com
2017-11-25 18:06:29
547
原创 protoc3.5报文件不存在
在window10下,按照网上(https://www.cnblogs.com/mar-q/p/7459845.html)部署tensorflow的目标检测(object-detection)API时,在用protoc编译model/protos下的.proto出现报错:
2017-11-23 10:12:21
2293
1
causal-conv1d-1.1.1-cp310-cp310-win-amd64.whl
2024-08-28
软考高级:信息系统项目管理师知识点梳理
2021-09-24
软考高级:信息系统项目管理师论文-模板及十篇范文
2021-09-24
边缘计算EC仿真平台:iFogSim-master.zip
2021-09-24
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人