
学习笔记
文章平均质量分 79
_王泥煤
这个作者很懒,什么都没留下…
展开
-
Python爬虫开发与项目实践(3)
文章目录第三章 初识网络爬虫博主说明3.1 网络爬虫概述3.1.1 网络爬虫及其应用3.1.2 网络爬虫结构3.2 HTTP请求的Python实现3.2.1 urllib2/urllib实现Python3中urllib2被集成到urllib中,请参考文首说明,本博并不修改原书标题1. 首先实现一个完整的请求与相应模型2. 请求头headers处理3. Cookie处理4. Timeout设置超时5. 获取HTTP响应码6. 重定向7. Proxy的设置3.2.2 httplib/urllib实现发送GET请原创 2020-10-26 12:12:20 · 1383 阅读 · 0 评论 -
Python爬虫开发与项目实战(2)
第二章 Web前端基础2.1 W3C标准W3C,即万维网联盟,是Web技术领域有最具权威和影响力的国际中立性技术标准机构网页主要由三部分组成:结构(structure)、表现(presentation)和行为(behavior)对应的标准也分为三方面:结构化标准语言主要包括XHTML和XML表现标准语言主要包括CSS行为标准主要包括对象模型(如W3C DOM)、ECMAScript等2.1.1 HTMLHTML不是编程语言,是一种表示网页信息的符号标记语言Web浏览器的作用是原创 2020-10-21 13:18:13 · 1465 阅读 · 0 评论 -
Python爬虫开发与项目实战(1)
第一章 回顾Python编程1.1 安装Python(略)1.2 搭建开发环境(略)1.3 IO编程文件读写打开文件open(name[.mode[.buffering]])参数mode和buffering是可选的默认模式是读模式,默认缓冲区是无mode参数‘r’‘w’‘a’‘b’‘+’读模式写模式追加模式二进制模式(可添加到其他模式中使用)读/写模式(可添加到其他模式中使用)‘b’参数一般用来处理二进制文件,如mp3音乐或者图像原创 2020-10-18 19:31:43 · 1867 阅读 · 3 评论 -
Hadoop2.9.2集群搭建
Hadoop2.9.2集群搭建基础介绍Hadoop官方文档:https://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-common/SingleCluster.html下载链接:https://hadoop.apache.org/releases.html环境要求:合适的Java环境,每台电脑需要运行ssh服务Hadoop有3种运行方式Standalone Operation:独立运行,只运行在单独的一台主原创 2020-10-14 16:48:02 · 502 阅读 · 0 评论 -
【设计模式】策略模式
问题背景有父类duck,实现了quack(叫)和swim(游泳)两个方法预留了display方法给子类实现子类可能有多种,现在假设只有MallardDuck和RedheadDuck需求:fly()现在需要给鸭子实现fly(飞)方法解决方法1:在父类中实现在父类中添加fly方法给子类继承变化1:部分Duck不能fly如果仍使用继承,那么本不该fly的Duck也能访问到fly接口解决方法2:在子类中进行重写缺点:这种方法的缺点:(ABDF?)且在未来的维护过程中,如果需要添加原创 2020-10-11 19:56:44 · 177 阅读 · 0 评论 -
CentOS 7配置南大docker镜像
文章目录CentOS 7配置南大docker镜像0.帮助页面1.系统要求2.卸载旧版本(没有旧版本可跳过)3.安装方式4.准备工作5.可选操作StableTestNightly6.安装docker引擎7. (可选)修改配置文件防止与xshell连接冲突8.启动dockerCentOS 7配置南大docker镜像0.帮助页面南大docker源:https://mirrors.nju.edu.cn/docker-ce/南大docker源使用帮助:https://nju-mirror-help.njuer原创 2020-09-22 12:02:20 · 1365 阅读 · 0 评论 -
yum换源(阿里源和南大源)
文章目录yum换源阿里源南大源yum更新其他常用yum命令yum换源阿里源阿里巴巴开源镜像站:https://developer.aliyun.com/mirror/CentOS镜像换源(以下摘抄自此页):https://developer.aliyun.com/mirror/centos备份mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo.backup下载新的配置文件# CentOS 6原创 2020-09-22 10:41:50 · 4780 阅读 · 0 评论 -
VMware安装CentOS 7虚拟机
0.下载ISO文件在阿里巴巴开源镜像站:https://developer.aliyun.com/mirror/找到下载链接:https://mirrors.aliyun.com/centos/7.8.2003/isos/x86_64/使用 CentOS-7-x86_64-DVD-2003.torrent 种子进行下载得到文件:CentOS-7-x86_64-DVD-2003.iso1.创建虚拟机打开VMware Workstation,在【文件】选项卡中选择【新建虚拟机】点击【下一步】原创 2020-09-20 19:55:56 · 3533 阅读 · 1 评论 -
CentOS 7配置java环境
文章目录CentOS 7配置java环境0.下载安装包1.解压文件2.配置java环境变量3.检查配置是否成功CentOS 7配置java环境0.下载安装包现在下载jdk需要注册oracle账号,需要到官网手动下载https://www.oracle.com/java/technologies/javase/javase-jdk8-downloads.html选择下载的文件CentOS是linux系统,服务器是64位,所以选择Linux x64文件,直接选择打包好的.tar.gz文件即可原创 2020-09-22 10:39:48 · 395 阅读 · 0 评论