- 博客(6)
- 收藏
- 关注
原创 一主一丛的哨兵模式redis集群搭建
一主一从及哨兵模式的redis集群搭建此处安装的两台节点为:10.101.3.160(作为主节点) 10.101.3.161(作为从节点)一:分别在各节点安装redis(与安装单机版的redis操作一致)mkdir /rediscd /redis#下载redis安装包wget http://download.redis.io/releases/redis-4.0.8.tar.g...
2019-12-06 15:10:19
102574
原创 python 部署到Docker中的方法和案例
一:在linux下安装 Dockeryum install https://get.docker.com/rpm/1.7.1/centos-6/RPMS/x86_64/docker-engine-1.7.1-1.el6.x86_64.rpm启动Dockerservice docker start二,创建文件夹mkdir Nine#进入文件夹中cd Nine三,将要运行的py文...
2019-11-07 13:34:20
102202
原创 mongo批量插入,并去重
mongo插入数据在往mongo中插入数据时 ,对于小数据量,速度要求不高的数据用insert插入即可,但数据量巨大时,insert插入则无法满足要求,此时批量插入则能极大的提升插入速度一:insert插入import pymongoclient = pymongo.MongoClient(host='127.0.0.1',port=27017)collection = client["...
2019-10-15 10:55:31
104812
3
原创 K最近邻(KNN)
k近邻算法(k-nearest neighbor, kNN)是一种基本分类与回归方法,通过给定测试实例,基于某种距离度量方法找出训练集中与测试点最靠近的k个实例点,然后通过这k个最近邻的信息来进行预测测试实例的类别。优点 :准确性高,对异常值和噪声有较高的容忍度。缺点:计算量较大,对内存的需求也较大。从算法原理可以看出来,每次对一个未标记样本进行分类时,都需要全部计算一遍距离。参数:参数k是...
2019-09-25 11:52:14
103523
原创 通过selenium登陆,并完成滑动验证码验证来获取登陆cookie
在爬取网站数据时,需要通过登陆账户来获取cookie里的参数,才能向网站请求成功。参数access_token和salt 通过登陆账户生成的cookie中携带因此 首先通过selenium登陆账户首先打开网页,定位用户名输入框,和密码输入框,输入后 点击登陆 弹出验证码代码如下: def __init__(self,u,p): self.u = u ...
2019-08-19 17:14:17
103195
原创 在使用requests爬虫时 requests.exceptions.SSLError: HTTPSConnectionPool
在python中使用requests多次发送请求时 有时会出现以下错误请求过程中协议错误,此时在requests中加入参数 verify=False 即可解决
2019-08-15 11:51:31
103800
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人