一.redis集群
1.什么叫集群
不同的服务器,完成同一个业务。
2.为什么要集群
(1)解决单点故障
(2)处理高并发
(3)处理大数据(高并发) --解决存储问题
3.集群方案
(1)主从复制 (读写分离 主从同步)
优点: 支持主从复制,主机会自动将数据同步到从机,可以进行读写分离。
缺点:Redis不具备自动容错和恢复功能,如果想具备自动重起 ,需要安装插件。
(2)哨兵模式
自动化的系统监控和故障恢复功能。
优点:主从复制优点都在, 通过哨兵自动恢复。
缺点:比较难扩容,服务占用空间比较多。
(3)Redis-Cluster集群
redis的分布式存储,也就是说每台redis节点上存储不同的内容。
优点:上面有都有,解决分布式存储问题 ,容错问题。
二.分布式
1.什么是分布式
把业务拆分开,分布到不同服务器。
2.为什么要分布式
分布式和集群一起使用
便于维护
解决高并发 ,单点故障问题
便于扩容
三.搭建redis-cluster
(1) 拷贝6个redis 分别命名为 6379-6384
(2) 修改配置
port 6379
cluster-enabled yes
cluster-config-file nodes-6379.conf
cluster-node-timeout 15000
appendonly yes
(3) 每个redis服务 写一个startup.bat启动文件
title redis-6379
redis-server.exe redis.windows.conf
(4)安装ruby环境
傻瓜式安装
(5)安装Redis的Ruby驱动 rubygems-3.0.6
a)解压
b)D:\Program Files\Redis_cluster\rubygems-2.7.7 然后命令行执行 ruby setup.rb
(6)通过驱动安装的redis
a)进入6379的目录
b)执行gem install redis
(7) 启动 6379-6384服务
创建集群
拷贝redis-trib.rb到6379的redis节点
redis-trib.rb create --replicas 1 127.0.0.1:6379 127.0.0.1:6380 127.0.0.1:6381 127.0.0.1:6382 127.0.0.1:6383 127.0.0.1:6384
四.ES(elasticSearch)
1.ES的概念和特点
概念:全文检索的框架,专门做搜索,支持分布式,集群。
特点:全文检索的框架 --封装lucene的,支持分布式(集群)
(1)原生Lucene使用的不足,优化Lucene的调用方式。
(2)高可用的分布式集群 ,处理PB级别数据。
1024KB – 1MB
1024MB – 1GB
1024GB – 1TB
1024TB - 1PB
(3)它的目的是通过简单的 RESTful API来隐藏Lucene的复杂性,从而让全文搜索变得简单,达到开箱即用的效果。
lucene:全文检索 – api比较麻烦,操作全文检索的最底层技术。
lucene核心:创建索引,搜索索引。
2.ES的对手–Solr
概念:Solr是一个独立的企业级搜索应用服务器,它对外提供类似于Web-service的API接口。用户可以通过http请求,向搜索引擎服务器提交一定格式的XML文件,生成索引;也可以通过Http Get操作提出查找请求,并得到XML格式的返回结果。
特点:Solr是一个高性能,采用Java开发,基于Lucene的全文搜索服务器。同时对其进行了扩展,提供了比Lucene更为丰富的查询语言,同时实现了可配置、可扩展并对查询性能进行了优化,并且提供了一个完善的功能管理界面,是一款非常优秀的全文搜索引擎。
Solr和ES区别:
(1)Solr:重量级,支持很多种类型操作,支持分布式式,它里面有很多功能,但是在实时领域上面,没有es好。
(2)ES:轻量级,支持json的操作格式,在实时搜索领域里面做的不错,如果想使用其他的功能,需要额外安装插件。
3.ES的使用
ES分为服务端和客户端
(1)ES服务端
解压 -->bin/elasticsearch.bat -->localhost:9200
a)配置内存:
config/jvm.options
-Xmx1g
-Xms1g
b)健康状态:
green(最健康) -->主分片和从分片(存储内容)都完好,集群是100%健康
yellow -->主分片好的,从分片至少缺少一个,集群还是可以使用,
red -->至少一个主分片以及它的全部副本都在缺失中。这意味着你在缺少数据
(2)ES客户端–navicat
restfull风格 —> GET/POST/DELETE/PUT shop/goods/1
GET shop/goods/1 -->查询shop这个库goods表 1这条数据
PUT shop/goods {“name”:“111”}
POST shop/goods {“name”:“111”}
DELETE shop/goods/1
1)postman +head
2)curl–>在firefox安装poster插件
3)Kibana5 -->es
4.ES基本操作
(1)数据对应
es database lucene
index : 索引库 数据库 索引库 index库
type : 表(类型) table documents
id:某一个条数据 column document(field)
(2)crud
#增
PUT crm/employee/1
{
"name":"王天霸",
"age":18
}
#修改
POST crm/employee/1
{
"name":"赵日天",
"age":23
}
#查
GET crm/employee/1
#删除
DELETE crm/employee/1
#没有id会自动生成
POST crm/employee
{
"name":"龙傲天",
"age":25
}
#查询所有
GET _search