ElasticSearch的安装及数据的使用

AAA821

墨衍会员 · AI 创作全网分发码龄14年

关注

转载 2022-04-08 17:17:24 804 阅读 AI 写同款· GEO 优化 ›

Elasticsearch Dump的详细安装和迁移es索引和数据的使用教程【代码】Elasticsearch Dump的详细安装和迁移es索引和数据的使用教程。阅读详情

一共要装三个东西 ElasticSearch Node.js ElasticSearch-head

下面的操作主要来源于

Windows 上安装 ElasticSearch_mottohlm的博客-优快云博客_elasticsearch windows安装和02-windows下elasticsearch安装elasticsearch-head_九师兄的博客-优快云博客

作在Window环境下操作

ElasticSearch 下载链接 Download Elasticsearch | Elastic

下载Zip后解压,在bin中，双击执行 elasticsearch.bat 。等待打印信息输出完之后打开浏览器，输入：localhost:9200 。页面显示如下，则说明安装好了。

再下一个Node.js 链接：下载 | Node.js 中文网下载MSI格式的，然后点击里面的安装包安装

现在下ElasticSearch-head 链接： https://github.com/mobz/elasticsearch-head 下到某目录如elasticSearchHead目录下

然后 cd到此目录

npm install -g grunt-cli
grunt是一个很方便的构建工具，可以进行打包压缩、测试、执行等等的工作

D:\elasticsearch\elasticsearch-6.2.0\myplugins\elasticsearch-head-master>npm install -g grunt-cli
C:\Users\Administrator\AppData\Roaming\npm\grunt -> C:\Users\Administrator\AppData\Roaming\npm\node_modules\grunt-cli\bin\grunt
+ grunt-cli@1.2.0
updated 1 package in 4.429s

2.npm install

 D:\elasticsearch\elasticsearch-6.2.0\myplugins\elasticsearch-head-master>npm install
npm WARN deprecated http2@3.3.7: Use the built-in module in node 9.0.0 or newer, instead
npm WARN deprecated coffee-script@1.10.0: CoffeeScript on NPM has moved to "coffeescript" (no hyphen)

> phantomjs-prebuilt@2.1.16 install D:\elasticsearch\elasticsearch-6.2.0\myplugins\elasticsearch-head-master\node_modules\phantomjs-prebuilt
> node install.js

PhantomJS not found on PATH
Download already available at C:\Users\ADMINI~1\AppData\Local\Temp\phantomjs\phantomjs-2.1.1-windows.zip
Verified checksum of previously downloaded file
Extracting zip contents
Removing D:\elasticsearch\elasticsearch-6.2.0\myplugins\elasticsearch-head-master\node_modules\phantomjs-prebuilt\lib\phantom
Copying extracted folder C:\Users\ADMINI~1\AppData\Local\Temp\phantomjs\phantomjs-2.1.1-windows.zip-extract-1517991758740\phantomjs-2.1.1-windows -> D:\elasticsearch\elasticsearc
\elasticsearch-head-master\node_modules\phantomjs-prebuilt\lib\phantom
Writing location.js file
Done. Phantomjs binary available at D:\elasticsearch\elasticsearch-6.2.0\myplugins\elasticsearch-head-master\node_modules\phantomjs-prebuilt\lib\phantom\bin\phantomjs.exe
npm notice created a lockfile as package-lock.json. You should commit this file.
npm WARN elasticsearch-head@0.0.0 license should be a valid SPDX license expression
npm WARN optional SKIPPING OPTIONAL DEPENDENCY: fsevents@1.1.3 (node_modules\fsevents):
npm WARN notsup SKIPPING OPTIONAL DEPENDENCY: Unsupported platform for fsevents@1.1.3: wanted {"os":"darwin","arch":"any"} (current: {"os":"win32","arch":"x64"})

added 384 packages in 40.221s

这一点第一次安装会不一样，会有进度条，我这是第二次，为了写博客

问题1：可能会报错

Error making request.
Error: connect ETIMEDOUT 54.231.112.152:443
    at Object._errnoException (util.js:1022:11)
    at _exceptionWithHostPort (util.js:1044:20)
    at TCPConnectWrap.afterConnect [as oncomplete] (net.js:1182:14)

Please report this full log at https://github.com/Medium/phantomjs
npm WARN elasticsearch-head@0.0.0 license should be a valid SPDX license expression
npm WARN optional SKIPPING OPTIONAL DEPENDENCY: fsevents@1.1.3 (node_modules\fsevents):
npm WARN notsup SKIPPING OPTIONAL DEPENDENCY: Unsupported platform for fsevents@1.1.3: wanted {"os":"darwin","arch":"any"} (current: {"os":"win32","arch":"x64"})

npm ERR! code ELIFECYCLE
npm ERR! errno 1
npm ERR! phantomjs-prebuilt@2.1.16 install: `node install.js`
npm ERR! Exit status 1
npm ERR!
npm ERR! Failed at the phantomjs-prebuilt@2.1.16 install script.
npm ERR! This is probably not a problem with npm. There is likely additional logging output above.

npm ERR! A complete log of this run can be found in:
npm ERR!     C:\Users\Administrator\AppData\Roaming\npm-cache\_logs\2018-03-02T02_46_07_354Z-debug.log

原因：网络原因
解决方法：多次执行，总会成功的

3. grunt server

D:\elasticsearch\elasticsearch-6.2.0\myplugins\elasticsearch-head-master>grunt server
(node:3492) ExperimentalWarning: The http2 module is an experimental API.
Running "connect:server" (connect) task
Waiting forever...
Started connect web server on http://localhost:9100

这样就完成安装了

安装IK分词器

官方地址：https://github.com/medcl/elasticsearch-analysis-ik/releases

有时候在官方地址Releases找不对Es对应版本的ik版本（版本不同会安装失败），可以直接拼下载地址

https://github.com/medcl/elasticsearch-analysis-ik/releases/download/v版本号/elasticsearch-analysis-ik-版本号.zip

比如https://github.com/medcl/elasticsearch-analysis-ik/releases/download/v6.2.4/elasticsearch-analysis-ik-6.2.4.zip

或者直接进入 elasticsearch 安装目录下的 bin\ 目录，输入

elasticsearch-plugin install https://github.com/medcl/elasticsearch-analysis-ik/releases/download/vX.X.X/elasticsearch-analysis-ik-X.X.X.zip

elasticSearch的elasticsearch-head-master　登录进去，显示集群不健康值

问题解决：在config/elasticsearch.yml加上两句

http.cors.enabled: true
http.cors.allow-origin: "*"

ElasticSearch的一些概念

ES中的一些概念

index（索引）

相当于mysql中的数据库

type（类型）

相当于mysql中的一张表

document（文档）

相当于mysql中的一行（一条记录）

field（域）

相当于mysql中的一列（一个字段）

节点

一个服务器，由一个名字来标识

集群

一个或多个节点组织在一起

分片

将一份数据划分为多小份的能力，允许水平分割和扩展容量。多个分片可以响应请求，提高性能和吞吐量。

副本

复制数据，一个节点出问题时，其余节点可以顶上。

ES支持的数据类型

text 文本类型，text类型如果不显示指定映射的字段属性，默认是使用标准分词器进行分词，一般数据类型是text要么显示指定分词器，要么不分词，一般不使用默认的分词器（除非文本是纯英文）
keyword : 如果数组中的值是字符串，最好使用keyword, 它不会对字符串进行分词
date 支持的格式有：可以通过format定义日期的数据格式，也支持毫秒数
boolean
float
double
byte
short
integer
long
object
nested : 嵌套对象, 用于数组中的元素是对象的[{}, {}]
ip 即支持ipv4也支持ipv6
completion
binary
geo-point：支持经纬度存储和距离范围检索
geo-shape：支持任意图形范围的检索，例如矩形和平面多边形

1.

下面是操作数据,我看很多博文用cUrl来操作数据,cUrl只是用来发送请求的，这个功能用Postman也是可以的

索引的增删改查有一个类似的格式，总结如下：

 请求 ： <Node>:<Port>/<Index>/<Type>/<ID>

<Node>:节点ip

　　<port>:节点端口号，默认9200

　　<Index>:索引名

　　<Type>:索引类型

　　<ID>:操作对象的ID号

所以我这样加索引 localhost:9200/customer2?pretty 返回添加成功(注意,我这里单加索引用的是PUT请求)

然后我再给这个索引加一个类型,用的还是PUT请求,它报错,要求在添加类型时,要用POST请求

所以改成这样,result是创建成功,它的id因为没指定,是随机生成的一个

所以我又加了一个document而且指定了id

这里的id主要是用来获取指定数据,比如说想获取customer2索引下类型为order,id是1的文档

查询customer2索引下类型为order的所有文档

查询结果解释：

1，hits

返回结果中最重要的部分是 hits ，它包含 total 字段来表示匹配到的文档总数，并且一个 hits 数组包含所查询结果的前十个文档。

2，took

took 值告诉我们执行整个搜索请求耗费了多少毫秒。

指定查询条件,发现不能模糊查询

3，timeout

timed_out 值告诉我们查询是否超时。默认情况下，搜索请求不会超时。如果低响应时间比完成结果更重要，你可以指定 timeout 为 10 或者 10ms（10毫秒），或者 1s（1秒）。以下命令：

GET /_search?timeout=10ms

结果

数据更新,原本我是这样写的

后来查了下，改成这样写了,于是就修改成功了

设置索引的分片数量、副本数量、默认的分词器等

PUT /my_temp_index/_settings { "number_of_replicas": 1 }

为索引创建一个别名

PUT /school_v1/_alias/school

查看别名指向的索引

GET /*/_alias/school

查询索引对应的别名

GET /school_v1/_alias/*

我既可以这样写http://localhost:9200/school/students/_mapping查询映射

也可以这样写http://localhost:9200/school/_mapping/students

总结上面的语句

1.同一个请求,请求方式的不同，作用也会不同,比如说localhost:9200/customer2/order/1，POST请求跟GET请求的作用，一个是添加一个是查询

2.执行查询和修改数据时，要加_search和_update

2.

ElasticSearch的分词器查询,因为要支持中文,所以使用IK分词器

下载链接

https://github.com/medcl/elasticsearch-analysis-ik/releases

因为IK的版本要跟ElasticSearch的版本严格对应起来,所以我els是6.3.2版本，我ik也要选V6.3.2

将下载的ZIP文件解压至elasticsearch-6.3.2\elasticsearch-6.3.2\plugins\ik文件夹下(ik目录是我新建的)，即可完成 ik 分词器的安装

然后重新启动els,看到有用了ik这个工具

ik_max_word和ik_smart分词的区别

ik_max_word是最细粒度的分词

ik_smart是最粗粒度的分词

然后写一个分词器的例子来试试

3.

映射就是创建索引时指定都包含哪些字段以及字段的数据类型、分词器等一些设置。

为了能够把日期字段处理成日期，把数字字段处理成数字，把字符串字段处理成全文本（Full-text）或精确的字符串值，Elasticsearch需要知道每个字段里面都包含了什么类型。这些类型和字段的信息存储（包含）在映射（mapping）中。

当你索引一个包含新字段的文档——一个之前没有的字段——Elasticsearch将使用动态映射猜测字段类型，这意味着，如果你索引一个带引号的数字——"123"，它将被映射为"string"类型，而不是"long"类型。然而，如果字段已经被映射为"long"类型，Elasticsearch将尝试转换字符串为long，并在转换失败时会抛出异常。