【Elastic Search 学习总结】8.ES的Mapping

最新推荐文章于 2023-12-20 17:36:04 发布
转载 最新推荐文章于 2023-12-20 17:36:04 发布 · 437 阅读 · 0

本文介绍Elasticsearch自动创建映射的功能及支持的数据类型，并演示了如何查看自动创建的映射。此外，还介绍了ES底层如何存储Object类型及对象数组类型的数据。

一、ES自动创建Mapping

我们添加一个文档对象时，如果索引与类型都不存在，那么es会帮我们自动创建！不仅如此，es还会帮我们创建Mapping

 

查询一下自动创建的Mapping GET /index_name/type/_mapping

 

我们可以看到ES会自动识别我们传递的数据的数据类型！

 

二、ES支持的数据类型

 

等等。还有很多，这里面只是展示了一些常用的。

 

三、ES底层对Object类型、对象数组类型的数据存储的格式

1. Object类型

2. 对象数组类型

四、手动创建Mapping

【提示】这只是一个Demo，里面的内容还有很多！

Rita楠神
关注
ES入门八：Mapping的详细讲解
一只小星星
03-05 5371
前面我们提到最好不要用Dynamic Mapping来生成Mapping，但是如果Mapping拥有的字段非常多的时候，自定义Mapping是非常痛苦的并且容易出错。那有没有办法减轻一下我们的工作量哪？我们可以把JSON对象直接写入，利用Dynamic Mapping的特性帮我们生成一个初步可用的Mapping，然后我们修改这个 Mapping来直到满足我们的需求。创建临时索引，并写入业务数据获取这个临时索引的Mapping根据业务场景，完善这个Mapping。如对某些字段定义的分词器等。
【Elasticsearch】index.mapping.source.mode
risc123456的博客
01-22 989
**复杂类型**：对于对象和嵌套字段，Elasticsearch会存储字段的结构信息，但不会存储完整的原始值。- **索引信息**：哪些字段被索引，以及索引的类型（如 `text`、`keyword`、`date` 等）。- **字段值**：对于基本类型（如字符串、数字、布尔值等），字段的值会被存储。- **字段属性**：字段的索引属性（如是否索引、是否存储等）会被记录。- **字段类型**：每个字段的类型信息会被存储。- **字段名称**：所有字段的名称都会被存储。- 字段的类型信息和属性会被存储。
（四）elasticsearch之mapping详解和数据类型
qq_37891300的博客
08-22 1233
elasticsearch之mapping详解和数据类型 一、mapping介绍 类似数据库中的表结构定义，主要作用如下： 定义 index 下的字段名（Field name） 定义字段的类型，比如 数值型，字符串型，布尔型等 定义倒排索引的相关配置，比如是的索引、是否记录position 等 二、常用mapping 相关api 1、获取索引 mapping 请求：GET XXX-INDE...
elasticSearch-mapping定义(4)
编程是一门实践技术
05-11 234
此章依然是es的restfulAPI，因为es的映射是可选的操作，又由于其比较重要，所以单拿一节告别说明。除了API还有字段定义（相当于mysql的create table）相关的知识点，这些对优化es比较有意义。
ElasticSearch入门-Get Mapping
donlian的专栏
08-06 1003
想要在Java API中获得一个mapping 还真困难，以此铭记。 import org.elasticsearch.client.Client; import org.elasticsearch.cluster.ClusterState; import org.elasticsearch.cluster.metadata.IndexMetaData; import org.elast...
es基础-mapping
epitomizelu的专栏
01-18 738
一，dynamic mapping dynamic mapping有两层意思： 1，,当索引没有被创建时，保存文档会自动创建索引，同时根据文档各字段值推断字段类型，这称之为dynamic mapping。 2，索引创建后，如果要新加字段，分为几种情况。 PUT lcy_test/_mapping { "dynamic":"strict" } 如果mapping的danamic属性为false，可以创建文档，但新增字段不能被索引； 如果mapping的danamic属性为true，可以创建文档，但新
最新版linux elasticsearch-7.16.2-linux-x86_64.tar.gz
12-20
8. **插件安装**：Elasticsearch支持丰富的插件，如Kibana用于数据可视化，Logstash用于数据收集和预处理， Beats用于轻量级数据发送等。根据需求，可以使用`bin/elasticsearch-plugin`命令安装。 9. **集群搭建**...
elasticsearch-dump-6.78.0.tar.gz
11-28
1. **数据格式**：确保源数据和目标 Elasticsearch 集群的映射（Mapping）匹配，否则可能导致导入失败或数据不一致。 2. **性能优化**：根据实际情况调整工具的配置参数，如设置合适的批量导入大小，避免对 Elastic...
elasticsearch-head-5.0.0.tar.gz
11-19
Elasticsearch Head是一款基于Web的Elasticsearch管理界面工具，主要设计用于可视化Elasticsearch集群的状态、节点信息、索引管理和搜索操作。标题中的"elasticsearch-head-5.0.0.tar.gz"表明这是一个针对Elastic...
最新版windows elasticsearch-7.16.2-windows-x86_64.zip
12-20
Elasticsearch是一个开源的全文搜索引擎，它以分布式、RESTful API、实时、可扩展和高可用性著称。在Windows平台上部署Elasticsearch 7.16.2，可以帮助用户快速构建高性能的数据检索和分析系统。以下是关于这个版本...
ElasticSearch-Mapping详解
抽象的螺旋
11-19 1982
elastic
Elasticsearch Mapping详解
峰
12-20 1359
Elasticsearch mapping映射详解，参数配置，空间优化。 动态映射。无须显示指定文档字段数据类型，直接添加数据即可，es会自动推断数据类型，一般在测试时使用，生产过程避免使用字段推断。显式映射。创建索引时显式指定字段和数据类型。索引创建后不能修改字段名（可以添加alias），不能修改数据类型，可以添加新的字段运行时字段。在查询时确定数据类型，由于不会提前索引数据，可以节省存储空间以及提供更灵活的映射操作，但是在部分搜索API中的表现不同，并且由于运行时确定字段，性能上存在一定损失。
ES-mapping以及数据类型
baishitongtian的专栏
03-03 797
1.核心数据类型 字符型: Text被用来索引长文本,再建立索引前会将这项文本进行分词，转化为词的组合，建立索引。允许检索但不能用来排序和聚合 Keyword：不需要进行分词,可用来检索过滤、排序和聚合 数字类型 byte/short/integer/long/double/float/data/binary 3.Mappiing 支持的属性 "type":text: 一般文本使用(可被分词进行模糊查找)/keyword "analyzer...
es elasticsearch 八 mapping 映射 、复杂数据类型
银河系天城知识宝库_技术专家蒋浩宇
05-26 1898
String 、byte、short number object geo-print/素组等、更多的看官方文档。往es 插入数据 es 会自动建立索引，同时建立对应的mapping动态映射。准确的值倒排索引会全值进入，全文检索，会先分词，再到倒排索引分别检索。还可以自己建立mapping 动态映射，索引行为、分词器等。手动创建索引映射(定义分词器、数据类型、时间格式化)时态转换、重复数的转换、同义词的转换、大小写的转换。不同的数据类型有不同的检索方式 全文检索 准确检索。分词，初步的倒排索引的建立。蒋浩宇
ES的mapping配置详解
liuerchong的博客
03-25 8366
mapping的基本格式 { "mappings":{ "_doc":{ "_all":{ "enabled":false #默认情况，ElasticSarch自动使用_all所有的文档的域都会被加到_all中进行索引。可以使用"_all" : {"enabled":false} 开关禁用它。如果某个域不希望被加到_all中，可以使用"include_in_all":false关闭 },
（六：2）elasticsearch索引的mapping详解
weixin_43930865的博客
09-21 7001
1：mapping详解 一个索引的设置包括setting和mapping两部分 1：setting部分 是对索引的设置信息，更多参数信息看官网，示例如下 "settings": { "number_of_shards": "1", 该索引的所有分片数，每个节点每GB堆空间的分片数量应该少于20个 "number_of_replicas": "0", 该索引的副本个数 "refresh_interval": "30s" 索引的段的刷新间隔 index.max_rescore_wi
【HBZ分享】ES中的Mapping的数据类型 及 类型的特点
a645293829的博客
10-31 703
ES中的Mapping的数据类型 及 类型的特点
ES Mapping和常见字段
aganliang的专栏
05-15 960
mapping类似数据库中的schema的定义， mapping 定义索引中的字段名称，字段数据类型，索引的其他配置 mapping会把json文档映射成lucene所需的扁平格式 GET index/_mapping 1.字段的数据类型 简单类型：text/keyword,date,integer/floating,boolean,ipv4,ipv6 复杂类型：对象和嵌套对象，object， 特殊类型：geo_point,geo_shape，percolator 2.dyna...
Elasticsearch 5.4 Mapping详解
热门推荐
1.02^365=1377.41
06-12 3万+
前言 一Field datatype字段数据类型 1string类型 2 text类型 3 keyword类型 4 数字类型 5 Object类型 6 date类型 7 Array类型 8 binary类型 9 ip类型 10 range类型 11 nested类型 12token_count类型 13 geo point 类型 二Meta-Fields元数据 1 _all 2 _field_nam
co.elastic.clients.elasticsearch._type.mapping.Properties 杂用
最新发布
11-18
<think> 我们讨论的是Elasticsearch Java API Client中的`co.elastic.clients.elasticsearch._types.mapping.Properties`类。 这个类用于表示索引映射中的字段集合（即properties部分）。在Elasticsearch中，映射（mapping）定义索引的结构，包括每个字段的类型和属性。 `Properties`类实际上是一个`Map<String, Property>`，其中键是字段名，值是一个`Property`对象。`Property`是一个联合类型（union type），可以表示各种字段类型（如TextProperty, KeywordProperty, DateProperty等）。 使用步骤： 1. 创建`Properties`对象：通常使用`Properties`的`Builder`模式来构建。 2. 添加字段映射：为每个字段指定类型和配置。 3. 在创建索引或更新映射时使用。 示例：创建一个包含两个字段（一个文本字段和一个关键字字段）的映射。 注意：在Java API Client中，我们使用构建器（Builder）模式来创建对象。 具体代码示例： </think> ### Elasticsearch Java API 中 `co.elastic.clients.elasticsearch._types.mapping.Properties` 使用详解 `Properties` 类是 Elasticsearch Java API Client 中定义索引映射的核心组件，用于声明索引的字段结构。其本质是 `Map<String, Property>` 类型，键为字段名，值为字段配置对象[^1]。 #### 1. **基础用法** ```java import co.elastic.clients.elasticsearch._types.mapping.*; // 创建 Properties 实例 Properties properties = new Properties.Builder() .put("title", new Property.Builder() .text(t -> t .fields("keyword", new Property.Builder() .keyword(k -> k.ignoreAbove(256)) ) ) .build() ) .put("price", new Property.Builder() .integer(i -> i) .build() ) .build(); // 应用映射到索引 client.indices().create(c -> c .index("products") .mappings(m -> m.properties(properties)) ); ``` - `Property.Builder()`: 字段配置构建器 - `.text()/keyword()/integer()`: 声明字段类型 - `.fields()`: 定义多字段（multi-fields） #### 2. **配置字段参数** ```java .put("email", new Property.Builder() .keyword(k -> k .index(false) // 不参与搜索 .docValues(true) // 允许聚合 .nullValue("N/A") // 空值替换 ) .build() ) ``` #### 3. **复杂类型定义** ```java // 对象类型 .put("address", new Property.Builder() .object(o -> o .properties("city", new Property.Builder().keyword().build()) .properties("street", new Property.Builder().keyword().build()) ) .build() ) // 嵌套类型 .put("tags", new Property.Builder() .nested(n -> n .properties("name", new Property.Builder().keyword().build()) ) .build() ) ``` #### 4. **动态映射操作** ```java // 获取现有映射 GetMappingResponse response = client.indices().getMapping(b -> b.index("products")); Properties existingProps = response.get("products").mappings().properties(); // 添加新字段 Properties newProps = new Properties.Builder() .putAll(existingProps) // 保留原有字段 .put("new_field", new Property.Builder().keyword().build()) .build(); // 更新映射 client.indices().putMapping(b -> b .index("products") .properties(newProps) ); ``` ### 核心注意事项 1. **类型安全** - 使用 `Property` 的子类确保类型安全： ```java TextProperty textProp = property.text(); // 获取text类型配置 if (textProp != null) { System.out.println(textProp.analyzer()); } ``` 2. **空值处理** ```java .keyword(k -> k.nullValue("undefined")) ``` 3. **性能优化** ```java .text(t -> t .indexOptions(IndexOptions.Offsets) // 减少存储 .norms(false) // 关闭评分因子 ) ``` 4. **类型转换** ```java // Property 转 JSON JsonpMapper mapper = ...; JsonGenerator generator = ...; properties.serialize(generator, mapper); // JSON 转 Property JsonParser parser = ...; Properties props = Properties._DESERIALIZER.deserialize(parser, mapper); ``` > **重要提示**：修改已存在字段的映射类型需通过 `Reindex API` 重建索引[^1]。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值