ElasticSearch 忽略实体类中某个字段到mapping映射

最新推荐文章于 2023-08-26 01:11:15 发布
原创 最新推荐文章于 2023-08-26 01:11:15 发布 · 5.9k 阅读 · 6 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

项目中因业务需求，需在实体类中冗余一个字段且不生成ES Mapping。经研究，使用 @Transient 注解（java.beans.Transient）标记在该字段的setter方法上，可使ES.index时不将该字段映射到ES mapping中。

在项目中遇到一个问题，因业务问题需要再实体类中冗余一个字段，且该字段没必要生成ES Mapping，经过一番研究、搜索之后终于得到解决，可使用 @Transient 注解（需注意，注解为java.beans.Transient） 标记在该字段的setter方法上，这样在使用ES.index时，则不会将该字段映射到ES mapping中 

【Elasticsearch】es 写入 忽略 错误字段 存储正确字段 ignore_malformed
九师兄
06-08 1911
1.概述 官网：https://www.elastic.co/guide/en/elasticsearch/reference/current/ignore-malformed.html#ignore-malformed 我们经常碰到一些内容不规范或者格式不对的数据，例如某个IP字段的里出现"UNKNOWN"，某个数字字段出现"-"。如果在这些字段上已经设置了明确的类型，比如"ip"或者"float"，字段中出现了非该类型的值，ES会抛出异常并丢弃整条数据。 我们可以在该字段上设置"ignore_malf.
【Elasticsearch】 es 的 _ignored 字段
九师兄
06-08 2505
1.概述 官网：https://www.elastic.co/guide/en/elasticsearch/reference/current/mapping-ignored-field.html#mapping-ignored-field 2. _ignored 字段 该_ignored字段索引并存储文档中每个字段的名称，这些字段因格式错误ignore_malformed并被打开而被忽略 。 参考：【Elasticsearch】es 写入 忽略 错误字段 存储正确字段 ignore_malformed .
Elasticsearch的mapping映射
程序员LSP
12-20 962
前言 参考的es的文档 当前版本7.15 Mapping | Elasticsearch Guide [7.15] | Elastic 可能刚接触es的小白和我一样（我也是小白），映射是个啥玩意，如果直接学习的java朋友感觉可能听起来不太没有那么的通俗易懂，如果有c的基础的话，c里面就有一个映射概念，java基础中映射的概念很少，框架之后会接触到，但是这里可以通俗的理解为一个对象（对比mysql也是可以的都一样，学东西我觉得类比是最快的，当然这样类比漏洞很多，只是为了快速上手） ...
Elasticsearch——Mapping映射
qq_37107851的博客
05-27 642
映射是定义文档及其包含的字段如何存储和索引的过程。 每个文档都是字段的集合，每个字段都有自己的数据类型。映射数据时，创建一个映射定义，其中包含与文档相关的字段列表。映射定义还包括元数据字段，如\源字段，用于自定义如何处理文档的关联元数据。 ...
Elasticsearch常用知识点---忽略字段格式类型（ignore_malformed）
自律使我自由
07-01 2729
前言 ignore_malformed是定义Mapping时的一个参数配置，默认为false，即如果将错误的数据类型映射到字段中则会报错，如果设置为true，则可以忽略数据类型的异常。 有时，当你对数据类型不太确定时，可以尝试配置这个属性为true。 演示示例 数值类型 创建一个索引，number_one和number_two两个属性都是integer类型的，但是number_one配置了 “ignore_malformed”: true PUT my-index-000001 { "mappings"
ElasticSearch第八讲 ES索引字段映射类型以及动态映射相关操作
程序员路同学
09-04 1701
ElasticSearch第八讲 ES索引字段映射类型以及动态映射相关操作
Elasticsearch(二) Elasticsearch中的Mapping映射, 更新mapping和添加mapping
weixin_38399962的博客
08-20 1615
一. 核心简单字段类型 Elasticsearch 支持如下简单域类型： 字符串:string 整数 :byte,short,integer,long 浮点数:float,double 布尔型:boolean 日期:date 二. 复杂类型: 多值字段 很有可能，我们希望tag域包含多个标签。我们可以以数组(List)的形式索引标签： { "tag": [ "search", "nosql" ]} Java表示 List<String> tag...
7.5-elasticsearch中字段的动态映射
红笺小字
06-01 1901
字段动态映射:管理字段动态发现及配置自动映射模板
Elasticsearch 映射（Mapping）
彳亍
07-20 983
Mapping（映射）： 是用来定义文档和它所包含的字段是如何被存储和索引的。 mapping 有点像 MySQL 中的数据表结构定义。 mapping 非常重要，在向 ES 中存储文档之前，必须先创建好 mapping。
elasticsearch的映射 (mapping)
zhangCheng的博客
05-30 644
一、概念 映射 (mapping)就是指定索引(index)里面的每个文档中的字段的类型,设置字段的存储和查询的分析策略。 es对不同的字段类型,有不同的存储和检索策略, 比如对于text类型的字段,会经过各类分词处理(大小写转换/同义词转换),才会建立对应的倒排索引。 但是对于数值\时间等默认的keyword字段,会直接将整个值建立到倒排索引中。 如果不在创建索引的时候手动设置的话,es也会根据字段值进行自动映射。 二、映射的组成 1、Meta-fields: 用于自定义文档的元数据，每个文档都有对应
Elasticsearch实战(六)-mapping映射
JavaEdge全是干货的技术号
11-30 1711
1 mapping 作用 类似数据库中的表结构定义，主要作用如下： 定义Index下的字段名( Field Name ) 定义字段的类型,比如数值型、字符串型、布尔型等 定义倒排索弓|相关的配置,比如是否索引、记录position等 2 查看 mapping { "index" : { "mappings" : { "properties" : { "JSON 数据" : { "type" : "text", "fields
Elasticsearch忽略字段格式类型（ignore_malformed）
花&败
05-04 1747
前言 ignore_malformed是定义Mapping时的一个参数配置，默认为false，即如果将错误的数据类型映射到字段中则会报错，如果设置为true，则可以忽略数据类型的异常。 有时，当你对数据类型不太确定时，可以尝试配置这个属性为true。 演示示例 数值类型 创建一个索引，number_one和number_two两个属性都是integer类型的，但是number_one配置了 “ignore_malformed”: true PUT my-index-000001 { "ma
ES的忽略字段及其在大数据中的应用
JieLun_C的博客
08-26 628
在上面的示例中，我们索引了一篇文档，其中"title"字段的值为"Elasticsearch忽略字段的应用"，“content"字段的值为"在大数据领域，Elasticsearch的忽略字段非常有用”，而"_ignored"字段的值为"一些敏感信息"。这样，在索引文档时，ES将会忽略"_ignored"字段的内容。需要注意的是，“_ignored"字段只能在文档被索引时生效，对于已经索引的文档，如果想要修改”_ignored"字段的值或者将一个已有的字段标记为"_ignored"，则需要重新索引该文档。
springboot整合ElasticSearch 某个属性不存储到ES
SeasmallTop的博客
07-26 1499
springboot整合ElasticSearch@Document类某个属性不存储到ES 在需要忽略的字段上加上 @Transient （org.springframework.data.annotation.Transient）即可 import lombok.Data; import lombok.experimental.Accessors; import org.springframework.data.annotation.Id; import org.springframework.data.
ElasticSearch——setting部分不存储某个字段
世界中心的专栏
03-04 8326
setting中的通用属性Store 该属性的取值可以为yes和no，用于指定字段的原始属性是否存入索引。默认值是no.意味着不能在结果中返回字段的原始值（即使没有存储原始值，也可以使用Soure字段返回原始值）。如果已经建立索引可以搜索该字段的内容。 ElasticSearch默认是存储整个文件的，如果要改变这种情形的话可以设置：“_source”:{"enable":"false"} P
Springboot-data-es 自动创建mapping（mapping的数据结构为空）以及自动添加新字段（生成mapping的数据结构）
健康平安的活着的专栏
11-18 9102
第一步 创建mapping 要想让springboot自动启动时候自动创建mapping 1.定义实体： package com.ljf.springboot.data.es.model; import org.springframework.data.annotation.Id; import org.springframework.data.elasticsearch.annota...
spring‐data‐elasticsearchPOJO中的注解
丿火凤燎原的博客
04-22 628
前端交互我们仍可以使用REST风格结合SpringMVC 后端数据库,我们可以使用spring-data-elasticsearch POM <dependency> <groupId>org.springframework.boot</groupId> <artifactId>...
Spring Data Elasticsearch篇(1):常用注解
热门推荐
u013089490的博客
12-06 1万+
1、注解@Document 1.1、@Document源码 @Persistent @Inherited @Retention(RetentionPolicy.RUNTIME) @Target({ElementType.TYPE}) public @interface Document { //索引库名称 String indexName(); //类型 St...
Elasticsearch中mapping值得注意的一些小细节
trayvontang的博客
08-10 777
文章目录简介添加mapping更新mappingJava 方式添加mapping参考 简介 在Elasticsearch中mapping有很多可以配置的地方，但是使用多了就会发现，一般情况有关mapping最常用、也最实用的就简单的几个需要注意的地方。 下面就简单的介绍一下关于这些mapping中值得注意的地方。 当然，如果想要了解更多关于mapping的知识，可以参考后面给的参考链接。 添加mapping # 添加为索引添加mapping curl -X PUT http://localhost:9200
Elasticsearch对应的实体类加了字段，Elasticsearch需要怎么处理
最新发布
06-27
在Elasticsearch中，当你为对应的实体类添加新的字段时，你需要更新你的索引映射（Mapping）以适应这些变化。这是因为Elasticsearch是基于文档模型的，每个索引都有其特定的结构定义，包括字段名、数据类型等信息。 以下是处理新字段添加的步骤： 1. **更新映射（Mapping）**: - 如果字段是新创建的，你需要在索引的配置文件中（通常是`.json`格式）添加这个字段，比如： ```json { "mappings": { "your_type": { "properties": { "new_field": { "type": "text" 或 "keyword" 或其他合适的数据类型 } } } } } ``` 确保替换"your_type"为你的实际类型名称。 2. **重新索引或刷新数据**: - 如果你只是添加了字段，而文档中的值尚未填充，可以使用`update_by_query` API 或 `reindex` API，将已有文档映射到新结构。 - 如果已有值，那么通常需要重新索引整个索引，这会更新所有文档的映射。 ```bash curl -X POST "localhost:9200/your_index/_reindex" --data-binary '{"source": {"index": "old_index"}, "dest": { "index": "new_index" }}' ``` 3. **验证和更新客户端代码**: - 在使用Elasticsearch客户端（如Elasticsearch.Net、Java的Elasticsearch Client等）时，也需要相应地更新代码，确保能正确地访问和操作新增的字段。 4. **可能需要的更新**: - 如果字段是用于搜索和聚合的，你可能需要更新搜索查询和聚合设置，以便正确处理包含新字段的查询。 - 如果字段有特殊的存储需求（如分析器、分词规则等），也要在映射中指定。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值