Elasticsearch —— Fielddata is disabled on text fields by default. Set fielddata=true on [xxxx]...

最新推荐文章于 2024-03-04 17:08:21 发布
原创 最新推荐文章于 2024-03-04 17:08:21 发布 · 1.2k 阅读 · 1 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#java #elasticsearch #大数据

当在Elasticsearch中遇到`Fielddata is disabled on text fields by default.`错误时，原因是text字段默认不启用fielddata。为解决这个问题，需在Es模型中针对该字段设置`fielddata`: true。此错误通常发生在生产环境中新增字段而测试环境未同步更新导致的模型冲突。

问题

es搜索接口报错

Fielddata is disabled on text fields by default. Set fielddata=true on [xxxx] in order to load fie

解决

字段类型为text，默认fielddata在text字段上默认不起作用，导致报错。

需将es模型中的该字段增加如下设置

 "fielddata": true

原因分析 

其实并不是模型没有设计好。出现问题的字段是在生产上临时增加的字段，测试环境未添加此字段，导致es自动给该字段分配模型，出错。

Fielddata is disabled on text fields by default
武培轩
03-23 5462
使用 Elasticsearch 进行聚合的时候，如果对 text 类型的时候就会出现错误。 请求如下： { "size": 0, "query": { "bool": { "must": [ { "range": { "time": { "from": "2020-03-19T00:00:00+0800", "to": "2...
Fielddata is disabled on text fields by default. Set fielddata=true on [xxx]
周不老的博客
07-18 5988
使用es查询的时候报错： Fielddata is disabled on text fields by default. Set fielddata=true on [createTime] in order to load fielddata in memory by uninverting the inverted index. Note that this can however use significant memory. Alternatively use a keyword field in
解决 Elasticsearch 查询时 Fielddata is disabled on text fields by default 错误
TABSP
04-30 2011
问题描述 以下过程基于 Elasticsearch 7.3 Elasticsearch 启动后无法查询，检查日志发现这样一行日志： Caused by: java.lang.IllegalArgumentException: Fielddata is disabled on text fields by default. Set fielddata=true on [type] in o...
ES查询报错解决：Fielddata is disabled on text fields by default.Set fielddata=true on......
u010921364的博客
03-04 2161
自动映射类型，数据类型自动映射为第一次收到数据时的类型，后续即使写数据时改变数据类型，但存储的还是第一次映射类型。第一次存储的数据类型为text，即使后续写入的数据类型为long，但写入数据库后还是text。字段类型为text，不支持直接用字段名查询，应该用字段名.keyword；
es进行聚合操作时提示Fielddata is disabled on text fields by default
热门推荐
夕下奕林的专栏
05-03 7万+
根据es官网的文档执行GET /megacorp/employee/_search { "aggs": { "all_interests": { "terms": { "field": "interests" } } } } 这个例子时，报错{ "error": { "root_cause": [ { "type": "il
SpringDataElasticsearch查询ES进行排序时报错Fielddata is disabled on text fields by default. Set fielddata=tru
DreamsArchitects的博客
07-07 1878
Caused by: org.elasticsearch.ElasticsearchException: Elasticsearch exception [type=illegal_argument_exception, reason=Fielddata is disabled on text fields by default. Set fielddata=true on [receive_time] in order to load fielddata in memory by uninverting
Fielddata is disabled on text fields by default. Set fielddata=true on [title] in order to load...
wujianqinjian
05-10 4417
聚合查询报错 Fielddata is disabled on text fields by default. Set fielddata=true on [title] in order to load fielddata in memory by uninverting the inverted index. Note that this can however use significant...
ES排序操作错误：NotSerializableExceptionWrapper[: Fielddata is disabled on text fields by default.
lilyssh的博客
08-13 1421
报错信息 2021-08-13 15:38:42.838 [http-nio-10019-exec-8] INFO cn.gitv.user.utils.ElasticsearchUtil - {"size":1,"query":{"bool":{"must":[{"term":{"uid":{"value":12074,"boost":1.0}}},{"term":{"bizId":{"value":"10001628838759551490","boost":1.0}}},{"term":{"biz
Fielddata is disabled on text fields by default. Set fielddata=true on [make] in order to load
cominglately的博客
11-06 1326
文章目录场景分析解决 场景 ES对text类型的字段进行聚合操作的时候, 报 Fielddata is disabled on text fields by default. Set fielddata=true on [make] in order to load fielddata in memory by uninverting the inverted index. Note that ...
Elasticsearch5.X进行聚合操作时提示Fielddata is disabled on text fields by default
东境物语
11-09 2万+
Elasticsearch5.X聚合操作异常：Fielddata is disabled on text fields by default. Set fielddata=true on [color] in order to load  fielddata in memory by uninverting the inverted index. Note that this can how
Fielddata is disabled on text fields by default. Set fielddata=true on [XXX] in order to load fieldd...
niceyoo的博客
12-10 1048
1、报错信息： Fielddata is disabled on text fields by default. Set fielddata=true on [createTime] in order to load fielddata in memory by uninverting the inverted index. Note that this can however use sign...
Elasticsearch：Fielddata is disabled on text fields by default. Set fielddate=true on...
赵大土的博客
09-08 1303
Fielddata is disabled on text fields by default. Set fielddate=true on...问题原因解决方案一（常用）解决方案二解决方案三 今天在ES中执行cardinality时报出illegal_argument_exception，提示原因是Fielddata is disabled on text fields by default. Set fielddata=true on [policyno] in order to load fieldd
Fielddata is disabled on text fields by default. Set fielddata=true on [interests] in order to load
枣泥馅的博客
07-27 3106
按照es官网教程聚合时出现问题，提示非法参数异常如下： "type": "illegal_argument_exception", Fielddata is disabled on text fields by default. Set fielddata=true on [interests] in order to load fielddata in memory by uninverting the inverted index. Note that this can however use si
Fielddata is disabled on text fields by default 故障处理
lepton126的专栏
06-23 7992
在elasticsearch中是进行聚合操作是，系统报错 "error": { "root_cause": [ { "type": "illegal_argument_exception", "reason": "Fielddata is disabled on text fields by default. Set fielddata=tr...
es 聚合提示 Fielddata is disabled on text fields by default.
zhuxinquan的博客
11-02 910
解决 在查询的字段名加 .keyword 如原来的字段名为 xxxx.xxxxx 则在查询时指定字段名为 xxxx.xxxx.keyword 背景 ES新手一枚，查询数据时报错如题 网上查了一通之后，发现大多是如下文： es进行聚合操作时提示Fielddata is disabled on text fields by default 可惜我是新手，上文的方案应该是完美且正确的解决方案，...
Fielddata is disabled on text fields by default.
cui884658的博客
03-17 468
Fielddata is disabled on text fields by default. 默认情况下，在文本字段上禁用 Fielddata。 若是出现这个情况： 那么你可以在kibana中查看一下索引的mapping信息 GET order/_mapping 通过查看mapping信息发现。 拿java举例子，若是查询了一个String字段类型的聚合，在mapping信息中该字段为t...
Fielddata is disabled on text fields by default. Set fielddata=true on [publishTime] in order to load fielddata in memory by uninverting the inverted index. Note that this can however use significant memory. Alternatively use a keyword field
最新发布
06-18
### Elasticsearch 中启用 Fielddata 或使用 Keyword 字段的解决方案 在 Elasticsearch 中，`text` 类型字段默认禁用 `fielddata`，这是为了防止内存占用过高。当需要对 `text` 字段进行排序、聚合或脚本访问时，会遇到类似以下错误信息：`Fielddata is disabled on text fields by default. Set fielddata=true on [publishDate] in order to load fielddata in memory by uninverting the inverted index.`[^2] #### 解决方案 1：启用 Fielddata 如果确实需要对 `text` 字段启用 `fielddata`，可以通过修改字段映射来实现。以下是具体操作步骤： 1. **更新字段映射** 使用 `_mapping` API 更新索引中的字段定义，将 `fielddata` 设置为 `true`。 ```json PUT /bbs/_mapping { "properties": { "publishTime": { "type": "text", "fielddata": true } } } ``` 注意：启用 `fielddata` 可能导致内存占用显著增加，因此需要根据实际需求谨慎使用[^2]。 2. **监控 Fielddata 内存使用情况** 为了确保性能稳定，建议定期监控 `fielddata` 的内存使用情况。可以使用以下命令查看相关统计信息： - 查看索引级别的 `fielddata`： ```bash GET /_cat/fielddata?v ``` - 查看主机级别的 `fielddata`： ```bash GET /_stats/fielddata?level=indices ``` - 查看字段级别的 `fielddata`： ```bash GET /_nodes/stats/indices/fielddata?fields=* ``` 这些命令可以帮助识别哪些字段占用了较多内存[^3]。 #### 解决方案 2：使用 Keyword 字段替代 更推荐的方式是使用 `keyword` 类型字段替代 `text` 字段进行排序和聚合操作。Elasticsearch 支持通过 `multi-fields` 定义同时包含 `text` 和 `keyword` 类型的字段。 1. **定义多字段映射** 在创建索引时，定义一个包含 `text` 和 `keyword` 子字段的字段结构： ```json PUT /bbs { "mappings": { "properties": { "publishTime": { "type": "text", "fields": { "keyword": { "type": "keyword" } } } } } } ``` 2. **使用 Keyword 字段进行排序或聚合** 在查询中，使用 `publishTime.keyword` 字段进行排序或聚合操作： ```json POST /bbs/_search { "sort": [ { "publishTime.keyword": { "order": "asc" } } ] } ``` 这种方式避免了启用 `fielddata` 带来的内存问题，同时提供了高效的排序和聚合能力[^1]。 ### 总结 - 如果必须对 `text` 字段启用 `fielddata`，可以通过更新字段映射实现，但需注意内存开销。 - 更优的解决方案是使用 `keyword` 类型字段替代 `text` 字段进行排序和聚合操作，通过 `multi-fields` 实现两者的兼容性。 ```python # 示例代码：Python 脚本更新字段映射 from elasticsearch import Elasticsearch es = Elasticsearch() # 更新字段映射 es.indices.put_mapping( index="bbs", body={ "properties": { "publishTime": { "type": "text", "fielddata": True } } } ) ```
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

宇宙超级无敌程序媛

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值