es resthighlevelClien高亮搜索富文本格式字段丢失问题

最新推荐文章于 2024-06-25 18:44:49 发布

勒布朗.马克思

最新推荐文章于 2024-06-25 18:44:49 发布

阅读量984

点赞数 1

分类专栏：填坑 elasticsearch

本文链接：https://blog.youkuaiyun.com/qq_36715271/article/details/117779682

版权

在项目中遇到使用RestHighLevelClient进行高亮搜索时，富文本格式的字段内容出现丢失现象。例如，包含"<p>什么是快乐星球</p>"的字段在搜索"快乐"后，"星球"部分无法正常显示。经过排查，问题在于配置参数，通过调整`fragmentSize`（最大高亮分片数）和`numOfFragments`（从第一个分片开始获取高亮片段的数量）可以解决这个问题。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

问题背景:
项目中有些索引字段是富文本格式字符串(使用了富文本编辑器的内容没有将html标签过滤就存入了es里面)，使用RestHighLevelClient api高亮搜索关键字,发现匹配返回的内容有缺失情况，比如es里面是
“<p>什么是快乐星球</p>”
高亮搜索快乐，发现后面的星球就没了

解决办法:

HighlightBuilder highlightBuilder = new HighlightBuilder().field("content")
                .fragmentSize(800000

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

勒布朗.马克思

关注关注

1
点赞
踩
1

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

es html标签,Elasticsearch如何使用同义词搜索富文本html标签过滤以及分权限过滤搜索结果...

weixin_29863401的博客

06-22

1086

如何建立恰当的索引结点{"mappings": {"data": {"properties": {"answer_id": {"type": "long"},"content": {"type": "text","analyzer": "html_analyze"},"question_id": {"type": "long"},"title": {"type": "text","analyzer...

ES7.7中highlight的结果丢失部分文本的bug

aben_sky的专栏

09-05

1484

ES 7中的highlight有bug, 会导致某些情况下高亮文本丢失前面一部分内容

参与评论您还未登录，请先登录后发表或查看评论

成功解决ES高亮内容引起的字段显示不一致问题

一勺菠萝丶的博客

06-25

1050

在处理搜索引擎（如Elasticsearch）结果时，常见需求之一是对用户搜索的关键词进行高亮显示，这有助于用户快速识别搜索结果为何与其查询相关。但在实际应用中，如果处理不当，直接使用高亮片段可能会导致原始数据的部分内容丢失。

ElasticSearch添加高亮后，文本显示不全问题

qq_42292373的博客

01-20

2569

直接看代码的最后片段 public NativeSearchQuery getNativeSearchQuery(ProcessLog condition, PageParam pageParam) { Sort sortBy = Sort.by(CaseFormat.LOWER_UNDERSCORE.to(CaseFormat.LOWER_CAMEL, pageParam.getSortCondition())).descending(); SearchSourceBuil

elasticsearch 高亮显示解决长字段显示不全问题

RanGe的博客

09-24

5489

elasticsearch 高亮显示解决长字段显示不全问题Elasticsearch 2.20 高亮显示highlightfast-vector-highlighterpostings-highlighter默认高亮显示html标记字典内容过长解决 Elasticsearch 2.20 高亮显示 Elasticsearch中的高亮显示是来源于lucene的功能，他允许在一个或者多个字段上突出显示搜索内容， lucene支持三种高亮显示方式highlighter, fast-vector-highlight

springcloud全家桶个人博客系统（五）RestHighLevelClient实现elasticsearch全文检索及结果高亮

pycharm_u的博客

09-18

2683

一、前言上个版本使用springdata elasticsearch,但是也只是支持到了elasticsearch 2点几的版本，并不适合继续深入的挖掘。本次使用elasticsearch6.4.2版本，使用RestHighLevelClient客户端，吐嘈一下，transport客户端真的恶心，各种莫名其妙的错误，什么堆栈溢出，找不到节点，反正不好用，个人感觉。二、配置 1.appli...

java整合ElasticSearch内容高亮不全的原因

*** 棋了个怪_Rachel ***

01-12

1702

查询因高亮不全导致的内容确实添加下面两项配置,如果你要高亮如文字内容等有很多字的字段,必须配置,不然会导致高亮不全,文章内容缺失等 highlighter.fragmentSize(800000); //最大高亮分片数 highlighter.numOfFragments(0); //从第一个分片获取高亮片段 //设置高亮 HighlightBuilder highlighter = new HighlightBuilder(); ...

Elasticsearch RestHighLevelClient 已标记为被弃用它的替代方案 Elasticsearch Java API Client 的基础教程及迁移方案

热门推荐

无枫的博客，分享Java及Vue方向的技术文章

03-07

4万+

在Elasticsearch7.15版本之后，Elasticsearch官方宣布弃用了它的高级客户端RestHighLevelClient。同时推出了全新的Java API客户端Elasticsearch Java API Client。 Elasticsearch Java API Client 支持除 Vector tile search API 和 Find structure API 之外的所有 Elasticsearch API。且支持所有API数据类型，并且不再有原始JsonValue属性。它

es-bilibili-RealWilliamWang-notePic_富文本版

ZSZJ_SL的博客

09-08

161

filter查询 query查询 _search?? 批量准备数据：

富文本-去除标签/展示富文本的样式

Change!

12-02

2736

富文本是常用的文本编辑器。通常我们用到的是Editor、Tinymce，或者根据自己的需求将两者结合，自己封装下也可以。不过我们今天探讨的是富文本在table列表的展示。如何用最简单的方法：去除富文本的标签/转换成编辑完富文本的样式：只用v-html即可 <el-table-column prop="info" label="更新内容" width="450"> <template slot-scope="{row}" > <div v-html=

elasticsearch富文本查询高亮显示时避免标签嵌套

nayi_224的博客

06-26

1056

很明显时一个非法的html格式，并且常规方法难以修复。一个常见的解决方法时创建索引时添加html标签过滤。elasticsearch版本：8.7.0。使用kibana操作。

SpringBoot SpringBoot 开发实用篇 4 数据层解决方案 4.15 ES 文档操作

谢谢你们的关注

11-20

327

SpringBoot SpringBoot 开发实用篇 4 数据层解决方案 4.15 ES 文档操作

Java 操作RestHighLevelClient查询详解

ch98000的博客

09-02

2万+

top_hits应用场景：当获取分桶后，桶内最匹配的顶部文档列表。@Test//1.创建 SearchRequest搜索请求,并指定要查询的索引//2.创建 SearchSourceBuilder条件构造。// top_hits示例：指定size，不同工种中，年纪最大的3个员工的具体信息.size(3)//嵌套聚合//3.将 SearchSourceBuilder 添加到 SearchRequest中//4.执行查询//5.解析查询结果。

45、什么是ElasticSearch

weixin_40968009的博客

11-16

359

什么是ElasticSearch

Elasticsearch——RestHighLevelClient

qin_weilong的博客

07-11

3822

介绍 java rest client有两个实现类，分别是RestClient和RestHighLevelClient。前者是一个低级客户端，通过Http与elasticsearch集群进行通信，可以做到负载均衡、故障转移、持久化链接、自动发现集群节点等功能，同时支持所有elasticsearch版本，但是需要自己对请求和相应做编解码（自己写JSON）；后者是一个高级客户端，对增删改差进行了封...

ElasticSerach RestHighLevelClient 查询，高亮分页查询，scroll分页查询，scroll 高亮查询工具类

lovo1的专栏

01-10

2765

ElasticSerach RestHighLevelClient 查询，高亮分页查询，scroll分页查询，scroll 高亮查询

3.RestClient查询文档

weixin_51472505的博客

04-26

1042

文档的查询同样适用昨天学习的 RestHighLevelClient对象，基本步骤包括： 1）准备Request对象 2）准备请求参数 3）发起请求 4）解析响应 3.1.快速入门我们以match_all查询为例 3.1.1.发起查询请求代码解读：第一步，创建SearchRequest对象，指定索引库名第二步，利用request.source()构建DSL，DSL中可以包含查询、分页、排序、高亮等 query()：代表查询.

使用JavaRestClient查询文档&排序、分页、高亮

LINING_GG的博客

12-06

831

使用JavaRestClient查询文档&排序、分页、高亮

Elasticsearch检索高亮不正确，不精确问题

*** 棋了个怪_Rachel ***

02-11

3162

问题场景：搜索 “a” 高亮 "A8A",,,,, 分词器：IK分词器确认分词结果：下图说明已经正确分词！确认高亮效果：换一种高亮器查询效果：总结：当高亮显示不精确的时候，要从以下两方面找问题： 1.分词器是否分词准确2.高亮器是否满足你的要求，不满足换一种高亮器查看效果我之前原默认的高亮器（plain）不能满足要求，后来使用unified高亮器解决了高亮不精确的问题。 ...

大彩滑动选择控件

最新发布

03-20

### 大彩滑动选择控件的实现方式大彩滑动选择控件是一种常见的前端验证机制，通常用于防止机器人自动化攻击。其实现原理主要依赖于 HTML5 的 Canvas 和 JavaScript 来绘制图像并处理用户的交互行为。以下是基于 React 的一种实现方案： #### 绘制剪切路径通过 `createClipPath` 函数可以定义一个随机形状作为目标区域的一部分[^1]。此函数接受绘图上下文 (`ctxFragment`)、片段大小 (`fragmentSize`) 和样式索引 (`styleIndex`) 参数来创建不规则的裁剪路径。 ```javascript function createClipPath(ctxFragment, fragmentSize, styleIndex) { const clipWidth = fragmentSize.width / 2; const clipHeight = fragmentSize.height; ctxFragment.clearRect(0, 0, fragmentSize.width, fragmentSize.height); ctxFragment.beginPath(); switch (styleIndex % 3) { // 随机风格切换 case 0: ctxFragment.rect(fragmentSize.width / 4, 0, clipWidth, clipHeight); break; // 矩形 case 1: ctxFragment.arc(fragmentSize.width * Math.random(), clipHeight * Math.random(), clipWidth / 2, 0, Math.PI * 2); break; // 圆形 default: ctxFragment.moveTo(fragmentSize.width / 4, 0); ctxFragment.lineTo(fragmentSize.width / 2, clipHeight); ctxFragment.lineTo(fragmentSize.width / 4, clipHeight); ctxFragment.closePath(); // 三角形 } ctxFragment.clip(); } ``` #### 创建验证码组件 React 中可以通过状态管理拖拽事件以及校验逻辑。下面是一个简单的例子展示如何构建这样的组件。 ```jsx import React, { useState } from 'react'; const SlideVerify = () => { const [offsetX, setOffsetX] = useState(null); const canvasRef = React.useRef(null); const handleDragStart = (e) => { e.dataTransfer.setDragImage(new Image(), 0, 0); }; const handleDrop = (e) => { const targetPosition = offsetX || 0; if (Math.abs(targetPosition - correctPos) < toleranceRange) { alert('验证成功！'); } else { alert('验证失败，请重试'); } }; let correctPos = Math.floor(Math.random() * (canvasRef.current?.width - blockWidth)); const toleranceRange = 5; // 容差范围像素数 return ( <> <div> {/* 显示背景 */} <img src="background.png" alt="" /> {/* 可移动块 */} <div draggable onDragStart={handleDragStart} onDrop={(e) => handleDrop(e)}></div> {/* Canvas 层叠显示遮罩效果 */} <canvas ref={canvasRef}></canvas> </div> </> ); }; export default SlideVerify; ``` 上述代码展示了基本框架结构，实际应用还需要进一步完善细节如动态加载图片资源、优化用户体验等。 #### 总结大彩滑动选择控件的核心在于利用 Canvas 技术生成复杂的几何图案，并结合鼠标/触摸屏操作完成匹配过程。以上提供了基础思路及其部分源码示例。