elasticsearch2.2多表联查分析及其hdsf支持说明

最新推荐文章于 2025-02-14 14:00:07 发布
原创 最新推荐文章于 2025-02-14 14:00:07 发布 · 5.6k 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文主要分析了Elasticsearch在2.2版本中对多表联查不支持的问题，通过案例探讨了如何通过添加标记字段实现类似功能。同时，提到了Elasticsearch与HDFS的集成问题，指出2.2版本的插件兼容性和文档不足，建议等待新版本以获得更好的支持。

一、多表联查问题

首先开门见山的说，elasticsearch对多表的联查是不支持的，暂时只能说支持“过车数据可以打标记”

1.分析案例一

网上有个案例地址为：

http://www.wowtools.org/blog/articles/2015/09/08/1441692036407.html

截图如下：

 

图中1和2是建立学生和班级关系

图中3和

最低0.47元/天 解锁文章
【Elasticsearch】 es join 多表关联如何设计
九师兄
05-16 5702
1.概述 多表关联如何设计？ 1.1 为什么会有多表关联 多表关联是被问的最多的问题之一。几乎每周都会被问到。 主要原因：常规基于关系型数据库开发，多多少少都会遇到关联查询。而关系型数据库设计的思维很容易带到 ES 的设计中。 1.2 多表关联如何实现 1.2.1 方案一 方案一：多表关联视图，视图同步 ES MySQL 宽表导入 ES，使用 ES 查询+检索。 适用场景：基础业务都在 MySQL，存在几十张甚至几百张表，准备同步到 ES，使用 ES 做全文检索。 将数据整合成一个宽表后写到 ES，宽表的.
完整教程：Springboot 2.2整合elasticsearch 7.x (spring-boot-starter-data-elasticsearch)
热门推荐
程裕强的专栏
11-06 8万+
请注意，SpringBoot是2.2.0.RELEASE才兼容elasticsearch 7.x 废话不多说，直接上代码。 1、pom <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001...
thinkphp中使用Elasticsearch 7.0进行多表的搜索
qq_27878777的博客
09-02 2110
提示：thinkphp中使用Elasticsearch 7.0进行多表的搜索：提示：以下是本篇文章正文内容，下面案例可供参考提示：这是简单例子, 注意’fields’ => [‘title’, ‘content’], 尝试使用搜索number型字段,索引报错, 貌似只支持txt类型字段搜索例如：以上就是今天要讲的内容，本文仅仅简单介绍了Elasticsearch的使用。
Elasticsearch处理表关联关系的N种方式
nandao158的博客
12-30 5017
Elasticsearch处理表关联关系的N种方式
mysql 分库后怎么通过ES数据异构查询 多个库的数据
u013452337的博客
12-10 2227
前段时间与同事一起为产品接入了 Elasticsearch 框架技术。从参与方案会议到搭建开发上线过程中有很多讨论点，故产生本文，希望藉此总结和分享一些经验。 1. 业务模型 接触已有的业务时，数据模型是最早需要知道的信息。我和同事负责接入 Elasticsearch 的产品是一个业务繁多的通讯录，简化下来就是 3 个关键的模型，如下： 部门（Department） 人员（User） 标...
关于 Elasticsearch 段合并，这一篇说透了！
铭毅天下Elasticsearch
10-10 9232
0、事出有因 您好，目前我需要将只读索引segment合并，有几个问题想要求教1、 segment是不是合并到一个最好，及max_num_segments=12、合并的时候，通过POST...
ElasticSearch 如何像 MySQL 一样做多表联合查询？
hellozhxy的博客
01-03 4955
今天我们来看 Es 中的嵌套查询与父子文档，这两个东西很有来头！关系型数据库中的多表联合查询需求在 Es 中可以用它们来解决。
elasticsearch-sql-2.2.0.1.zip
03-11
Elasticsearch-SQL是针对Elasticsearch的一款社区开发插件，它的主要功能是将传统的SQL查询语句引入到Elasticsearch之中，使得用户能够通过熟悉的SQL语法来操作和查询Elasticsearch索引中的数据，极大地降低了非编程...
Elasticsearch 2.2专用预构建IK中文分词器
在Elasticsearch 2.2版本中，通过将IK分词器作为插件安装到Elasticsearch的plugins目录下，可以实现对Elasticsearch进行中文分词处理的能力。安装后，用户就可以直接在Elasticsearch中使用IK分词器对中文内容进行...
mybatisplus多表关联查询_Excel——日期数据/多表关联查询/数据分组
weixin_39945810的博客
12-04 635
这篇文章将介绍用Excel处理数据的一些小技巧，包括实际案例哦。日期数据如何处理多表关联查询（利用vlookup函数）如何对数据进行分组（利用vlookup函数）一、日期数据如何处理下面是从公众号后台导出的数据，包含有三个字段，分别是：标题、日期、当日涨粉量。案例可以看到，”日期“列的数据并不是统一的格式，现在我们要将它转换成标准的日期格式。解决方法：选中列——数据选项卡——分列——下一步——下一...
Elasticsearch的索引，单field索引和多field的联合索引
01-20
作为一个分布式可扩展的实时搜索和分析引擎，一个建立在全文搜索引擎 Apache Lucene基础上的搜索引擎。Elasticsearch 可以用于：分布式实时文件存储，并将每一个字段都编入索引，使其可以被搜索；实时分析的分布式搜索引擎；可以扩展到上百台服务器，处理PB级别的结构化或非结构化数据。 Elasticsearch的文件存储   Elasticsearch是面向文档型数据库，一条数据在这里就是一个文档，用JSON作为文档序列化的格式，比如下面这条用户数据： { name : XiaoMing, sex : Male, age
elasticsearch多个索引的数据联查
柳牧之的博客
01-16 3万+
1.数据入库 PUT /my_index/user/1 { "name": "John Smith", "email": "john@smith.com", "dob": "1970/10/24" } PUT /your_index/blogpost/2 { "title": "Relationshi
elasticsearch-组合多查询
豆豆不在了
02-15 3613
组合多查询 现实的查询需求从来都没有那么简单；它们需要在多个字段上查询多种多样的文本，并且根据一系列的标准来过滤。为了构建类似的高级查询，你需要一种能够将多查询组合成单一查询的查询方法。 你可以用 bool 查询来实现你的需求。这种查询将多查询组合在一起，成为用户自己想要的布尔查询。它接收以下参数： must 文档 必须 匹配这些条件才能被包含进来。 must
elasticsearch多表关联查询_Mybatis【15】 Mybatis如何实现一对一的情况多表关联查询？...
weixin_42361733的博客
01-18 906
注：代码已托管在GitHub上，地址是：https://github.com/Damaer/Mybatis-Learning ，项目是mybatis-11-one2one，需要自取，需要配置maven环境以及mysql环境(sql语句在resource下的test.sql中)，觉得有用可以点个小星星。docsify文档地址在：https://damaer.github.io/Mybati...
【Elasticsearch】多字段查询方式汇总
最新发布
risc123456的博客
02-14 1312
`type`：指定匹配策略（如 `best_fields`, `most_fields`, `cross_fields`, `phrase`, `phrase_prefix`）。- **用途**：将查询词拆分后，分散到多个字段中匹配（如处理姓名分散在 `first_name` 和 `last_name` 的场景）。- **用途**：通过 `bool` 查询的 `should`, `must`, `filter` 等子句组合多个字段的条件。
elasticsearch实践篇：跨表join查询补充篇
布道
07-31 2万+
在上一篇elasticsearch实践篇：跨表join查询中讲过2种方式，其实并不全面。ES还有2种方法来处理数据实体间的关联关系：Nested objects（嵌套文档）和Parent/child relationships（父子文档）。 1. Application-side joins（服务端Join或客户端Join） 这种方式，索引之间完全独立（利于对数据进行标准化处理，如便于上述两种...
Elasticsearch在Hdfs上build的实现及优化
weixin_33851177的博客
11-29 553
引言 前段时间参与Elasticsearch离线平台化项目，主要是做一套Elasticsearch的buildservice, 一方面通过bahamut的数据流定义能力，直接对接用户原始数据，实现全增量一体化，解决用户准备数据的痛点。另一方面，社区的elasticsearch并没有全量增量的概念，所有数据都是用户通过sdk一条一条发给es在线服务构建索引...
Elasticsearch之join关联查询
星空的风fly
11-19 1万+
Elasticsearch提供了类似于SQL JOIN的关联查询，通过has_child/has_parent可以实现一对多关系的父子表数据查询。但是其损耗也是比较大的，在使用的时候要根据分片数量的多少和预估数量量级的大小，提前做好性能测试
ES实现三表关联查询+条件过滤
lgq2016的博客
10-17 4762
很多时候mysql的表之间是一对多的关系，比如库信息表（元数据信息），表信息表（元数据信息），字段信息表（元数据信息）。ElasticsSearch（以下简称ES）处理这种关系虽然不是特别擅长（相对于关系型数据库），因为ES和大多数 NoSQL 数据库类似，是扁平化的存储结构。索引是独立文档的集合体。为了便于描述下面的demo内容，现在先介绍一下表结构demo内容(表名称：字段1，字段2，字段3......)不过ES目前毕竟发展到8.x版本了， 已经有几种可选的方式能够高效的支持这种一对多关系的映射。
Elasticsearch 多表联查
06-10
在Elasticsearch中，没有像关系型数据库中的多表联查（JOIN）操作，因为Elasticsearch是一个文档数据库，不是关系型数据库。但是，可以通过一些技巧实现类似的功能。 一种方法是使用嵌套文档（nested documents）来实现多表联查。嵌套文档是指在一个文档中嵌套另一个文档，可以通过嵌套文档来表示两个表之间的关系。例如，假设我们有两个表“users”和“posts”，其中“users”表有一个字段“user_id”，“posts”表有一个字段“user_id”，表示用户和文章之间的关系。我们可以将“posts”表中的每一行数据作为“users”表中的一个嵌套文档，从而实现多表联查的功能。 另一种方法是使用父子文档（parent-child documents）来实现多表联查。父子文档是指一个文档可以作为另一个文档的父文档或子文档，可以通过父子文档来表示两个表之间的关系。例如，假设我们有两个表“users”和“comments”，其中“users”表有一个字段“user_id”，“comments”表有一个字段“user_id”，表示用户和评论之间的关系。我们可以将“users”表中的每一行数据作为“comments”表中的一个父文档，从而实现多表联查的功能。 需要注意的是，在使用嵌套文档或父子文档时，需要考虑数据的更新、删除和查询等操作的复杂性。因此，需要根据具体的应用场景来选择适合的方案。
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值