7 Elasticsearch 篇之聚合分析入门

最新推荐文章于 2024-10-03 22:36:13 发布
最新推荐文章于 2024-10-03 22:36:13 发布
阅读量1.2k 收藏 7
点赞数 2
CC 4.0 BY-SA版权
分类专栏： Elastic学习笔记
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/bingdianone/article/details/86611509

文章目录

聚合分析简介

什么是聚合分析

·搜索引擎用来回答如下问题:

  • 请告诉我地址为上海的所有订单?
  • 请告诉我最近1天内创建但没有付款的所有订单?

.聚合分析可以回答如下问题:

  • 请告诉我最近1周每天的订单成交量有多少?
  • 请告诉我最近1个月每天的平均订单金额是多少?
  • 请告诉我最近半年卖的最火的前5个商品是哪些?

·聚合分析,英文为Aggregation ,是es除搜索功能外提供的针对es数据做统计分析的功能

  • 功能丰富,提供Bucket, Metric, Pipeline等多种分析方式,可以满足大部分的分析需求
  • 实时性高,所有的计算结果都是即时返回的,而hadoop等大数据系统一般都是 T+1级别的

请告诉我公司目前在职人员工作岗位的分布情况?
在这里插入图片描述
在这里插入图片描述
聚合分析作为search的一部分, api如下所示:
在这里插入图片描述
请告诉我公司目前在职人员工作岗位的分布情况?
在这里插入图片描述

聚合分析-分类

·为了便于理解, es将聚合分析主要分为如下4类

  • Bucket,分桶类型,类似SOL中的GROUP BY语法
  • Metric,指标分析类型,如计算最大值、最小值、平均值等等
  • Pipeline ,管道分析类型,基于上一级的聚合分析结果进行再分析
  • Matrix ,矩阵分析类型

metric聚合分析

主要分如下两类:

  • 单值分析,只输出一个分析结果
    • min,max,avg,sum
    • cardinality
  • 多值分析,输出多个分析结果
    • stats,extended stats
    • percentile, percentile rank
    • top hits

返回数值类字段的最小值
在这里插入图片描述
返回数值字段的最大值
在这里插入图片描述
一次返回多个聚合结果
在这里插入图片描述

Metric聚合分析-Cardinality

Cardinality ,意为集合的势,或者基数,是指不同数值的个数,类似SQL中的distinct count概念
在这里插入图片描述

最低0.47元/天 解锁文章

200万优质内容无限畅学
第11篇：你知道ElasticSearch聚合分析能力有多强?
老王随聊
05-31 1018
背景：目前国内有大量的公司都在使用 Elasticsearch，包括阿里、京东、滴滴、今日头条、小米、vivo等诸多知名公司。除了搜索功能之外，Elasticsearch还结合Kibana、Logstash、Elastic Stack还被广泛运用在大数据近实时分析领域，包括日志分析、指标监控等多个领域。 本节内容：ElasticSearch强悍聚合分析能力详解。 目录 1、ES的聚合Aggregations分类 1.1 度量聚合——metric 1.2 桶聚合——bucketing ...
Elasticsearch 之聚合分析入门
武培轩
03-22 439
本文主要介绍 Elasticsearch 的聚合功能，介绍什么是 Bucket 和 Metric 聚合，以及如何实现嵌套的聚合。 首先来看下聚合（Aggregation）： 什么是 Aggregation？ 首先举一个生活中的例子，这个是京东的搜索界面，在搜索框中输入“华为”进行搜索，就会得到如上界面，搜索框就是我们常用的搜索功能，而下面这些，比如分类、热点、操作系统、CPU 类型等是根据 ES...
elasticsearch7 聚合分析
哇哦~
09-26 389
什么是聚合 聚合的分类 Bucket & Metric Bucket Metric bucket的一个例子 加入Metrics 嵌套 续。。。。。。
Elasticsearch笔记（七）：聚合查询
热门推荐
布道
01-08 5万+
聚合框架有助于根据搜索查询提供聚合数据。聚合查询是数据库中重要的功能特性，ES作为搜索引擎兼数据库，同样提供了强大的聚合分析能力。它基于查询条件来对数据进行分桶、计算的方法。有点类似于 SQL 中的 group by 再加一些函数方法的操作。聚合可以嵌套，由此可以组成复杂的操作（Bucketing聚合可以包含sub-aggregation）。 聚合计算的值可以取字段的值，也可是脚本计算的结果。查...
ES聚合分析
qq_41497658的博客
11-06 359
前言 01 ES聚合类型 02 aggregations的语法结构 在学习之前，先掌握aggregations的语法结构：【注意aggregations关键字可使用aggs代替】 一、聚合起步 为了更加深刻的理解DSL聚合语法，这里是一个完整的案例，并且提供了DSL实现和sql语句实现，方便具象化、对照着理解 1、创建索引 1.1 创建索引DSL实现 (1) 创建索引cars put cars (2) 批量导入测试数据 POST /cars/transactions/_bulk {"index":{}
elasticsearch聚合查询
紫一
06-27 1183
1，terms 分组，利用field分组 GET /tvs/sales/_search { "size": 0, "aggs": { "popular_colors&a
操作es聚合操作并显示其他字段_Elasticsearch 之聚合分析入门
05-17
在 Elasticsearch 中，聚合操作是一种非常强大的数据分析工具，可以从数据中提取有意义的信息，帮助我们更好地了解数据。下面是一个简单的例子，演示如何使用聚合操作并显示其他字段。 假设你有一个存储了用户行为...
搜索引擎ElasticSearch实战讲义：从入门到精通
最新发布
02-22
在实际应用中，ElasticSearch不仅能够提供快速的全文检索，还能够执行复杂的聚合查询和分析功能，极大提升了业务场景中对数据的洞察力。 从技术角度来讲，ElasticSearch的倒排索引机制是其能够快速检索的核心技术之...
elasticsearch 聚合搜索
Lee_Suoer的博客
03-29 1634
bucket：一个数据分组 metric，就是对一个bucket执行的某种聚合分析的操作，比如说求平均值，求最大值，求最小值 先准备一些数据： 统计哪种颜色的电视销量最高 size：只获取聚合结果，而不要执行聚合的原始数据 aggs：固定语法，要对一份数据执行分组聚合操作 popular_colors：就是对每个aggs，都要起一个名字，这个名字是随机的，你随便取什么都ok term...
elasticsearch条件查询语句与聚合查询语句模板
lpp_dd的博客
06-12 7059
elasticsearch查询语句总结 1、条件查询语句 2、聚合查询语句 3、should字段和must字段一起使用 4、aggs嵌套聚合语句 5、interval字段与extended_bounds "range": { "relateData.callTime": { "gte": "2017-08-30 00:00:00" } }
Elasticsearch分片原理
01-07
ES集群的基本概念 Cluster 代表一个集群，集群中有多个节点，其中有一个为主节点，这个主节点是可以通过选举产生的，主从节点是对于集群内部来说的。es的一个概念就是去中心化，字面上理解就是无中心节点，这是对于集群外部来说的，因为从外部来看es集群，在逻辑上是个整体，你与任何一个节点的通信和与整个es集群通信是等价的 Shards主分片 代表索引分片，es可以把一个完整的索引分成多个分片，这样的好处是可以把一个大的索引拆分成多个，分布到不同的节点上。构成分布式搜索。分片的数量只能在索引创建前指定，并且索引创建后不能更改,这里和索引分片的算法有关,因为是通过取模算法去判断分到哪,如果改变了 就
Elasticsearch 聚合
2012年开始工作，全栈开发老兵，目前已是一个老师，分享这么多年的心得体会
12-24 408
聚合框架收集搜索查询选择的所有数据，并由许多构建块组成，这有助于构建数据的复杂摘要。聚合的基本结构如下所示 "aggregations" : { "" : { "" : { } [,"meta" : { [] } ]? [,"aggregations" : { []+ } ]? } [,"" : { ... } ]* } 聚合有不同的类型，每种类型都有自己的目的。本章将详细讨论这些问题。 一、指标聚合 这些聚合有助于根据聚
Elasticsearch 聚合检索 (分组统计)
cxs812760493的博客
09-20 4469
"size": 0,"aggs": {"terms": {"order": { "avg_price": "desc" } // 根据下述统计的结果排序},"aggs": {与#2.1节内容相似, 区别在于按照价格排序显示了.
elasticsearch——嵌套聚合（日志分析）
qq_26915707的博客
11-01 455
1.十月每天各用户访问量 { "size": 0, "query": { "match_all":{} }, "aggs": { "group_time": { "date_histogram": { "field": "time", "interval": "1d", "time_zone": "+0...
Elasticsearch——数据聚合、数据同步与集群搭建
代码星辰的博客
10-03 1221
本文介绍 Elasticsearch 的数据聚合、数据同步与集群搭建的相关知识。
springboot集成elasticsearch实现增删改查及聚类
weixin_43945716的博客
03-25 359
pom.xml <!--elasticSearch整合--> <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-data-elasticsearch</artifactId> </dependency> #====================== 配置elasticSearch
Elasticsearch聚集统计
qq_33192811的博客
10-27 262
Elasticsearch不仅是一个大数据搜索引擎，也是一个大数据分析引擎。它的聚集(aggregation)统计的REST端点可用于实现与统计分析有关的功能。Elasticsearch提供的聚集分为三大类。(1) 度量聚集(Metric aggregation)：度量聚集可以用于计算搜索结果在某个字段上的数量统计指标，比如平均值、最大值、最小值、总和等。
Elasticsearch：使用 Elasticsearch categorize_text 聚合对日志进行分类
Elastic 中国社区官方博客
03-16 836
​ 作为一名前系统管理员，我个人对 categorize_text 对探索日志的意义感到兴奋。 这种新的 Elasticsearch 功能是我希望在那些日子里拥有的东西。 花费大量时间筛选大量日志以找出令人不安的模式。 categorize_text 在查询时将流行的日志模式带到最前沿。 此功能与 Elasticsearch 已经广泛且强大的聚合框架相结合，可缩短获取信息的时间。 探索成山的日志变得更加容易。 在 Kibana 中自动集群日志、计算统计数据和可视化是任何 SRE 或管理员的有力工具。
关于ElasticSearch的聚类时出现fielddata=true问题
LiDong的博客
12-11 2748
在ElasticSearch中默认fielddata默认是false的，因为开启Text的fielddata后对内存的占用很高。 如果进行聚合查询时候： GET /megacorp/employee/_search { "aggs": { "all_interests": { "terms": { "field": "interests" } } } } ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值