带你读《Elastic Stack 实战手册》之40:——3.4.2.21.Aggregations(1)

简介: 带你读《Elastic Stack 实战手册》之40:——3.4.2.21.Aggregations(1)

3.4.2.21.Aggregations


创作人:扈臣聪、孙斌

审稿人:刘帅

 

一、基本概念

 

1、什么是聚合

 

在数据分析的过程中,我们通常会对有相同属性的数据集进行分类、计算,从而得到该数据某个或某些属性上在时间维度、地理维度等呈现的分布效果。聚合(Aggregations)根据搜索/查询文档上下文获得的数据集构建分析数据信息的工作单元。我们可以通过组合的方式完成复杂的数据分析和输出。

 

每种聚合都有特定的用途和输出结果,主要包含以下三个种类:

 

l 指标聚合(Metrics)

l 跟踪计算数据分析单元中的数据指标。

l 桶聚合(Bucket)

l 对数据文档进行分组,并按照分组的形式返回每组中的数据。

l 管道聚合(Pipeline)

l 从其他聚合结果中进行的聚合。

 

聚合功能为 Elasticsearch 注入了统计分析的血统,使用户在面对大数据提取统计指标时变得游刃有余。ES 聚合有丰富的聚合函数,可以满足绝大多数用户的需求,同时聚合结果会实时返回给用户。

 

1)指标概念(Metric)

 

对数据集内的数据进行最大值、最小值、平均值、求和等指标的计算,类似于 SQL 中的 max、


2)桶概念(Bucket)

 

又叫分组聚合,类似分类一样,在进行桶聚合时,评估每个文档的存储桶条件(分类),当满足存储桶条件时,就将该文档放入到对应的存储桶中。最终得到一个桶列表(不同的分类),每个桶中放着属于该桶的文档。例如按照 “地区” 聚合,一个人将被分到北京桶或上海桶或其他桶里。

 

3)聚合的结构

 

聚合的基本结构为:

 

{
  "aggregations": {
    "<aggregation_name>": {
      "<aggregation_type>": {
       <aggregation_body>
      }
    }
  }
}

其中 aggregations(可以简写为 aggs)为聚合操作的关键字,操作的对象是数据结构。每一个聚合关联一个用户自定义的逻辑聚合名(即 aggregation_name,例如平均年龄可以定义为 my_avg_age),这些逻辑名可以唯一地表示响应中的聚合结果。每一个聚合拥有一个特定的类型,比如平均值聚合为 avg,每一种聚合会根据聚合的性质定义参数(比如,平均值聚合会要求指定聚合的字段)。

 

4)测试数据集


在学习、练习 Elasticsearch 的时候,常常需要一些测试数据。这个时候我们可以选择手动导入或者直接使用官方的测试数据。官方测试数据链接如下:https://www.elastic.co/guide/cn/kibana/current/tutorial-load-dataset.html,遵循操作步骤即可以完成数据导入。



《Elastic Stack 实战手册》——三、产品能力——3.4.入门篇——3.4.2.Elasticsearch基础应用——3.4.2.21.Aggregations(2) https://developer.aliyun.com/article/1229244

相关实践学习
以电商场景为例搭建AI语义搜索应用
本实验旨在通过阿里云Elasticsearch结合阿里云搜索开发工作台AI模型服务,构建一个高效、精准的语义搜索系统,模拟电商场景,深入理解AI搜索技术原理并掌握其实现过程。
ElasticSearch 最新快速入门教程
本课程由千锋教育提供。全文搜索的需求非常大。而开源的解决办法Elasricsearch(Elastic)就是一个非常好的工具。目前是全文搜索引擎的首选。本系列教程由浅入深讲解了在CentOS7系统下如何搭建ElasticSearch,如何使用Kibana实现各种方式的搜索并详细分析了搜索的原理,最后讲解了在Java应用中如何集成ElasticSearch并实现搜索。 &nbsp;
相关文章
|
SQL 自然语言处理 安全
PHP使用elasticsearch搜索安装及分词方法
为什么会用到这个ES搜索?
689 0
|
7天前
|
人工智能 JSON API
全网刷屏的 Jev 模型正式开放!一手实战测评 + 保姆级教程
全网爆火的 Jev 模型是什么?有什么用?怎么使用?怎么接入 AI 编程工具?效果真的好么?傻子可懂的 Jev 保姆级实战教程 + 项目实战测评来啦
7088 10
|
6天前
|
人工智能 测试技术 API
最近全网爆火的 Jev 到底是什么?适合干什么、怎么用,一篇讲透!
Jev是TypeSafe AI推出的“系统一模型”,不生成文本,专做毫秒级结构化决策:Choice(多选)、Score(打分)、Noul(是非概率)。响应快193倍、成本低444倍,适合工单路由、内容审核、测试定级等高频判断场景。
1443 4
最近全网爆火的 Jev 到底是什么?适合干什么、怎么用,一篇讲透!
|
6天前
|
人工智能 并行计算 PyTorch
秋叶 ComfyUI 2026 整合包 v3.2 完整部署教程:Python 3.13 + Torch 2.13 全栈升级
秋叶aaaki ComfyUI 2026年8月整合包v3.2正式发布!全面升级Python 3.13.11、PyTorch 2.13.0+cu130及ComfyUI v0.30.2,原生支持MiniMax H3、Wan 2.2、Qwen-Image-2.1等2026主流音视频/图像模型,解压即用,无需环境配置。
907 6
|
2天前
|
人工智能 JavaScript 芯片
DeepSeek 官方偷偷上传 Harness 桌面端安装包,我已经用上了。。附最新下载地址
DeepSeek Harness 官方的桌面端安装包被网友扒出来了,2 分钟讲明白如何使用,体验如何,适合作为 AI 编程工具么?附最新 Windows 和 Mac 双端的下载地址
914 0
|
19天前
|
人工智能 自然语言处理 安全
阿里云千问办公 QwenWork详细介绍:产品核心能力、典型场景、价格及常见问题解答
千问办公是阿里云推出的一站式AI办公平台,主打"不止于对话,更注重交付",依托通义千问旗舰大模型,用户一句话即可完成数据分析、PPT生成、视频剪辑等复杂任务,直接输出可用成果。产品深度打通钉钉生态与企业OA,覆盖桌面端、网页端,提供企业标准版198元/人/月等多档订阅方案,新用户注册即赠2000积分,适配工程师、HR、财务等多职业办公场景,成为能动手干活的"全能AI同事"。
3486 10
|
14天前
|
缓存 IDE Java
【保姆级】Android Studio下载、安装和汉化教程(2026最新)
Android Studio 是 Google 官方推出的免费 Android 应用开发集成环境,基于 IntelliJ IDEA,内置模拟器、调试器、性能分析及 Compose 界面工具,功能全面,文档丰富,是安卓开发首选工具。(239字)
1550 1
|
3天前
|
编解码 缓存 PyTorch
16G 显卡能跑 Qwen-Image 2.1 吗?
9月20日,阿里Qwen开源Qwen-Image-2.1:7B DiT图像模型+8B文本编码器+VAE,单模型支持文生图与图像编辑,原生输出2K PNG(含Alpha通道),支持10张参考图。在自建Qwen-Image-Bench达60.28分(开源模型第一),GenAI Showdown文生图排名7/15。16G显存可跑1024×1024(需INT8量化+ComfyUI优化),但2K需24G以上。注意其Qwen Research License限非商业用途。
448 1

热门文章

最新文章