elasticsearch系列(二)

本文涉及的产品
检索分析服务 Elasticsearch 版,2核4GB开发者规格 1个月
简介: elasticsearch系列(二)

以一个30个节点的集群为例,介绍一下ES的集群角色

在上面每个框代表一个节点。

主节点:master-node,职责:控制整个集群的元数据的管理:索引的分片信息,主副本的信息,分片的节点对应的关系。index的,就只有一个master节点,单节点的,setting配置信息。类似于kafka中的controller,类似于rocketmq的namesever

合格的主节点:候选人:和master保证心跳。会参会选举,时时刻刻等待着变成master。我们配置的都是候选人,系统动态的过程选出master节点。

数据节点:管理所有的主副分片,存数据的。类似kafka中的Broker:不光是控制节点,还是非控制节点,它都承担了数据节点的角色,管理数据的,它都管理了topic下的potation的。类似于rocketmq的broker:只不过主分片:master,和副分片是分开的:slave。在es中一个node既能管理所有的主副分片。类似于redis集群中对应的是node。

数据节点的职责:

1、该节点用于建立文档索引,接收应用创建索引

2、接收用户的搜索请求

搜索请求有两个阶段:

①、在请求query阶段,协调节点将请求转发到 保存数据的数据节点

在每个数据节点在本地执行请求并将其结果返回给协调节点

②、在收集fetch阶段,协调节点将每个数据节点的结果汇集为单个全局结果集

协调节点:如果我要检索我是中国人,假设在每个分片都有文档。30个分片里面分成30个部分,这个汇总和合并,排序的工作由协调节点来做,最终结果的挑选由协调节点来做,本身没有任何的分片,不存储数据。

d4af01a44c278c49824305084474cb2a.jpg

ingest转换节点:在写的过程当中,转换节点用的,写的时候写到Ingest节点,做数据的预处理,过滤,数据类型的转换。写到正本上,满足对数据预处理的,也可以让协调节点来做.

a146e986280962b06d7ed394cfabb199.png

任何的节点承担上面的任何的角色一个或者多个,通过简单的配置就可以了。

部落节点:超大的集群会有这个角色。有专门的程序来配置的,是另一个包来配置的

相关实践学习
使用阿里云Elasticsearch体验信息检索加速
通过创建登录阿里云Elasticsearch集群,使用DataWorks将MySQL数据同步至Elasticsearch,体验多条件检索效果,简单展示数据同步和信息检索加速的过程和操作。
ElasticSearch 入门精讲
ElasticSearch是一个开源的、基于Lucene的、分布式、高扩展、高实时的搜索与数据分析引擎。根据DB-Engines的排名显示,Elasticsearch是最受欢迎的企业搜索引擎,其次是Apache Solr(也是基于Lucene)。 ElasticSearch的实现原理主要分为以下几个步骤: 用户将数据提交到Elastic Search 数据库中 通过分词控制器去将对应的语句分词,将其权重和分词结果一并存入数据 当用户搜索数据时候,再根据权重将结果排名、打分 将返回结果呈现给用户 Elasticsearch可以用于搜索各种文档。它提供可扩展的搜索,具有接近实时的搜索,并支持多租户。
相关文章
|
5月前
|
自然语言处理 网络架构 索引
Elasticsearch7.1之cerebro使用(一)
Elasticsearch7.1之cerebro使用(一)
62 1
|
6月前
|
JSON 搜索推荐 API
Elasticsearch
Elasticsearch是一个开源的分布式搜索引擎和数据分析引擎,基于Apache Lucene库构建。它提供了高度可扩展且实时的搜索功能,以及各种数据处理和分析功能。
68 4
|
6月前
|
搜索推荐 关系型数据库 MySQL
【Elasticsearch】初识elasticsearch
【Elasticsearch】初识elasticsearch
70 1
|
存储 关系型数据库 MySQL
Elasticsearch(一)
Elasticsearch(一)
67 0
|
存储 缓存 索引
Elasticsearch(四)
Elasticsearch(四)
59 0
|
自然语言处理 索引
Elasticsearch(三)
Elasticsearch(三)
63 0
|
存储 JSON 自然语言处理
【Elasticsearch】初识elasticsearch(下)
【Elasticsearch】初识elasticsearch(下)
72 0
|
存储 监控 搜索推荐
【Elasticsearch】初识elasticsearch(上)
【Elasticsearch】初识elasticsearch
73 0
一起来学ElasticSearch(十)
前言 目前正在出一个Es专题系列教程, 篇幅会较多, 喜欢的话,给个关注❤️ ~ 承接上文,上节给大家讲的es聚合还有一点内容,本节给大家更完~ 本文偏实战一些,为了方便演示,本节示例沿用上节索引,好了, 废话不多说直接开整吧~ 聚合排序 我们如何在聚合结果中进行自定义字段排序呢?