带你读《Elastic Stack 实战手册》之48:——3.5.7.索引生命周期管理(2)

本文涉及的产品
检索分析服务 Elasticsearch 版,2核4GB开发者规格 1个月
简介: 带你读《Elastic Stack 实战手册》之48:——3.5.7.索引生命周期管理(2)

《Elastic Stack 实战手册》——三、产品能力——3.5 进阶篇——3.5.7.索引生命周期管理(1) https://developer.aliyun.com/article/1228516


四个阶段支持的行为

 

索引生命周期每个阶段支持的行为如下:

 

l Hot

l Set Priority

l Unfollow

l Force Merge

l Rollover

 

l Warm

l Set Priority

l Unfollow

l Read only

l Allocate

l Shrink

l Force Merge

l Migrate

 

l Cold

l Set Priority

l Unfollow

l Allocate

l Migrate

l Freeze

l Searchable Snapshot

 

l Delete

l Wait For Snapshot

l Delete


行为

 

Set Priority

 

设置索引的优先级,一旦进入到某阶段,就设置索引的优先级,节点重新启动后,优先级较高的索引将会优先恢复。

 

参数:


l priority: 正整数。

 

例如:设置 warm 阶段 index 的优先级为 50

 

PUT _ilm/policy/my_policy
{
  "policy": {
    "phases": {
      "warm": {
        "actions": {
          "set_priority" : {
            "priority": 50
          }
        }
      }
    }
  }
}

Rollover

 

当 index 满足三个条件中的任何一个时,会将别名指向新生成的索引。



参数:

 

l max_age

l 达到索引创建的最大时间

 

l max_docs

l 达到指定的文档数后

 

l max_size

l index 达到指定的大小时,主分片的大小,不包含副本。

 

以上三个参数至少应该存在一个

 

例如:当前 index 主分片大小达到 100GB 或文档数超过 100000000 或者 index 创建超过 7天 生产新的 index

 

PUT _ilm/policy/my_policy
{
  "policy": {
    "phases": {
     "hot": {
        "actions": {
          "rollover" : {
            "max_size": "100GB",
      "max_docs": 100000000,
      "max_age": "7d"
          }
        }
      }
    }
  }
}

Unfollow

 

将 follow 索引转换为正常索引。

 

例如:

PUT _ilm/policy/my_policy
{
  "policy": {
    "phases": {
      "hot": {
        "actions": {
          "unfollow" : {}
        }
      }
    }
  }
}

Allocate

 

指定 index 的副本数,迁移 index 到某些节点,冷热节点数据迁移依赖此步骤。

 

参数:

 

l number_of_replicas

l 指定 index 的副本数

 

l include

l 将 index 迁移到具有指定属性之一的节点

 

 l exclude

l 将 index 迁移到不包含指定属性的节点

 

l require

l 将 index 迁移到具有所有指定属性的节点

 

Note: include 满足其中一个就可以, require 必须全部满足。

 

例如:到达 warm 阶段将 index 的备份数设置为 2,并且将 index 迁移至属性 box_type 包含 hot, warm 且不包含 cold 的节点。

PUT _ilm/policy/my_policy
{
  "policy": {
    "phases": {
      "warm": {
        "actions": {
          "allocate" : {
            "number_of_replicas" : 2,
      "include" : {
            "box_type": "hot"
            },
      "exclude" : {
            "box_type": "cold"
            },
      "require" : {
            "box_type": "hot,warm"
            }
          }
        }
      }
    }
  }
}

《Elastic Stack 实战手册》——三、产品能力——3.5 进阶篇——3.5.7.索引生命周期管理(3) https://developer.aliyun.com/article/1228514

相关实践学习
使用阿里云Elasticsearch体验信息检索加速
通过创建登录阿里云Elasticsearch集群,使用DataWorks将MySQL数据同步至Elasticsearch,体验多条件检索效果,简单展示数据同步和信息检索加速的过程和操作。
ElasticSearch 入门精讲
ElasticSearch是一个开源的、基于Lucene的、分布式、高扩展、高实时的搜索与数据分析引擎。根据DB-Engines的排名显示,Elasticsearch是最受欢迎的企业搜索引擎,其次是Apache Solr(也是基于Lucene)。 ElasticSearch的实现原理主要分为以下几个步骤: 用户将数据提交到Elastic Search 数据库中 通过分词控制器去将对应的语句分词,将其权重和分词结果一并存入数据 当用户搜索数据时候,再根据权重将结果排名、打分 将返回结果呈现给用户 Elasticsearch可以用于搜索各种文档。它提供可扩展的搜索,具有接近实时的搜索,并支持多租户。
相关文章
|
12月前
|
索引
带你读《Elastic Stack 实战手册》之48:——3.5.7.索引生命周期管理(7)
带你读《Elastic Stack 实战手册》之48:——3.5.7.索引生命周期管理(7)
|
12月前
|
存储 索引
带你读《Elastic Stack 实战手册》之48:——3.5.7.索引生命周期管理(4)
带你读《Elastic Stack 实战手册》之48:——3.5.7.索引生命周期管理(4)
|
12月前
|
文件存储 索引
带你读《Elastic Stack 实战手册》之48:——3.5.7.索引生命周期管理(3)
带你读《Elastic Stack 实战手册》之48:——3.5.7.索引生命周期管理(3)
|
12月前
|
索引
带你读《Elastic Stack 实战手册》之48:——3.5.7.索引生命周期管理(5)
带你读《Elastic Stack 实战手册》之48:——3.5.7.索引生命周期管理(5)
|
12月前
|
API 索引
带你读《Elastic Stack 实战手册》之48:——3.5.7.索引生命周期管理(1)
带你读《Elastic Stack 实战手册》之48:——3.5.7.索引生命周期管理(1)
105 0
|
12月前
|
索引
带你读《Elastic Stack 实战手册》之48:——3.5.7.索引生命周期管理(6)
带你读《Elastic Stack 实战手册》之48:——3.5.7.索引生命周期管理(6)
|
12月前
|
机器学习/深度学习 消息中间件 数据采集
带你读《Elastic Stack 实战手册》之5:——3.2.2.可观测性 (下)
带你读《Elastic Stack 实战手册》之5:——3.2.2.可观测性 (下)
156 0
|
12月前
|
Cloud Native
带你读《Elastic Stack 实战手册》之5:——3.2.2.可观测性 (上)
带你读《Elastic Stack 实战手册》之5:——3.2.2.可观测性 (上)
109 0
|
12月前
|
存储 自然语言处理 网络协议
带你读《Elastic Stack 实战手册》之42:——3.5.1.跨集群操作(2)
带你读《Elastic Stack 实战手册》之42:——3.5.1.跨集群操作(2)
|
12月前
|
存储 人工智能 大数据
带你读《Elastic Stack 实战手册》之42:——3.5.1.跨集群操作(4)
带你读《Elastic Stack 实战手册》之42:——3.5.1.跨集群操作(4)