wu@55555_社区达人页

2022年11月

• 11.17 21:18:17
  发表了文章 2022-11-17 21:18:17

  Elastic: IllegalStateException: availableProcessors is already set to [8], rejecting [8]

  springboot整合了spring data elasticsearch启动报错
• 11.17 21:17:56
  发表了文章 2022-11-17 21:17:56

  ELK搭建（一）：实现分布式微服务日志监控

  本次我们搭建的目标是通过ELK来收集微服务中的日志。本期主要以实操、快速搭建为主进行讲解，部分基础概念不做过多描述，后续会再单独出几期博客说明。更多ELK搭建可以关注本专栏，后续会持续输出。

  
• 11.17 21:17:35
  发表了文章 2022-11-17 21:17:35

  【Elastic知识简报】normalizer与analyzer的区别

  normalizer与analyzer的作用类似，都是对字段进行处理，但是不同之处在于normalizer不会对字段进行分词，也就是说normalizer没有tokenizer。
• 11.17 21:17:14
  发表了文章 2022-11-17 21:17:14

  【Elastic知识简报】query与filter的区别

  1、因此filter的查询是没有评分的，而query的查询是有评分的 2、filter有相应的缓存机制，可以提高查询效率，并且因为filter不计算相关性评分，所以查询速度更快
• 11.17 21:16:54
  发表了文章 2022-11-17 21:16:54

  Elastic：使用自定义属性来定义冷热节点时，为什么用include来声明路由时索引无法流转，而用require可以？

  ILM中各节点的路由配置要和索引模版中的索引的路由配置方式保持一致：如果ILM中使用的是require，那么索引模版中也要使用require；如果ILM中使用的是include，那么索引模版中也要使用include。

  
• 11.17 21:16:33
  发表了文章 2022-11-17 21:16:33

  Elastic：IK分词器分词、停用词热更新如何配置（一）基于API

  热更新是IK新版本中才支持的功能，其API需要满足两个要求： 1、http请求中需要返回两个header，一个是Last-Modified，一个ETag。两个header都是字符串类型的。他们之中只要有一个发生变化，就会读取详情的数据并且更新词库，如果没有变化则不会更新词库。这个条件如果做前端的同学应该会比较熟悉，前端判断缓存是否更改时也是通过这两个条件。

  
• 11.17 21:15:59
  发表了文章 2022-11-17 21:15:59

  【Elastic知识简报】standard analyzer和standard tokenizer有什么区别？

  analyzer是分析器，由三部分组成：字符过滤器 character filter、令牌过滤器 token filter、分词器tokenizer，所以tokenizer是analyzer的一部分
• 11.17 21:15:32
  发表了文章 2022-11-17 21:15:32

  Elastic：集群相关知识点总结（三）分片分配感知、强制感知

  集群中涉及索引分片的相关操作就离不开两个概念：分片分配感知和强制分片感知

  
• 11.17 21:15:07
  发表了文章 2022-11-17 21:15:07

  【Elastic知识简报】配置security时，不小心设置为自动生成密码了，怎么修改账号密码？

  可以通过更新密码接口，更改用户密码
• 11.17 21:14:11
  发表了文章 2022-11-17 21:14:11

  Elastic：集群相关知识点总结（二）集群安全security，角色用户基础权限控制RBAC

  集群的安全管理对于生产环境来说不可或缺，接下来我们来看看最基础集群安全配置是如何设置的。

  
• 11.17 21:13:45
  发表了文章 2022-11-17 21:13:45

  Elastic：集群相关知识点总结（一）数据流 Data Stream、索引生命周期 ILM、可搜索快照 searchable snapshots、跨集群搜索 CCS、跨集群复制 CCR

  # 0.引言 集群管理是ES的核心重点，因此相关的知识点至关重要，本期主要针对数据流、索引生命周期、可搜索快照、跨集群搜索、跨集群复制进行讲解

  
• 11.17 21:13:15
  发表了文章 2022-11-17 21:13:15

  【Elastic知识简报】已经配置了的集群设置如何删除？

  因为之前练习跨集群操作配置了远程集群，现在不需要了，但每次启动单个集群都会报错，怎么办？
• 11.17 21:12:41
  发表了文章 2022-11-17 21:12:41

  Elastic实战：nested查询与数组同一元素匹配多个值

  之前有同学实际生产中遇到了一个问题，题目本身不涉及生产环境上的问题，纯粹的DSL，但是因为是实际数据，因此数据量上会大很多，也增加了排错的难度。下面我们具体看下这个问题，让大家具体体会下实际生产的问题与训练题之间的区别在哪儿。

  
• 11.17 21:12:16
  发表了文章 2022-11-17 21:12:16

  Elastic: ILM与rollover的关系

  两者本身是无关系的，是独立的两个知识点，并不存在一定要配置了其中一个，才能使用另外一个的情况。 只是说我们日常使用中，经常将两者配合起来使用。而当我们在ILM中开启了rollover后，流转到下一节点的min_age是在rollover触发后才开始计时的，也就是说如果我们在rollover中设置3分钟后rollover，而在warm节点的min_age设置了4分钟，那么索引创建后需要7分钟才会流转到warm节点
• 11.17 21:11:43
  发表了文章 2022-11-17 21:11:43

  Elastic: 同一条索引，使用GET _cat/indices?v与GET index/_count查询出来的文档数为什么不同？

  首先我们来看官方文档中对于_cat/indices的解释： 原文： These metrics are retrieved directly from Lucene, which Elasticsearch uses internally to power indexing and search. As a result, all document counts include hidden nested documents.

  
• 11.17 21:10:57
  发表了文章 2022-11-17 21:10:57

  Elastic：查询时字段runtime fields不显示，如何处理？

  很多时候runtime field是结合一起使用的，这时没有任何问题，因为这类需要一般将聚合结果显示出来就行了。但是当我们需要将runtime fields也查询出来时发现查询结果中是不会显示它们的，下面我们通过具体的案例来解决这个问题
• 11.17 21:08:21
  发表了文章 2022-11-17 21:08:21

  Elastic：data_hot,data_warm,data_cold角色有什么用

  data_hot：热点数据节点，热点数据节点在进入es时存储时间序列数据，热层必须快速读取和写入，并且需要更多的硬件资源 data_warm；暖数据节点，存储不再定期更新但仍在查询的索引。查询两的频率通常低于索引出于热层时的频率，性能较低的硬件通常可用于此层中的节点 data_cold：冷数据节点，存储访问频率较低的只读索引，磁层使用性能较低的硬件，并且可以利用可搜索快照索引来最小化所需的资源

  
• 11.17 21:07:57
  发表了文章 2022-11-17 21:07:57

  Elastic：什么时候用POST？什么时候用PUT？有什么区别？

  首先POST与PUT都可以用于更新和新增操作，但是新增时POST是不用指定ID的，会自动分配；而PUT是需要指定ID的，也就是说PUT是幂等性的，无论你操作多少次结果都是一样的。而POST是操作一遍就新增一条
• 11.17 21:07:24
  发表了文章 2022-11-17 21:07:24

  Elastic：查询数组时如何只返回匹配的数组元素

  简单数组是不能设置inner_hits的，这一点我查询了很多资料，并没有找到答案，最后咨询了业界大佬，了解到，简单数组目前并不支持这种操作
• 11.17 21:06:57
  发表了文章 2022-11-17 21:06:57

  Elastic：doc[‘field‘].value与params._source[‘field‘]的区别；doc循环依赖问题

  今天有同学问到doc['field'].value与params._source['field']用法的区别，起因在于下述的一道题的解法上，下面详细讲述下我的看法

  
• 11.17 21:06:18
  发表了文章 2022-11-17 21:06:18

  Elastic：索引生命周期ILM的warm,cold,delete节点中min_age设置的是增量还是累计值

  结合以上分析，可以得到，我们需要在rollover的max_age设置5min，然后warm节点中因为是立即转移的，所以min_age是0min。要在warm节点待3min的话，就需要在cold节点设置min_age为3min。最后rollover6min后被删除，需要在delete节点设置min_age为6min。所以最终的答案是5 0 3 6

  
• 11.17 21:04:48
  发表了文章 2022-11-17 21:04:48

  Elastic：深入了解数据流Data Stream

  最近看到不少同学反馈数据流的问题，特针对数据流谈谈自己的理解，以供大家参考。
• 11.17 21:03:39
  发表了文章 2022-11-17 21:03:39

  Elastic：浅谈倒排索引的两种压缩算法：FOR算法和RBM算法

  # 什么是倒排索引 首先了解mysql的都知道索引的根本目的是为了提高查询效率，类似于目录的作用。所以倒排索引也是这样的作用，想象一下在ES中，有一个索引index1（这里的索引index1与上述的倒排索引中的索引是两个概念，注意区分）,其有数据如下