工程师甲_个人页

2021年05月

• 05.17 21:12:33
  发表了文章 2021-05-17 21:12:33

  Shard Allocation-Elastic Stack 实战手册

  分片分配 (shard allocation)，是指在索引创建、副本增减、节点增减、分片重平衡等，将索引分片落实到实际的物理节点的过程，分片分配可以分为，集群级分配和索引级分配两种，集群级分配常见的包括

  
• 05.17 21:10:58
  发表了文章 2021-05-17 21:10:58

  Kibana 基础应用-Elastic Stack 实战手册

  Kibana 基础应用

  
• 05.17 21:05:44
  发表了文章 2021-05-17 21:05:44

  阿里云 Elasticsearch 服务-Elastic Stack 实战手册

  本文将基于阿里云 Elasticsearch，通过快速创建、访问实例，并使用 Restful API，完成创建索引、创建文档、插入数据、搜索数据、删除索引等操作，从而体验 Cloud 云服务。

  
• 05.17 21:03:49
  发表了文章 2021-05-17 21:03:49

  配置多节点集群- Elastic Stack 实战手册

  如何使用Elastic Helm Chart来部署一个多节点的Elasticsearch集群。

  
• 05.17 20:58:31
  发表了文章 2021-05-17 20:58:31

  配置集群安全访问-Elastic Stack 实战手册

  为了防止生产中未经授权的访问，采用了不同的机制来施加安全性，例如在防火墙后运行Elastic Stack并通过反向代理（例如 nginx，HAProxy 等）进行保护

  
• 05.17 20:56:36
  发表了文章 2021-05-17 20:56:36

  安装 Logstash （本地及 Docker) - Elastic Stack 实战手册

  Logstash 是一个功能强大的工具，可与各种部署集成。 它提供了大量插件，可帮助你解析，丰富，转换和缓冲来自各种来源的数据。 如果你的数据需要 Beats 中没有的其他处理，则需要将 Logstash 添加到部署中。

  
• 05.17 20:54:30
  发表了文章 2021-05-17 20:54:30

  安装 Beats （本地及 Docker)-Elastic Stack 实战手册

  Beats 是轻量级（资源高效，无依赖性，小型）和开放源代码日志发送程序的集合，这些日志发送程序充当安装在基础结构中不同服务器上的代理，用于收集日志或指标（Metrics）。这些可以是日志文件（Filebeat），网络数据（Packetbeat），服务器指标（Metricbeat）或 Elastic 和社区开发的越来越多的 Beats 可以收集的任何其他类型的数据。 收集后，数据将直接发送到 Elasticsearch 或 Logstash 中进行其他处理。Beats 建立在名为 libbeat 的 Go 框架之上，该框架用于数据转发，这意味着社区一直在开发和贡献新的 Beats。

  
• 05.17 20:52:07
  发表了文章 2021-05-17 20:52:07

  安装 Kibana（本地及 Docker）- Elastic Stack 实战手册

  Kibana 是一个基于 Nodejs 构建出来的前端项目，它本身不包含数据存储功能，所以需要配合一个 Elasticsearch 节点/集群一起进行使用。本节将从系统环境的选择，必须的基础应用的安装等方面进行阐述。

  
• 05.17 20:43:00
  发表了文章 2021-05-17 20:43:00

  安装 Elasticsearch （本地及 Docker)-Elastic Stack 实战手册

  本章介绍 Elasticsearch （简称 ES ）的安装和部署

  
• 05.17 20:00:14
  发表了文章 2021-05-17 20:00:14

  名词解释-Elastic Stack 实战手册

  当我们开始使用 Elasticsearch 时，我们必须理解其中的一些重要的概念。这些概念的理解对于以后我们使用 Elastic Stack 是非常重要的。在今天的这篇文章里，我们先来介绍一下在 Elastic Stack 中最重要的一些概念

  
• 05.17 19:57:38
  发表了文章 2021-05-17 19:57:38

  可观测性-Elastic Stack 实战手册

  业界对可观测性的定义由Logging（日志）,Metrics （指标）和 Tracing（跟踪）组成。其中大多数软件都仅在一个领域内发力，这导致了实施可观测性时的高昂成本。需要建设多个技术栈的软件，才能实现完整的可观测性。大多数企业基本都使用了 5个+ 的技术栈，有的甚至能达到10个技术栈。

  
• 05.17 19:48:30
  发表了文章 2021-05-17 19:48:30

  企业搜索-Elastic Stack 实战手册

  企业搜索，顾名思义，就是企业使用的搜索服务或者说是企业提供的搜索服务。

  
• 05.17 16:45:30
  发表了文章 2021-05-17 16:45:30

  【免费体验30天】阿里云 Elasticsearch 7.10 Indexing Service 日志增强版发布

  在时序数据分析领域，你是否也遇到写入高资源消耗多、运维难、性能不足等情况。而我们又该如何更好的解决这些问题，并且降低存储成本，提升数据写入能力呢？

  
• 05.16 14:00:55
  发表了文章 2021-05-16 14:00:55

  Graph—Elastic Stack 实战手册

  图作为一种现实中广泛存在的结构，与我们的生活息息相关，如社交网络、交通网络等。如何抽象的描述这些结构，并对其进行分析，获取潜在价值是一个普遍存在的问题。

  
• 05.16 13:58:45
  发表了文章 2021-05-16 13:58:45

  Rollup—Elastic Stack 实战手册

  汇总作业（ rollup jobs ）是周期性执行的任务，通过汇总作业，可以将某些索引中的数据进行周期性自定义化聚合，然后将聚合后的数据写入到新的索引中，整个流程叫做 Rollup 。

  
• 05.16 13:56:46
  发表了文章 2021-05-16 13:56:46

  Kibana 的 Alert—Elastic Stack 实战手册

  Kibana 的 Alert 模块主要用于 Elastic Stack 的监控告警。以一种相对较低的使用成本，将复杂的查询条件，编辑完成后监控不同的 Elastic Stack 的技术产品中产生的数据，最终把符合条件的告警信息以需要的方式反馈给用户。

  
• 05.16 13:55:27
  发表了文章 2021-05-16 13:55:27

  跨集群操作—Elastic Stack 实战手册

  Elasticsearch 集群天然支持横向水平扩展，因此当业务规模扩大、对集群产生读写压力时，增加节点总是运维人员的“懒人选择”。但随着节点数增多，集群主节点要维护的 meta 信息也随之增多，这会导致集群更新压力增大，甚至无法提供正常服务。 另外每个企业的数据中心都需要有灾备方案，在集群间同步数据，因为单点集群会存在隐患。

  
• 05.16 13:36:20
  发表了文章 2021-05-16 13:36:20

  Painless scripting — Elastic Stack 实战手册

  Painless scripting 是一种简单的、安全的针对 Elasticsearch 设计的脚本语言，Painless 可以使用在任何可以使用 scripting 的场景

  
• 05.16 13:34:55
  发表了文章 2021-05-16 13:34:55

  Ingest pipelines—Elastic Stack 实战手册

  本文着重介绍 Ingest Pipeline，以下比较了 Logstash 与 Ingest Pipeline的一些区别，便于在实际业务场景中选择

  
• 05.16 13:32:18
  发表了文章 2021-05-16 13:32:18

  分页搜索—Elastic Stack 实战手册

  在查询场景中，从 Elasticsearch 中取得结果，根据不同场景，有多种不同的方式。

  
• 05.16 13:30:47
  发表了文章 2021-05-16 13:30:47

  Rollover API— Elastic Stack 实战手册

  使用`Rollover index`的方式来限制每个索引的大小。

  
• 05.16 13:28:50
  发表了文章 2021-05-16 13:28:50

  Reindex API — Elastic Stack 实战手册

  将文档从源索引复制到目的地索引，称之为 Reindex。

  
• 05.16 13:26:10
  发表了文章 2021-05-16 13:26:10

  Index alias — Elastic Stack 实战手册

  别名，是为一个或多个索引而命名的第二名称，第二名称不得与集群中任何索引同名；只要把第二名称和真实索引建立绑定关系，便可以使用别名对索引进行相关的操作。

  
• 05.16 13:21:50
  发表了文章 2021-05-16 13:21:50

  Dynamic mapping — Elastic Stack 实战手册

  Elasticsearch 本着让用户使用更方便快捷的原则，针对这个问题做了很多工作，使定义数据的方式更加抽象灵活，多个雷同的字段可使用 1 个配置完成。

  
• 05.16 13:15:46
  发表了文章 2021-05-16 13:15:46

  Search template — Elastic Stack 实战手册

  Elasticsearch 允许使用模板语言 mustache 来预设搜索逻辑，在实际搜索时，通过参数中的键值，对来替换模板中的占位符，最终完成搜索

  
• 05.16 13:14:06
  发表了文章 2021-05-16 13:14:06

  Index template — Elastic Stack 实战手册

  Elasticsearch 本着让用户方便快捷的使用搜索功能的原则，对数据定义（索引定义）做了高度抽象，尽可能得避免了重复性定义工作，使之更加灵活。

  
• 05.16 12:58:16
  发表了文章 2021-05-16 12:58:16

  Nested 数据类型—Elastic Stack 实战手册

  Nested 是 Object 的专用版本，允许对象数组以可以彼此独立查询的方式进行索引。

  
• 05.16 12:55:58
  发表了文章 2021-05-16 12:55:58

  Join 数据类型—Elastic Stack 实战手册

  Join 类型是一种特殊的数据类型，类似父子结构，一个子文档只能有一个父文档，一个父文档可以有多个子文档。

  
• 05.16 12:54:15
  发表了文章 2021-05-16 12:54:15

  分布式打分—Elastic Stack 实战手册

  搜索引擎中的搜索与数据库中，常规的 SELECT 查询语句，都能帮你从一大堆数据中，找到匹配某个特定关键字的数据条目，但是这两者最大的区别在于，搜索引擎能够基于查询和结果的相关性，帮你做好结果集排序，即搜索引擎会将它认为最符合你查询诉求的数据条目，放在最前面，而数据库的 SELECT 语句却做不到。

  
• 05.16 12:52:24
  发表了文章 2021-05-16 12:52:24

  Object 数据类型— Elastic Stack 实战手册

  设计索引 Mapping 时，需要设计的对象中包含对象（非数组），此时就可以使用 Object 类型来存储对象。

  
• 05.16 12:49:50
  发表了文章 2021-05-16 12:49:50

  Search 通过 Kibana— Elastic Stack 实战手册

  在 TO B 行业，对商品的搜索展示，是有一定业务要求的，例如：存在合作关系的买家和供应商才能看到供应商店铺的商品，不存在合作关系的买家则不展示商品。另外，有些商品对客户甲展示一种价格，对客户乙则展示另外一种价格，从而区分不同的会员、分组对商品价格的区别。

  
• 05.16 12:44:36
  发表了文章 2021-05-16 12:44:36

  理解 mapping—Elastic Stack 实战手册

  映射（mapping）就像数据库中的 Schema ，描述了文档可能具有的字段或属性、每个字段的数据类型，比如 Text，Keyword，Integer 或 Date ，以及 Lucene 是如何索引和存储这些字段的。

  
• 05.16 12:41:28
  发表了文章 2021-05-16 12:41:28

  inverted index，doc_values，store 及 source—Elastic Stack 实战手册

  Elasticsearch 使用一种称为倒排索引的结构，它适用于快速的全文搜索

  

2021年04月

• 04.19 11:50:59
  发表了文章 2021-04-19 11:50:59

  Elastic：机器学习的实践 - population job

  群体（ population）分析检测异常：通过机器学习分析可建立 “典型” 用户，机器或其他实体在指定时间段内所做的工作的概况，然后识别与其它群体相比表现异常情况。

  

2021年03月

• 03.23 17:54:44
  发表了文章 2021-03-23 17:54:44

  独家下载 |《开源与云Elasticsearch应用剖析》与Elastic创始人探讨热门Elasticsearch技术领域

  本书基于【Elasticsearch生态&技术峰会Online】阿里巴巴集团副总裁、Elastic创始人&CEO Shay Bannon等10位资深大咖演讲内容整理而成，对当下热门Elasticsearch技术领域与云生态下开源共生之路的探讨。

  
• 03.23 00:00:06
  发表了文章 2021-03-23 00:00:06

  Elasticsearch生态&技术峰会 | Elasticsearch在乐言的多场景应用实践

  开源最大的特征就是开放性，云生态则让开源技术更具开放性与创造性，Elastic 与阿里云的合作正是开源与云生态共生共荣的典范。值此合作三周年之际，我们邀请业界资深人士相聚云端，共话云上Elasticsearch生态与技术的未来。

  
• 03.22 23:54:53
  发表了文章 2021-03-22 23:54:53

  Elasticsearch生态&技术峰会 | Elasticsearch在企查查的应用实践

  开源最大的特征就是开放性，云生态则让开源技术更具开放性与创造性，Elastic 与阿里云的合作正是开源与云生态共生共荣的典范。值此合作三周年之际，我们邀请业界资深人士相聚云端，共话云上Elasticsearch生态与技术的未来。

  
• 03.22 23:48:38
  发表了文章 2021-03-22 23:48:38

  Elasticsearch生态&技术峰会 | Elasticsearch在清博大数据的应用与实践

  开源最大的特征就是开放性，云生态则让开源技术更具开放性与创造性，Elastic 与阿里云的合作正是开源与云生态共生共荣的典范。值此合作三周年之际，我们邀请业界资深人士相聚云端，共话云上Elasticsearch生态与技术的未来。

  
• 03.22 23:39:37
  发表了文章 2021-03-22 23:39:37

  Elasticsearch生态&技术峰会 | Elasticsearch基于Pipeline窗口函数实现实时聚合计算

  开源最大的特征就是开放性，云生态则让开源技术更具开放性与创造性，Elastic 与阿里云的合作正是开源与云生态共生共荣的典范。值此合作三周年之际，我们邀请业界资深人士相聚云端，共话云上Elasticsearch生态与技术的未来。

  
• 03.22 23:29:05
  发表了文章 2021-03-22 23:29:05

  Elasticsearch生态&技术峰会 | 基于流式计算平台搭建实时分析

  开源最大的特征就是开放性，云生态则让开源技术更具开放性与创造性，Elastic 与阿里云的合作正是开源与云生态共生共荣的典范。值此合作三周年之际，我们邀请业界资深人士相聚云端，共话云上Elasticsearch生态与技术的未来。

  
• 03.22 23:18:34
  发表了文章 2021-03-22 23:18:34

  Elasticsearch生态&技术峰会 | 如何规划和执行威胁狩猎

  开源最大的特征就是开放性，云生态则让开源技术更具开放性与创造性，Elastic 与阿里云的合作正是开源与云生态共生共荣的典范。值此合作三周年之际，我们邀请业界资深人士相聚云端，共话云上Elasticsearch生态与技术的未来。

  
• 03.22 23:05:04
  发表了文章 2021-03-22 23:05:04

  Elasticsearch生态&技术峰会 | 阿里云Elasticsearch云原生内核

  开源最大的特征就是开放性，云生态则让开源技术更具开放性与创造性，Elastic 与阿里云的合作正是开源与云生态共生共荣的典范。值此合作三周年之际，我们邀请业界资深人士相聚云端，共话云上Elasticsearch生态与技术的未来。

  
• 03.22 22:51:08
  发表了文章 2021-03-22 22:51:08

  Elasticsearch生态&技术峰会 | Elasticstack解决方案与行业应用

  开源最大的特征就是开放性，云生态则让开源技术更具开放性与创造性，Elastic 与阿里云的合作正是开源与云生态共生共荣的典范。值此合作三周年之际，我们邀请业界资深人士相聚云端，共话云上Elasticsearch生态与技术的未来。

  
• 03.22 22:34:33
  发表了文章 2021-03-22 22:34:33

  Elasticsearch生态&技术峰会 | 云上Elasticsearch驱动新未来（含视频）

  开源最大的特征就是开放性，云生态则让开源技术更具开放性与创造性，Elastic 与阿里云的合作正是开源与云生态共生共荣的典范。值此合作三周年之际，我们邀请业界资深人士相聚云端，共话云上Elasticsearch生态与技术的未来。

  
• 03.22 22:24:49
  发表了文章 2021-03-22 22:24:49

  阿里云Elasticsearch 生态&技术峰会 云生态下的开源共生之路【视频】

  众所周知，阿里云与Elastic已成功合作三年，在这三年的合作过程中，双方在开源体系、云原生和数字化转型等领域中，都有各自不同的理解和洞察。本篇内容将向大家展开阿里巴巴集团副总裁贾扬清与Elastic创始人兼CEO Shay Bannon，对当下热门技术领域和云生态下开源共生之路的探讨。

  
• 03.09 11:44:21
  发表了文章 2021-03-09 11:44:21

  采购季，购划算 | 搜索推荐专场（Elasticsearch、开放搜索、智能推荐）6折 一起购

  2021年春季采购季如约而至，除了带来超低让利外，产品结构化调优后带来的性能优化，真正让企业在效率与成本优化之间达到一个新的高度；

  

2021年01月

• 01.08 17:37:43
  发表了文章 2021-01-08 17:37:43

  Elastic：机器学习的实践 - multi metric job

  Kibana 中的 multi metric job 向导提供了一种使用多个检测器创建更复杂作业的简单方法。例如，在单个度量标准作业中，你正在跟踪总请求与时间的关系。你可能还希望跟踪其他指标，例如平均响应时间或拒绝请求的最大数量。你可以为多个指标作业合并它们，而不是为每个指标创建作业。

  

2020年12月

• 12.22 10:04:44
  发表了文章 2020-12-22 10:04:44

  【数智增长营Online】3天6大主题，在线教育行业的痛点与实战分享

  如何利用大数据和AI破解在线教育增长难题？数据存储成本高、业务查询分析效率低怎么解决？ 3天6大主题，深度剖析行业场景下的大数据痛点，分享最实用的业务经验。 特邀您入营，一起突破增长困境。

  
• 12.17 11:06:36
  发表了文章 2020-12-17 11:06:36

  Elasticsearch 全观测技术解析与应用（三）:能力呈现与应用价值

  本文梳理了全观测流程，介绍了Elastic的整套工具及其在全观测中的能力，并且用两个实例展示了如何用这些工具进行全观测。