【深入浅出】阿里自研开源搜索引擎Havenask集群扩备份

本文涉及的产品
推荐全链路深度定制开发平台,高级版 1个月
简介: 本次分享内容为Havenask的集群扩备份,共2个部分组成(集群备份简介、 集群备份实践),希望可以帮助大家更好了解和使用Havenask。

一、集群备份简介

1、Havenask的节点

Havenask有两个节点,即qrs和searcher。其中qrs是多行的结构,searcher是多行多列的结构因此qrssearcher都可以进行扩备份操作。


2、扩备份的主要流程

首先,修改对应角色的Hippo配置文件;然后,通过hape命令下发至suez adminsuez admin将整合的目标继续下发至carbon,继而下发至hippohippo收到相应的配置后,自动进行扩备份操作。

image.png


二、集群备份实践

1、过程概述

本次测试涉及的hape命令可以参考havenask官网,首先是多机模式的相关命令以及用于更新hippo配置的相关命令。首先准备havenask集群,然后创建一张直写表,创建完成查询正常后,通过hape命令修改hippo配置,最后进行查询。


参考链接:


2、扩备份实践演示

准备集群:

  • hape start havenask -c /ha3_install/hape_conf/remote
  • hape qs havenask -c/ha3 install/hape conf/remote
  • hape create table -t in0 -p 1 -s /ha3_install/example/cases/normal/in0_schema.json -c /ha3_install/hape_conf/remote


查询:

  • /ha3_install/sql_query.py --address  http://<qrs-ip>:45800 --query "insert into in0 (createtime,hits,id,title,subject)values(1,2,4,'测试', '测试')"
  • /ha3_install/sql_query.py --address  http://10.1.1.105:45800 --query "select * from in0"


修改searcher备份数:

  • hape get default-hippo-config -r searcher -c /ha3_install/hape_conf/remote> searcher_hippo.json
  • #修改count
  • hape update hippo-config -p searcher_hippo,json -r searcher -c/ha3_install/hape_conf/remote


查询:

  • /ha3_install/sql_query.py --address http://:45800 --query "select * from in0"


3、具体步骤

  • 首先,拉起分布式的havenask集群,创建后查询havenask集群的状态,由于仍未创建表,故仍处于not ready状态。创建一张直写表,创建完成后,再次查看havenask集群的状态,此时处于了ready状态。


  • 接下来,插入几条数据,显示正常后,获取默认的hippo配置,并保存到文件中,打开该文件,将count(备份数)改为2。


  • 下一步,查看目标下发之前的havenask状态,显示仅有一个备份,将hippo配置下发,生效之后再查询havenask集群的状态,可以看到多了一个备份,一段时间后新增备份即可处于ready状态。至此扩备份操作完成。


三、结尾

具体Havenask集群扩备份的演示视频可以通过链接查看,欢迎各位开发者使用。

视频链接:https://developer.aliyun.com/live/253692?spm=a2c6h.13262185.profile.8.563bee42LdD7By


关注我们:

Havenask 开源官网:https://havenask.net/

Havenask-Github 开源项目地址:https://github.com/alibaba/havenask

阿里云 OpenSearch 官网:https://www.aliyun.com/product/opensearch

钉钉扫码加入 Havenask 开源官方技术交流群:

1715594790746.png

目录
相关文章
|
1月前
|
存储 消息中间件 搜索推荐
【前沿技术】 阿里开源搜索引擎Havenask的消息系统
Havenask是阿里巴巴智能引擎事业部自研的开源高性能搜索引擎,深度支持了包括淘宝、天猫、菜鸟、高德、饿了么在内几乎整个阿里的搜索业务。本文针对性介绍了Havenask的消息系统--Swift,它是一个设计用于处理大规模的数据流和实时消息传递的高性能、可靠的消息系统。
60020 3
|
1月前
|
SQL 运维 搜索推荐
《揭秘,阿里开源自研搜索引擎Havenask的在线检索服务》
Havenask是阿里巴巴智能引擎事业部自研的开源高性能搜索引擎,深度支持了包括淘宝、天猫、菜鸟、高德、饿了么在内几乎整个阿里的搜索业务。本文针对性介绍了Havenask的在线检索服务,它具备高可用、高时效、低成本的优势,帮助企业和开发者量身定做适合业务发展的智能搜索服务。
82993 138
|
1月前
|
SQL 开发者 索引
【深入浅出】阿里自研开源搜索引擎Havenask集群扩分片
本次分享内容为Havenask的集群扩分片,共2个部分组成( 集群扩分片简介、 集群扩分片实践),希望可以帮助大家更好了解和使用Havenask。
82349 0
|
1月前
|
SQL 调度 Swift
【深入浅出】阿里自研开源搜索引擎Havenask日志查询
本次分享内容为Havenask的日志查询,文章包含了具体查询步骤和举例、实操演示,希望可以帮助大家更好的使用Havenask。
55295 0
|
1月前
|
SQL 开发者 索引
【深入浅出】阿里自研开源搜索引擎Havenask变更表结构
本文介绍了Havenask的表结构变更,包括表结构简介、全量构建流程和变更表结构三个部分。表结构由schema配置,字段类型包括INT、FLOAT、STRING等,索引有倒排、正排和摘要索引。全量表变更会触发全量构建,完成后自动切换,但直写表不支持直接变更。变更过程涉及使用hape命令更新schema并触发全量build。最后还有全量构建的流程图和具体操作步骤。
61858 2
|
1月前
|
消息中间件 Docker 索引
【一文解读】阿里自研开源核心搜索引擎 Havenask简介及发展历史
本次分享内容为Havenask的简介及发展历史,由下面五个部分组成(Havenask整体介绍、名词解释、架构、代码结构、编译与部署),希望可以帮助大家更好了解和使用Havenask。
71611 0
【一文解读】阿里自研开源核心搜索引擎 Havenask简介及发展历史
|
6月前
|
Kubernetes 网络协议 Linux
百度搜索:蓝易云【【K8S&RockyLinux】基于开源操作系统搭建K8S高可用集群教程。】
这是一个简要的教程,用于基于Rocky Linux搭建Kubernetes高可用集群。请注意,具体步骤可能因Kubernetes版本、网络插件选择和环境配置而有所不同。在实际搭建过程中,请参考相关文档和官方指南,并根据您的需求进行适当的调整和配置。
621 0
|
11月前
|
存储 弹性计算 运维
互娱NoSQL架构优化 —— 暨MongoDB“在线换引擎”技术服务指南”
XX工作室是某大客户核心游戏工作室,其核心业务是国内二次元RPG手游,采用实时开放世界对战模式,整体采用阿里云方案,本次专项攻坚主要对于玩家在游戏期间各类游戏属性交互(包含过图、物品、面板、剧情等)的核心业务模块进行优化,其中涉及NoSQL部分由于在专项优化期间存在诸多细节,特此提炼出来给各位有类似互娱业务场景进行参考。
|
12月前
|
存储 运维 监控
大数据数据存储的搜索引擎Elasticsearch的集群运维的集群扩展
Elasticsearch是一个可扩展的搜索引擎,可以在同一个集群中部署多个Elasticsearch节点,以提高性能和可用性。
62 0
|
存储 搜索推荐 Java
大数据数据存储的搜索引擎Elasticsearch的安装部署的多节点集群方式
作为一种广泛应用于大数据存储和分析的搜索引擎,Elasticsearch已经成为了许多企业的首选解决方案。在本文中,我们将会介绍如何通过多节点集群方式进行Elasticsearch的安装部署。
69 0