阿里云Elasticsearch智能存储引擎能力再升级,索引存储大小降低超40%!

本文涉及的产品
检索分析服务 Elasticsearch 版,2核4GB开发者规格 1个月
简介: Elastic中国开发者大会2023上,阿里云首次对外公开Elasticsearch全面Serverless化背后的产品技术架构,阿里云Elasticsearch依靠云原生底座技术升级,持续进行内核优化,并在日志场景大幅提升使用性价比,向用户提供更简单、更稳定、更弹性的搜索云服务。

在上周结束的Elastic中国开发者大会2023上,阿里云首次对外公开Elasticsearch全面Serverless化背后的产品技术架构,阿里云Elasticsearch依靠云原生底座技术升级,持续进行内核优化,并在日志场景大幅提升使用性价比,向用户提供更简单、更稳定、更弹性的搜索云服务。

 

image.png

 

技术突破带来产品持续创新

 

阿里云Elasticsearch为用户提供了一套云原生的运管平台,支持弹性伸缩、智能巡检等,帮助用户轻松应对日常管理运维。通过底层架构升级,进行运管平台云原生化升级,带来更加灵活的集群变更体验,推出的基于全新管控的7.168.5版本,集群创建时间最快可达5分钟。

 

针对日志场景存储数据量大、写入吞吐高,容易出现资源成本高、服务稳定性差的特点,阿里云Elasticsearch团队自研出弹性、高效、低成本的智能存储引擎Openstore。支持根据实际存储数据量按量计费,无须提前预留集群存储容量,真正做到存储ServerlessOpenStore存储支持自定义冷热存储版本与智能混合存储版本,智能混合存储可突破传统冷热分离架构,大幅降低集群数据接入复杂度的同时,进一步降低云上海量数据的存储成本。基于云原生的读写分离、存算分离的技术架构突破,集群写入性能可提升60%,索引存储大小降低40%以上,查询性能提升至少30%

 

阿里云携手Elastic社区共同繁荣生态

 

时序引擎的建立是阿里云与Elastic社区共同建设的成果,也是阿里云携手Elastic共建社区生态的一个缩影。为了满足时序数据的写入TPS高、查询复杂度大、存储成本高的需求,阿里云团队协同Elastic社区共同建设时序引擎这个项目,同时基于内核特点优化时序引擎能力,为阿里云用户带来降本增效的使用体验。通过在阿里云Elasticsearch TimeStream内部定义时序模型,使得索引读写时序数据方式与常规索引相同,降低了使用门槛;通过数据压缩、减少元数据存储、支持DownSample(降采样)的方式极大的降低了存储空间,同时查询性能也获得了质的提升。

image.png                          

本次大会,阿里云获得Elastic颁发的2023合作伙伴生态特别贡献奖,代表双方合作迈进新阶段。值此阿里云与Elastic合作迈入第六个年头之际,Elastic创始人兼CTO Shay Banon也为双方合作带来寄语。Shay表示:我们和阿里云团队合作十分紧密,阿里云对Elastic新产品8.7版本提供了非常宝贵的建议,其中一位工程师魏子珺贡献了40多个PR,还深入参与讨论Elastic新产品的功能和性能改进。”未来阿里云会与Elastic继续通力合作,共建生态开放之路,为中国用户提供更佳云上搜索使用体验。

相关实践学习
使用阿里云Elasticsearch体验信息检索加速
通过创建登录阿里云Elasticsearch集群,使用DataWorks将MySQL数据同步至Elasticsearch,体验多条件检索效果,简单展示数据同步和信息检索加速的过程和操作。
ElasticSearch 入门精讲
ElasticSearch是一个开源的、基于Lucene的、分布式、高扩展、高实时的搜索与数据分析引擎。根据DB-Engines的排名显示,Elasticsearch是最受欢迎的企业搜索引擎,其次是Apache Solr(也是基于Lucene)。 ElasticSearch的实现原理主要分为以下几个步骤: 用户将数据提交到Elastic Search 数据库中 通过分词控制器去将对应的语句分词,将其权重和分词结果一并存入数据 当用户搜索数据时候,再根据权重将结果排名、打分 将返回结果呈现给用户 Elasticsearch可以用于搜索各种文档。它提供可扩展的搜索,具有接近实时的搜索,并支持多租户。
相关文章
|
2月前
|
存储 自然语言处理 关系型数据库
ElasticSearch索引 和MySQL索引那个更高效实用那个更合适
ElasticSearch索引 和MySQL索引那个更高效实用那个更合适
48 0
|
6天前
|
运维 安全 API
Elasticsearch 悬挂索引解析与管理指南
Elasticsearch 悬挂索引解析与管理指南
22 7
|
6天前
|
安全 API 数据安全/隐私保护
Elasticsearch 通过索引阻塞实现数据保护深入解析
Elasticsearch 通过索引阻塞实现数据保护深入解析
19 4
|
6天前
|
自然语言处理 搜索推荐 数据可视化
重磅 | Elasticsearch 智能知识问答上线了
重磅 | Elasticsearch 智能知识问答上线了
21 0
|
6天前
|
存储 数据处理 索引
Elasticsearch 8.X 小技巧:使用存储脚本优化数据索引与转换过程
Elasticsearch 8.X 小技巧:使用存储脚本优化数据索引与转换过程
30 6
|
6天前
|
存储 数据可视化 数据建模
阿里云大佬叮嘱我务必要科普这个 Elasticsearch API
阿里云大佬叮嘱我务必要科普这个 Elasticsearch API
13 0
|
6天前
|
存储 数据库 索引
Elasticsearch ILM 索引生命周期管理常见坑及避坑指南
Elasticsearch ILM 索引生命周期管理常见坑及避坑指南
11 0
|
18天前
|
安全 API 数据安全/隐私保护
Elasticsearch 通过索引阻塞实现数据保护深入解析
Elasticsearch 通过索引阻塞实现数据保护深入解析
18 0
|
18天前
|
安全 Java API
SpringBoot 实现 elasticsearch 索引操作(RestHighLevelClient 的应用)
SpringBoot 实现 elasticsearch 索引操作(RestHighLevelClient 的应用)
19 1
|
18天前
|
人工智能 自然语言处理 供应链
阿里云联合伙伴发起“物流智能联盟”
物流行业内首个专注于大模型应用研究与实践的联盟“物流智能联盟”在杭州成立,旨在加速大模型在物流领域落地,用AI助力物流行业增效降本和业务创新。该联盟由阿里云、菜鸟、高德地图、中远海运、东航物流、圆通速递、申通快递、中通快递、德邦快递、G7易流、地上铁、浙江大学智能交通研究所等在2024数智物流峰会上共同成立。

相关产品

  • 检索分析服务 Elasticsearch版