easy-es的出现,江湖不再需要RestHighLevelClient

本文涉及的产品
RDS AI 助手,专业版
RDS MySQL DuckDB 分析主实例,集群系列 4核8GB
简介: 今天下,ES(ElasticSearch)作为搜索服务界的扛把子,凭借其分布式、高扩展、高实时的搜索与数据分析能力,备受程序员小屁民的追捧。而ES在稳坐老大位置的同时,将Kibana和Logstash收为麾下,成立帮会:ELK,成为江湖上赫赫有名的第一大帮。

哈喽,大家好,我是强哥。


当今天下,ES(ElasticSearch)作为搜索服务界的扛把子,凭借其分布式、高扩展、高实时的搜索与数据分析能力,备受程序员小屁民的追捧。而ES在稳坐老大位置的同时,将Kibana和Logstash收为麾下,成立帮会:ELK,成为江湖上赫赫有名的第一大帮。


然而,随着时间的慢慢流逝,帮主ES的一些霸道手段也慢慢展露出来。


雄霸一方,欺压百姓


在江湖之上,码农们要用到搜索引擎的服务,就必须和帮主ES交易,而ES性格怪诞,定下号令,想要与他交易的,必须使用他自创的DSL语法。而就是学习这一语法让码农们痛苦不堪。


码农们师从一派,自幼受SQL语法的熏陶,由于往日与其他帮派交易也都多以SQL方式,大家往来甚是融洽。而唯独与这ELK帮交易最为难受,其蹩脚难懂的DSL语法让码农们苦不堪言。而搜索服务又往往是日常生活中或多或少要用得上的,于是乎,江湖上开始怨声载道。


而ES显然也注意到了这点,也有搞出xpack等工具来“帮助”大家。可是,这玩意更是暴露了其贪婪的特性。xpack的使用采用类似租赁制,码农们想要使用,就要交钱。这明显的就是对穷困潦倒的码农们的一种嘲讽。


码农们也是敢怒而不敢言,搜索服务不得不用,谁让ES一家独大,DSL难用也得学啊,总比什么都没有强。


风云再起,救星降临


要问当下,码农们与数据库第一大帮Mysql交易最为密切,彼此交易使用SQl语法来进行通信,智者更是创造了Mybatis-Plus工具使码农们与Mysql交易起来更为便捷快速。


而一提到要和ES交易,人们就愁容满面,每次交易前,都需带上一大本工具书,仔细查阅一番后,才能顺利生成DSL语法进行交易。


随着时间的流逝,越来越多的有志之士开始另辟蹊径,而一个工具的诞生,也打破了江湖多年的沉寂。


这个工具,就是easy-es


博采众长,备受追捧


要说发明这个工具的智者,也是师出Mybatis-Plus,同时对ES  DSL语法的研究也是极为深入。


他在DSL语法之上,对照Mybatis-Plus的功能,造出了一个能与ES交易的ES版Mybatis-Plus,起名easy-es


工具使用起来也极为简单。我们可以拿它与DSL的RestHighLevelClient(码农们原来生成DSL语法的工具)对比一下。


需求:查询出文档标题为 "中国功夫"且作者为"老汉"的所有文档


使用Easy-Es仅需3行代码即可完成查询:


LambdaEsQueryWrapper<Document> wrapper = new LambdaEsQueryWrapper<>();
wrapper.eq(Document::getTitle, "中国功夫").eq(Document::getCreator, "老汉");
List<Document> documents = documentMapper.selectList(wrapper);


传统方式, 直接用RestHighLevelClient进行查询:


// 传统方式, 直接用RestHighLevelClient进行查询 需要11行代码,还不包含解析JSON代码
String indexName = "document";
SearchRequest searchRequest = new SearchRequest(indexName);
BoolQueryBuilder boolQueryBuilder = QueryBuilders.boolQuery();
TermQueryBuilder titleTerm = QueryBuilders.termQuery("title", "中国功夫");
TermsQueryBuilder creatorTerm = QueryBuilders.termsQuery("creator", "老汉");
boolQueryBuilder.must(titleTerm);
boolQueryBuilder.must(creatorTerm);
SearchSourceBuilder searchSourceBuilder = new SearchSourceBuilder();
searchSourceBuilder.query(boolQueryBuilder);
searchRequest.source(searchSourceBuilder);
try {
 SearchResponse searchResponse = restHighLevelClient.search(searchRequest, RequestOptions.DEFAULT);
 // 然后从searchResponse中通过各种方式解析出DocumentList 省略这些代码...
} catch (IOException e) {
    e.printStackTrace();
}


可以看出,上面一个简单的查询演示,在代码量上就有了很大的差别。实际使用场景越复杂,效果就越好,平均可节省3-5倍代码量。


当然,ES经常被作为大数据量的准实时查询,那么,使用了easy-es之后,对查询的性能会不会有所影响呢?毕竟,这个工作是在传统工具上的再创作。


37.png


我们先来看easy-es在整个查询过程中做了什么事? 总结起来就2件:


  1. 把用户输入的MySQL语法(Mybatis-Plus语法)转换成RestHighLevel语法,然后调用RestHighLevelClient执行本次查询
  2. 把查询结果转换成用户想要的格式:如List并返回.


  • 其中,语法转换是按照MySQL和RestHighLevelClient语法对照表的关系进行转换.这种转换其实耗费的性能非常低,因为即使你直接使用RestHighLevelClient进行查询,你依旧需要创建出termQueryBuilder和BoolQueryBuilder. 唯一的区别就是我把用户输入的查询条件eq放入了队列,然后通过队里FIFO(除查询条件中有or的情况)的顺序逐一进行转换,对于绝大多数查询语句,查询条件都不会太多,所以队里中的元素数大多数情况下都会小于10,而且队列中我只存了枚举和参数,既不会占用过多内存,也不会因为队列的遍历消耗多少性能. 对于现代计算机而言,别说遍历10条小数据,就是成百上千条也是毫秒级的,所以这点性能损耗基本可以忽略不计。


  • 再说结果解析,结果解析其实就是把调用RestHighLevelClient返回的SearchResponse中的hits取出并用fastJson转换成数组,这个过程就算不用EE,你直接用RestHighLevelClient也是会有这一步,所以这一步并没有过多的损耗,即便是我用了反射,字段的反射和注解信息,都在框架启动时加载进内存中了,做了jvm的缓存,所以这点损耗可忽略不计。


当然如上都是基于理论分析,在0.9.6版本中,Sample模块的test目录Performance测试类中,大家可以看到我针对CURD分别作了不同维度的性能测试,实际测试的结果也很好的印证了我上面的理论分析,EE除了查询会比直接使用RestHighLevelClient平均慢10-15毫秒,增删改API并无差异,而且随着查询数据量的增大,实体字段缓存生效后,查询差异会进一步降低,几乎可以忽略不计. 牺牲10毫秒,对用户而言是无感知的,但对开发而言,可以节省大量代码和时间,我认为这是值得的,基本上没有哪款ORM框架是不会损耗性能的,权衡利弊,主公们心理应该都会有答案.


智者还保证,只要使用工具除了问题,都会积极的耐心解答。


由此可见,码农们接入easy-es,可谓优势多多:


  • 简单易用高效不用我多说了吧,MyBatis-Plus用户懂的都懂! 大把的时间节省出来,做...爱做的事情,真香!
  • 使用门槛降低,就算是不懂Es的小白,也可以用EE开发各种功能
  • 大幅减少代码量,提升代码可读性,降低重复代码量,提升代码质量
  • 专业答疑团队,无忧售后
  • 永久免费


相关实践学习
每个IT人都想学的“Web应用上云经典架构”实战
本实验从Web应用上云这个最基本的、最普遍的需求出发,帮助IT从业者们通过“阿里云Web应用上云解决方案”,了解一个企业级Web应用上云的常见架构,了解如何构建一个高可用、可扩展的企业级应用架构。
MySQL数据库入门学习
本课程通过最流行的开源数据库MySQL带你了解数据库的世界。 &nbsp; 相关的阿里云产品:云数据库RDS MySQL 版 阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。 了解产品详情:&nbsp;https://www.aliyun.com/product/rds/mysql&nbsp;
相关文章
|
6月前
|
机器学习/深度学习 人工智能 安全
制造业工业4.0落地案例:AMR如何提升车间效率?
第四次工业革命为制造业带来了巨大的机遇与挑战。本文综合分析了工业4.0在制造业应用中的优势与局限,为企业更清晰地理解潜在障碍与收益提供参考。以自主移动机器人替代传统叉车为例,通过在主入口服务器、制造执行系统与仓储管理系统之间采用先进的API通信协议,不仅实现了物料搬运的智能化,还显著节省了工艺时间。通过对约15个工位的时间研究,记录到每班次节省约1.14小时。同时,时间与成本分析被用于支持企业的决策流程。成本分析基于5年周期构建了OPEX和CAPEX模型。在三种模型中,自主移动机器人的CAPEX模型被证明节省了30%的成本。
397 3
|
人工智能 自然语言处理 安全
DALL·E 介绍
【10月更文挑战第9天】
1806 2
|
Dart 前端开发 JavaScript
探索移动应用开发中的跨平台解决方案:Flutter与React Native的比较
在移动应用开发领域,选择合适的跨平台解决方案是关键。本文将深入分析Flutter和React Native这两大主流框架,从性能、开发效率、社区支持等方面进行比较,帮助开发者做出明智的选择。
428 27
|
自然语言处理 搜索推荐
在Elasticsearch 7.9.2中安装IK分词器并进行自定义词典配置
在Elasticsearch 7.9.2中安装IK分词器并进行自定义词典配置
1690 1
|
自然语言处理 Windows
推荐给大家5款小众无广告的软件
本文推荐了几款小众且无广告的实用软件:ProcessExplorer 是一款强大的系统进程管理工具;LanguageTool 则是多语言语法检查工具;燃精灵用于检测微信空号;GeekUninstaller 可深度清理卸载软件残留;Win10Apps 专为管理 Windows10 应用而设计。感兴趣的朋友可以自行搜索下载。
465 17
|
Ubuntu 关系型数据库 MySQL
Mysql8.0在Ubuntu安装
Mysql8.0在Ubuntu安装
|
存储 JSON 安全
ElasticsearchRestTemplate 和ElasticsearchRepository 的使用
ElasticsearchRestTemplate 和ElasticsearchRepository 的使用
1699 1
|
前端开发 JavaScript Python
使用Python读取本地行情csv文件,做出web网页画出K线图实现案例
【5月更文挑战第4天】使用Python绘制K线图的步骤:1) 安装pandas, matplotlib和Flask;2) 用pandas读取CSV文件并处理数据;3) 创建Flask应用,渲染包含K线图数据的HTML;4) 编写HTML,使用ECharts库绘制K线图。
423 0
|
应用服务中间件
weblogic配置、修改日志保存目录、配置滚动日志
weblogic配置、修改日志保存目录、配置滚动日志
1215 0
|
NoSQL Go Redis
Asynq: 基于Redis实现的Go生态分布式任务队列和异步处理库
Asynq: 基于Redis实现的Go生态分布式任务队列和异步处理库
1054 0

热门文章

最新文章