【ElasticSearch从入门到放弃系列 十一】Elasticsearch常用查询方式讨论及实践(四)

本文涉及的产品
检索分析服务 Elasticsearch 版,2核4GB开发者规格 1个月
简介: 【ElasticSearch从入门到放弃系列 十一】Elasticsearch常用查询方式讨论及实践(四)

must使用

文档必须匹配must查询条件,我们这里设置要查询的内容为【年龄在10-19岁之间 且 性别为男 且 姓名开头为森】的员工,查询语句为:

{"query":{
    "bool": {
      "must": [
        {"term": {"sex": "男"}},
        {"range": {"age": { "gte" : 18, "lt"  : 29}}},
        {"prefix": {"name": "森"}}
      ]
    }
  }
}

返回结果为:

{
    "took": 54,
    "timed_out": false,
    "_shards": {
        "total": 3,
        "successful": 3,
        "skipped": 0,
        "failed": 0
    },
    "hits": {
        "total": {
            "value": 2,
            "relation": "eq"
        },
        "max_score": 2.6931472,
        "hits": [
            {
                "_index": "tml-userinfo",
                "_type": "_doc",
                "_id": "1",
                "_score": 2.6931472,
                "_source": {
                    "age": 18,
                    "sex": "男",
                    "name": "森小辰"
                }
            },
            {
                "_index": "tml-userinfo",
                "_type": "_doc",
                "_id": "2",
                "_score": 2.575364,
                "_source": {
                    "age": 28,
                    "sex": "男",
                    "name": "森小林"
                }
            }
        ]
    }
}

should使用

文档应该匹配should子句查询的一个或多个,这里我们来查询【年龄在10-19岁之间 或 性别为男 或 姓名开头为森】,查询语句为:

{"query":{
    "bool": {
      "should": [
        {"term": {"sex": "男"}},
        {"range": {"age": { "gte" : 18, "lt"  : 29}}},
        {"prefix": {"name": "森"}}
      ]
    }
  }
}

返回结果为:

{
    "took": 48,
    "timed_out": false,
    "_shards": {
        "total": 3,
        "successful": 3,
        "skipped": 0,
        "failed": 0
    },
    "hits": {
        "total": {
            "value": 14,
            "relation": "eq"
        },
        "max_score": 2.597837,
        "hits": [
            {
                "_index": "tml-userinfo",
                "_type": "_doc",
                "_id": "1",
                "_score": 2.597837,
                "_source": {
                    "age": 18,
                    "sex": "男",
                    "name": "森小辰"
                }
            },
            {
                "_index": "tml-userinfo",
                "_type": "_doc",
                "_id": "2",
                "_score": 2.4418328,
                "_source": {
                    "age": 28,
                    "sex": "男",
                    "name": "森小林"
                }
            },
            {
                "_index": "tml-userinfo",
                "_type": "_doc",
                "_id": "9",
                "_score": 2.0,
                "_source": {
                    "age": 18,
                    "sex": "女",
                    "name": "森小玲"
                }
            },
            {
                "_index": "tml-userinfo",
                "_type": "_doc",
                "_id": "11",
                "_score": 2.0,
                "_source": {
                    "age": 28,
                    "sex": "女",
                    "name": "森小捷"
                }
            },
            {
                "_index": "tml-userinfo",
                "_type": "_doc",
                "_id": "5",
                "_score": 1.9808291,
                "_source": {
                    "age": 28,
                    "sex": "男",
                    "name": "李小林"
                }
            },
            {
                "_index": "tml-userinfo",
                "_type": "_doc",
                "_id": "6",
                "_score": 1.597837,
                "_source": {
                    "age": 28,
                    "sex": "男",
                    "name": "李小林"
                }
            },
            {
                "_index": "tml-userinfo",
                "_type": "_doc",
                "_id": "3",
                "_score": 1.4418328,
                "_source": {
                    "age": 8,
                    "sex": "男",
                    "name": "森小贤"
                }
            },
            {
                "_index": "tml-userinfo",
                "_type": "_doc",
                "_id": "12",
                "_score": 1.4418328,
                "_source": {
                    "age": 18,
                    "sex": "男",
                    "name": "李小辰"
                }
            },
            {
                "_index": "tml-userinfo",
                "_type": "_doc",
                "_id": "13",
                "_score": 1.0,
                "_source": {
                    "age": 18,
                    "sex": "女",
                    "name": "李小男"
                }
            },
            {
                "_index": "tml-userinfo",
                "_type": "_doc",
                "_id": "15",
                "_score": 1.0,
                "_source": {
                    "age": 18,
                    "sex": "woman",
                    "name": "赵小男"
                }
            }
        ]
    }
}

可以看到只有一条数据没有返回,因为不符合shoud的任意一个条件

must_not使用

文档不能匹配该查询条件,这里我们来查询【年龄不在10-19岁之间 且 性别不为男 且 姓名开头不为森】,查询语句为:

{"query":{
    "bool": {
      "must_not": [
        {"term": {"sex": "男"}},
        {"range": {"age": { "gte" : 18, "lt"  : 29}}},
        {"prefix": {"name": "森"}}
      ]
    }
  }
}

我们可以看到,返回结果刚好为shoud的相反条件:

{
    "took": 17,
    "timed_out": false,
    "_shards": {
        "total": 3,
        "successful": 3,
        "skipped": 0,
        "failed": 0
    },
    "hits": {
        "total": {
            "value": 1,
            "relation": "eq"
        },
        "max_score": 0.0,
        "hits": [
            {
                "_index": "tml-userinfo",
                "_type": "_doc",
                "_id": "7",
                "_score": 0.0,
                "_source": {
                    "age": 8,
                    "sex": "女",
                    "name": "李小美"
                }
            }
        ]
    }
}

filter使用

过滤器,文档必须匹配该过滤条件,跟must子句的唯一区别是,filter不影响查询的score,我们这里设置要查询的内容为【年龄在10-19岁之间 且 性别为男 且 姓名开头为森】的员工,查询语句为:

{"query":{
    "bool": {
      "filter": [
        {"term": {"sex": "男"}},
        {"range": {"age": { "gte" : 18, "lt"  : 29}}},
        {"prefix": {"name": "森"}}
      ]
    }
  }
}

返回结果为:

{
    "took": 7,             // 请求花了多少时间                      
    "timed_out": false,    //有没有超时
    "_shards": {           //执行请求时查询的分片信息                             
        "total": 3,            //查询的分片数量         
        "successful": 3,      // 成功返回结果的分片数量
        "skipped": 0,          // 跳过的分片数量
        "failed": 0                // 失败的分片数量
    },
    "hits": {                         
        "total": {
            "value": 2,                        //查询返回的文档总数
            "relation": "eq"                       
        },
        "max_score": 0.0,                //计算所得的最高分
        "hits": [
            {
                "_index": "tml-userinfo",    //索引
                "_type": "_doc",                 //类型
                "_id": "2",                        //标识符
                "_score": 0.0,                  //得分
                "_source": {                            //发送到索引的Json对象
                    "age": 28,
                    "sex": "男",
                    "name": "森小林"
                }
            },
            {
                "_index": "tml-userinfo",
                "_type": "_doc",
                "_id": "1",
                "_score": 0.0,
                "_source": {
                    "age": 18,
                    "sex": "男",
                    "name": "森小辰"
                }
            }
        ]
    }
}

可以看到,返回的score为0,但是took为7,比must的54快了近8倍多。

多子句复合查询

我们在真实使用复合查询的时候肯定不仅仅要查单种条件的复合关系,还需要查多种关联条件,这里我们查一个【年龄在10-19岁之间 且 性别为男 且 姓名开头为森】或【姓名以男字结尾】但【年龄不能是28岁的】,需要注意:Boolean在同时有must和should的时候,should就被过滤掉了,因为should表示有也可以没有也可以,所以我们常把must放到should字句里,确保should的子句能执行

{
    "query": {
        "bool": {
            "should": [
                {
                    "wildcard": {
                        "name": "*男"
                    }
                },
                {
                    "bool": {
                        "must": [
                            {
                                "term": {
                                    "sex": "男"
                                }
                            },
                            {
                                "range": {
                                    "age": {
                                        "gte": 18,
                                        "lt": 29
                                    }
                                }
                            },
                            {
                                "prefix": {
                                    "name": "森"
                                }
                            }
                        ]
                    }
                }
            ],
            "must_not": [
                {
                    "term": {
                        "age": 28
                    }
                }
            ]
        }
    }
}

返回结果如下:

{
    "took": 14,
    "timed_out": false,
    "_shards": {
        "total": 3,
        "successful": 3,
        "skipped": 0,
        "failed": 0
    },
    "hits": {
        "total": {
            "value": 4,
            "relation": "eq"
        },
        "max_score": 2.6931472,
        "hits": [
            {
                "_index": "tml-userinfo",
                "_type": "_doc",
                "_id": "1",
                "_score": 2.6931472,
                "_source": {
                    "age": 18,
                    "sex": "男",
                    "name": "森小辰"
                }
            },
            {
                "_index": "tml-userinfo",
                "_type": "_doc",
                "_id": "13",
                "_score": 1.0,
                "_source": {
                    "age": 18,
                    "sex": "女",
                    "name": "李小男"
                }
            },
            {
                "_index": "tml-userinfo",
                "_type": "_doc",
                "_id": "14",
                "_score": 1.0,
                "_source": {
                    "age": 18,
                    "sex": "",
                    "name": "李小男"
                }
            },
            {
                "_index": "tml-userinfo",
                "_type": "_doc",
                "_id": "15",
                "_score": 1.0,
                "_source": {
                    "age": 18,
                    "sex": "woman",
                    "name": "赵小男"
                }
            }
        ]
    }
}

整个过程是先做should操作(must作为其子句),操作完后再用must_not把当前结果集中的数据干掉。


相关实践学习
使用阿里云Elasticsearch体验信息检索加速
通过创建登录阿里云Elasticsearch集群,使用DataWorks将MySQL数据同步至Elasticsearch,体验多条件检索效果,简单展示数据同步和信息检索加速的过程和操作。
ElasticSearch 入门精讲
ElasticSearch是一个开源的、基于Lucene的、分布式、高扩展、高实时的搜索与数据分析引擎。根据DB-Engines的排名显示,Elasticsearch是最受欢迎的企业搜索引擎,其次是Apache Solr(也是基于Lucene)。 ElasticSearch的实现原理主要分为以下几个步骤: 用户将数据提交到Elastic Search 数据库中 通过分词控制器去将对应的语句分词,将其权重和分词结果一并存入数据 当用户搜索数据时候,再根据权重将结果排名、打分 将返回结果呈现给用户 Elasticsearch可以用于搜索各种文档。它提供可扩展的搜索,具有接近实时的搜索,并支持多租户。
相关文章
|
26天前
|
存储 Java API
Elasticsearch 7.8.0从入门到精通
这篇文章详细介绍了Elasticsearch 7.8.0的安装、核心概念(如正排索引和倒排索引)、RESTful风格、各种索引和文档操作、条件查询、聚合查询以及在Spring Boot中整合Elasticsearch的步骤和示例。
103 1
Elasticsearch 7.8.0从入门到精通
|
2月前
|
数据可视化 Java Windows
Elasticsearch入门-环境安装ES和Kibana以及ES-Head可视化插件和浏览器插件es-client
本文介绍了如何在Windows环境下安装Elasticsearch(ES)、Elasticsearch Head可视化插件和Kibana,以及如何配置ES的跨域问题,确保Kibana能够连接到ES集群,并提供了安装过程中可能遇到的问题及其解决方案。
Elasticsearch入门-环境安装ES和Kibana以及ES-Head可视化插件和浏览器插件es-client
|
2月前
|
存储 关系型数据库 MySQL
浅谈Elasticsearch的入门与实践
本文主要围绕ES核心特性:分布式存储特性和分析检索能力,介绍了概念、原理与实践案例,希望让读者快速理解ES的核心特性与应用场景。
|
21天前
|
存储 JSON 监控
大数据-167 ELK Elasticsearch 详细介绍 特点 分片 查询
大数据-167 ELK Elasticsearch 详细介绍 特点 分片 查询
41 4
|
26天前
|
自然语言处理 搜索推荐 Java
SpringBoot 搜索引擎 海量数据 Elasticsearch-7 es上手指南 毫秒级查询 包括 版本选型、操作内容、结果截图(一)
SpringBoot 搜索引擎 海量数据 Elasticsearch-7 es上手指南 毫秒级查询 包括 版本选型、操作内容、结果截图
41 0
|
26天前
|
存储 自然语言处理 搜索推荐
SpringBoot 搜索引擎 海量数据 Elasticsearch-7 es上手指南 毫秒级查询 包括 版本选型、操作内容、结果截图(二)
SpringBoot 搜索引擎 海量数据 Elasticsearch-7 es上手指南 毫秒级查询 包括 版本选型、操作内容、结果截图(二)
26 0
|
27天前
|
消息中间件 监控 关系型数据库
MySQL数据实时同步到Elasticsearch:技术深度解析与实践分享
在当今的数据驱动时代,实时数据同步成为许多应用系统的核心需求之一。MySQL作为关系型数据库的代表,以其强大的事务处理能力和数据完整性保障,广泛应用于各种业务场景中。然而,随着数据量的增长和查询复杂度的提升,单一依赖MySQL进行高效的数据检索和分析变得日益困难。这时,Elasticsearch(简称ES)以其卓越的搜索性能、灵活的数据模式以及强大的可扩展性,成为处理复杂查询需求的理想选择。本文将深入探讨MySQL数据实时同步到Elasticsearch的技术实现与最佳实践。
62 0
|
2月前
|
JSON 自然语言处理 算法
ElasticSearch基础2——DSL查询文档,黑马旅游项目查询功能
DSL查询文档、RestClient查询文档、全文检索查询、精准查询、复合查询、地理坐标查询、分页、排序、高亮、黑马旅游案例
ElasticSearch基础2——DSL查询文档,黑马旅游项目查询功能
|
19天前
|
存储 JSON Java
elasticsearch学习一:了解 ES,版本之间的对应。安装elasticsearch,kibana,head插件、elasticsearch-ik分词器。
这篇文章是关于Elasticsearch的学习指南,包括了解Elasticsearch、版本对应、安装运行Elasticsearch和Kibana、安装head插件和elasticsearch-ik分词器的步骤。
76 0
elasticsearch学习一:了解 ES,版本之间的对应。安装elasticsearch,kibana,head插件、elasticsearch-ik分词器。
|
2月前
|
NoSQL 关系型数据库 Redis
mall在linux环境下的部署(基于Docker容器),Docker安装mysql、redis、nginx、rabbitmq、elasticsearch、logstash、kibana、mongo
mall在linux环境下的部署(基于Docker容器),docker安装mysql、redis、nginx、rabbitmq、elasticsearch、logstash、kibana、mongodb、minio详细教程,拉取镜像、运行容器
mall在linux环境下的部署(基于Docker容器),Docker安装mysql、redis、nginx、rabbitmq、elasticsearch、logstash、kibana、mongo

热门文章

最新文章