ES多字段匹配查询时的权重控制

简介: ES多字段匹配查询时的权重控制

一、场景说明


我们在使用ES进行查询时常常遇到这样的场景:需要根据用户输入的查询关键字同时去匹配多个字段,并且希望对匹配字段的权重做不同的设置,比如同时去匹配公司名称和公司简介,这里一般需要提升公司名称匹配的权重,这样得出的相关性评分才会更准确。

在ES中,我们可以通过boost参数来控制多字段查询的权重。


二、权重参数boost


官网链接


boost是一个用来修改文档的相关性的参数,默认值是1。可以通过设置不同的值,提升该字段在相关性评分的权重。


boost有两种类型:


索引期间boost

查询期间boost

创建索引时指定的boost参数是存储在索引中的,修改boost值唯一的方法是重新索引这篇文档。

鉴于此,推荐用户使用查询期间的boost,这样会更加灵活,用户可以在不重新索引数据的前提下改变字段的权 重。


1、索引期间boost

创建索引

说明:

在创建索引的过程中,在mappings中给字段设置boost的值为3,提升company的相关性权重。

PUT my-index-000001
{
  "mappings": {
    "properties": {
      "company": {
        "type": "text", "analyzer": "ik_smart", "boost":"3"
      },
      "desc": {
        "type": "text", "analyzer": "ik_smart"
      }
    }
  }
}

添加数据:


PUT my-index-000001/_doc/1
{
  "company": "北京京东世纪股份有限公司"
}
PUT my-index-000001/_doc/2
{
  "desc": "北京京东世纪股份有限公司"
}


通过multi_match进行多字段匹配查询:


GET my-index-000001/_search
{
  "query": {
    "multi_match": {
      "query": "京东",
      "fields": ["company","desc"]
    }
  }
}

执行结果:

"hits" : [
      {
        "_index" : "my-index-000001",
        "_type" : "_doc",
        "_id" : "1",
        "_score" : 0.68324494,
        "_source" : {
          "company" : "北京京东世纪股份有限公司"
        }
      },
      {
        "_index" : "my-index-000001",
        "_type" : "_doc",
        "_id" : "2",
        "_score" : 0.2876821,
        "_source" : {
          "desc" : "北京京东世纪股份有限公司"
        }
      }
    ]


结论:

对相同的字段串进行匹配,由于company的权重boost是desc的3倍,最后的相关性得分也高接近3倍。。


2、查询期间boost

DELETE my-index-000001
PUT my-index-000001
{
  "mappings": {
    "properties": {
      "company": {
        "type": "text", "analyzer": "ik_smart"
      },
      "desc": {
        "type": "text", "analyzer": "ik_smart"
      }
    }
  }
}
PUT my-index-000001/_doc/1
{
  "company": "北京京东世纪股份有限公司"
}
PUT my-index-000001/_doc/2
{
  "desc": "北京京东世纪股份有限公司"
}


正常查询,2条记录的得分一样:


GET my-index-000001/_search
{
  "query": {
    "multi_match": {
      "query": "京东",
      "fields": ["company","desc"]
    }
  }
}


84.png

提高company字段的权重:


GET my-index-000001/_search
{
  "query": {
    "multi_match": {
      "query": "京东",
      "fields": ["company^3","desc"]
    }
  }
}


说明:

通过字段名称后面添加“^”符号和boost的值,提升指定字段的评分权重。


三、ES java API中权重控制


 

Map<String,Float> fields = new HashMap(2);
    fields.put("company", 3.0f);
    fields.put("desc", 1.0f);
    queryBuilder.must(QueryBuilders.multiMatchQuery(paramsDto.getKeyword()).fields(fields).analyzer("ik_smart"));


说明:

通过封装fields对象,指定需要匹配的字段和字段的权重boost。


总结


看完本文,你学会了如何通过boost参考提高多字段匹配时的评分权重了吗?

1、权重参数boost的2种用法,创建索引时指定字段的权重以及查询时指定字段权重。

2、在ES java API查询中,如何指定字段的权重参数boost。

目录
相关文章
|
存储 安全 算法
3.【Elasticsearch】Elasticsearch从入门到放弃-权重及打分
【Elasticsearch】Elasticsearch从入门到放弃-权重及打分
3.【Elasticsearch】Elasticsearch从入门到放弃-权重及打分
|
算法 索引
阿里云 Elasticsearch 使用 RRF 混排优化语义查询结果对比
Elasticsearch 从8.8版本开始,新增 RRF,支持对多种不同方式召回的多个结果集进行综合再排序,返回最终的排序结果。之前 Elasticsearch 已经分别支持基于 BM25 的相关性排序和向量相似度的召回排序,通过 RRF 可以对这两者的结果进行综合排序,可以提升排序的准确性。
3136 0
|
自然语言处理 Java 索引
Elastic:如何查询特殊字符
某些业务场景下我们需要使用特殊符号来进行查询,但是es的默认分词器以及ik分词器等大多数分词器都会将特殊符号过滤掉,导致后续无法通过特殊符号查询到数据。 那么我们如何来解决这个问题呢,下面列举出几种处理方案
1348 0
|
自然语言处理 Java 网络架构
elasticsearch学习三:elasticsearch-ik分词器的自定义配置 分词内容
这篇文章是关于如何自定义Elasticsearch的ik分词器配置以满足特定的中文分词需求。
635 0
elasticsearch学习三:elasticsearch-ik分词器的自定义配置 分词内容
|
自然语言处理 应用服务中间件 nginx
一文教会你 分词器elasticsearch-analysis-ik 的安装使用【自定义分词库】
这篇文章是关于如何在Elasticsearch中安装和使用ik分词器的详细教程,包括版本匹配、安装步骤、分词测试、自定义词库配置以及创建使用ik分词器的索引的方法。
一文教会你 分词器elasticsearch-analysis-ik 的安装使用【自定义分词库】
|
JSON 数据格式 Python
【python】解决json.dump(字典)时报错Object of type ‘float32‘ is not JSON serializable
在使用json.dump时遇到的“Object of type ‘float32’ is not JSON serializable”错误的方法,通过自定义一个JSON编码器类来处理NumPy类型的数据。
723 1
|
自然语言处理 索引
Elasticsearch 常用查询语句大全
【7月更文挑战第8天】Elasticsearch 常用查询语句大全
|
Java 关系型数据库 BI
ES 中时间日期类型 “yyyy-MM-dd HH:mm:ss” 的完全避坑指南
ES 中时间日期类型 “yyyy-MM-dd HH:mm:ss” 的完全避坑指南
ES 中时间日期类型 “yyyy-MM-dd HH:mm:ss” 的完全避坑指南
|
自然语言处理 Java
ElasticSearch 实现分词全文检索 - match、match_all、multimatch查询
ElasticSearch 实现分词全文检索 - match、match_all、multimatch查询
1240 0
|
存储 分布式计算 搜索推荐
ES自定义评分机制:function_score查询详解
ES自定义评分机制:function_score查询详解
1931 0
ES自定义评分机制:function_score查询详解