Elasticsearch搜索详解

发表于 | 分类于

查询建议

查询建议：查询建议，为用户提供良好的使用体验。主要包括： 拼写检查； 自动建议查询词（自动补全）。

ES中查询建议的API

查询建议也是使用_search端点地址。在DSL中suggest节点来定义需要的建议查询

示例1：定义单个建议查询词

定义查询建议

1
2
3
4
5
6
7
8
"suggest" : { 
    "my-suggestion" : { <!-- 一个建议查询名 -->
      "text" : "tring out Elasticsearch", <!-- 查询文本 -->
      "term" : { <!-- 使用词项建议器 -->
        "field" : "message" <!-- 指定在哪个字段上获取建议词 -->
      }
    }
  }
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
POST bank/_search
{
  "query" : {
    "match": {
      "email": "virginiaayala@filodyne.com"
    }
  },
  "suggest" : { 
    "my-suggestion" : {  
      "text" : "virginiaayala@filodyne.com", 
      "term" : {  
        "field" : "email"  
      }
    }
  }
}

示例2：定义多个建议查询词

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
POST bank/_search
{
  "suggest": {
    "my-suggest-1" : {
      "text" : "virginiaayala@filodyne.com",
      "term" : {
        "field" : "email"
      }
    },
    "my-suggest-2" : {
      "text" : "Nicholson",
      "term" : {
        "field" : "city"
      }
    }
  }
}

示例3：多个建议查询可以使用全局的查询文本

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
POST _search
{
  "suggest": {
    "text" : "virginiaayala@filodyne.com",
    "my-suggest-1" : {
      "term" : {
        "field" : "email"
      }
    },
    "my-suggest-2" : {
       "term" : {
        "field" : "city"
       }
    }
  }
}

Suggester 介绍

Term suggester

term 词项建议器，对给入的文本进行分词，为每个词进行模糊查询提供词项建议。对于在索引中存在词默认不提供建议词，不存在的词则根据模糊查询结果进行排序后取一定数量的建议词。

常用的建议选项：

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
POST bank/_search
{
  "query" : {
    "match": {
      "email": "virginiaayala@filodyne.com"
    }
  },
  "suggest" : { 
    "my-suggestion" : {  
      "text" : "virginiaayala@filodyne.com", 
      "term" : {  
        "field" : "email"  
      }
    }
  }
}

phrase suggester

phrase 短语建议，在term的基础上，会考量多个term之间的关系，比如是否同时出现在索引的原文里，相邻程度，以及词频等

1
2
3
4
5
6
7
8
9
10
11
12
13
14
POST bank/_search
{
  "query" : {
    "match_all": {}
  },
  "suggest" : { 
    "my-suggestion11" : {  
      "text" : "virginiaayala@filodyne.com", 
      "phrase" : {  
        "field" : "email"  
      }
    }
  }
}

Completion suggester 自动补全

针对自动补全场景而设计的建议器。此场景下用户每输入一个字符的时候，就需要即时发送一次查询请求到后端查找匹配项，在用户输入速度较高的情况下对后端响应速度要求比较苛刻。因此实现上它和前面两个Suggester采用了不同的数据结构，索引并非通过倒排来完成，而是将analyze过的数据编码成FST和索引一起存放。对于一个open状态的索引，FST会被ES整个装载到内存里的，进行前缀查找速度极快。但是FST只能用于前缀查找，这也是Completion Suggester的局限所在。

官网链接：https://www.elastic.co/guide/en/elasticsearch/reference/current/search-suggesters-completion.html

为了使用自动补全，索引中用来提供补全建议的字段需特殊设计，字段类型为 completion。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
PUT music
{
    "mappings": {
        "_doc" : {
            "properties" : {
                "suggest" : {  <!-- 用于自动补全的字段 -->
                    "type" : "completion"
                },
                "title" : {
                    "type": "keyword"
                }
            }
        }
    }
}

Input 指定输入词 Weight 指定排序值（可选）

1
2
3
4
5
6
7
PUT music/_doc/1?refresh
{
    "suggest" : {
        "input": [ "Nevermind", "Nirvana" ],
        "weight" : 34
    }
}

指定不同的排序值：

1
2
3
4
5
6
7
8
9
10
11
12
PUT music/_doc/1?refresh
{
    "suggest" : [
        {
            "input": "Nevermind",
            "weight" : 10
        },
        {
            "input": "Nirvana",
            "weight" : 3
        }
    ]}

放入一条重复数据

1
2
3
4
5
6
7
PUT music/_doc/2?refresh
{
    "suggest" : {
        "input": [ "Nevermind", "Nirvana" ],
        "weight" : 20
    }
}

查询建议根据前缀查询：

1
2
3
4
5
6
7
8
9
10
11
POST music/_search?pretty
{
    "suggest": {
        "song-suggest" : {
            "prefix" : "nir", 
            "completion" : { 
                "field" : "suggest" 
            }
        }
    }
}

对建议查询结果去重

1
2
3
4
5
6
7
8
9
10
POST music/_search?pretty
{
    "suggest": {
        "song-suggest" : {
            "prefix" : "nir", 
            "completion" : { 
                "field" : "suggest",
                "skip_duplicates": true 
            }
        }    }}

查询建议文档存储短语

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
PUT music/_doc/3?refresh
{
    "suggest" : {
        "input": [ "lucene solr", "lucene so cool","lucene elasticsearch" ],
        "weight" : 20
    }
}

PUT music/_doc/4?refresh
{
    "suggest" : {
        "input": ["lucene solr cool","lucene elasticsearch" ],
        "weight" : 10
    }
}

查询：

1
2
3
4
5
6
7
8
9
10
11
12
POST music/_search?pretty
{
    "suggest": {
        "song-suggest" : {
            "prefix" : "lucene s", 
            "completion" : { 
                "field" : "suggest" ,
                "skip_duplicates": true
            }
        }
    }
}
分享到： 收藏夹 复制网址 邮件 微信 QQ空间 腾讯微博 豆瓣 一键分享 更多