全文搜索 (二)
来源:互联网 发布:win7网络共享软件 编辑:程序博客网 时间:2024/05/16 15:26
转自: http://blog.csdn.net/dm_vincent/article/details/41720193
多词查询(Multi-word Queries)
如果我们一次只能搜索一个词,那么全文搜索就会显得相当不灵活。幸运的是,通过match
查询来实现多词查询也同样简单:
GET /my_index/my_type/_search{ "query": { "match": { "title": "BROWN DOG!" } }}
以上的查询会返回所有的四份文档:
{ "hits": [ { "_id": "4", "_score": 0.73185337, "_source": { "title": "Brown fox brown dog" } }, { "_id": "2", "_score": 0.47486103, "_source": { "title": "The quick brown fox jumps over the lazy dog" } }, { "_id": "3", "_score": 0.47486103, "_source": { "title": "The quick brown fox jumps over the quick dog" } }, { "_id": "1", "_score": 0.11914785, "_source": { "title": "The quick brown fox" } } ]}
文档4的相关度最高因为它包含了"brown"
两次和"dog"
一次。 文档2和文档3都包含了"brown"
和"dog"
一次,同时它们的title
字段拥有相同的长度,因此它们的分值相同。 文档1只包含了"brown"
。
因为match
查询需要查询两个词条 - ["brown","dog"]
- 在内部它需要执行两个term
查询,然后将它们的结果合并来得到整体的结果。因此,它会将两个term
查询通过一个bool
查询组织在一起,我们会在合并查询一节中详细介绍。
从上面的例子中需要吸取的经验是,文档的title
字段中只需要包含至少一个指定的词条,就能够匹配该查询。如果匹配的词条越多,也就意味着该文档的相关度就越高。
提高精度(Improving Precision)
匹配任何查询词条就算作匹配的话,会导致最终结果中有很多看似无关的匹配。它是一个霰弹枪式的策略(Shotgun Approach)。我们大概只想要显示包含了所有查询词条的文档。换言之,相比brown OR dog
,我们更想要的结果是brown AND dog
。
match
查询接受一个operator
参数,该参数的默认值是"or"
。你可以将它改变为"and"
来要求所有的词条都需要被匹配:
GET /my_index/my_type/_search{ "query": { "match": { "title": { "query": "BROWN DOG!", "operator": "and" } } }}
match
查询的结构需要被稍稍改变来容纳operator
参数。
这个查询的结果会将文档1排除在外,因为它只包含了一个查询词条。
控制精度(Controlling Precision)
在all和any中选择有种非黑即白的感觉。如果用户指定了5个查询词条,而一份文档只包含了其中的4个呢?将"operator"
设置成"and"
会将它排除在外。
有时候这正是你想要的,但是对于大多数全文搜索的使用场景,你会希望将相关度高的文档包含在结果中,将相关度低的排除在外。换言之,我们需要一种介于两者中间的方案。
match
查询支持minimum_should_match
参数,它能够让你指定有多少词条必须被匹配才会让该文档被当做一个相关的文档。尽管你能够指定一个词条的绝对数量,但是通常指定一个百分比会更有意义,因为你无法控制用户会输入多少个词条:
GET /my_index/my_type/_search{ "query": { "match": { "title": { "query": "quick brown dog", "minimum_should_match": "75%" } } }}
当以百分比的形式指定时,minimum_should_match
会完成剩下的工作:在上面拥有3个词条的例子中,75%
会被向下舍入到66.6%
,即3个词条中的2个。无论你输入的是什么,至少有2个词条被匹配时,该文档才会被算作最终结果中的一员。
minimum_should_match
参数非常灵活,根据用户输入的词条的数量,可以适用不同的规则。具体可以参考minimum_should_match
参数的相关文档。
为了更好地了解match
查询是如何处理多词查询的,我们需要看看bool
查询是如何合并多个查询的。
合并查询(Combining Queries)
在合并过滤器中我们讨论了使用bool
过滤器来合并多个过滤器以实现and
,or
和not
逻辑。bool
查询也做了类似的事,但有一个显著的不同。
过滤器做出一个二元的决定:这份文档是否应该被包含在结果列表中?而查询,则更加微妙。它们不仅要决定是否包含一份文档,还需要决定这份文档有多相关。
和过滤器类似,bool
查询通过must
,must_not
以及should
参数来接受多个查询。比如:
GET /my_index/my_type/_search{ "query": { "bool": { "must": { "match": { "title": "quick" }}, "must_not": { "match": { "title": "lazy" }}, "should": [ { "match": { "title": "brown" }}, { "match": { "title": "dog" }} ] } }}
title
字段中含有词条quick
,且不含有词条lazy
的任何文档都会被作为结果返回。目前为止,它的工作方式和bool
过滤器十分相似。
差别来自于两个should
语句,它表达了这种意思:一份文档不被要求需要含有词条brown
或者dog
,但是如果它含有了,那么它的相关度应该更高。
{ "hits": [ { "_id": "3", "_score": 0.70134366, "_source": { "title": "The quick brown fox jumps over the quick dog" } }, { "_id": "1", "_score": 0.3312608, "_source": { "title": "The quick brown fox" } } ]}
文档3的分值更高因为它包含了brown
以及dog
。
分值计算(Score Calculation)
bool
查询通过将匹配的must
和should
语句的_score
相加,然后除以must
和should
语句的总数来得到相关度分值_score
。
must_not
语句不会影响分值;它们唯一的目的是将不需要的文档排除在外。
控制精度(Controlling Precision)
所有的must
语句都需要匹配,而所有的must_not
语句都不能匹配,但是should
语句需要匹配多少个呢?默认情况下,should
语句一个都不要求匹配,只有一个特例:如果查询中没有must
语句,那么至少要匹配一个should
语句。
正如我们可以控制match
查询的精度,我们也能够通过minimum_should_match
参数来控制should
语句需要匹配的数量,该参数可以是一个绝对数值或者一个百分比:
GET /my_index/my_type/_search{ "query": { "bool": { "should": [ { "match": { "title": "brown" }}, { "match": { "title": "fox" }}, { "match": { "title": "dog" }} ], "minimum_should_match": 2 } }}
以上查询的而结果仅包含以下文档:
title
字段包含: "brown" AND "fox"
或者 "brown" AND "dog"
或者 "fox" AND "dog"
如果一份文档含有所有三个词条,那么它会被认为更相关。
- 全文搜索 (二)
- Lucene全文搜索学习笔记(二)
- 全文搜索
- 全文搜索
- 全文搜索
- 全文搜索
- PostgreSQL8.3.X新特性-全文搜索(二)
- django全文搜索学习心得(二)solr 篇
- coreseek(中文全文搜索)安装和使用(二)
- python全文搜索库Whoosh新手入门(二)快速上手
- Solr(二)——Java使用solr全文搜索
- 全文检索Lucene(二)--特定项搜索与queryParser搜索
- 页面内全文搜索
- 全文搜索lucene简介
- SQL SERVER全文搜索
- MySQL 全文搜索
- [转] 走进全文搜索
- MySQL 全文搜索
- 带参数的main函数
- 分享一个Android 分类打印,及日志记录工具
- Centons7上安装Redis3.2.8并配置多端口
- 《人类的演化》书摘
- UML类图关系(泛化 、继承、实现、依赖、关联、聚合、组合)
- 全文搜索 (二)
- 【Android Studio错误汇总】Attribute "height" already defined with incompatible format.
- C++第三课------默认构造函数
- 策略模式StrategyPattern
- 基于Bootstrap简洁的后台UI框架
- Sqoop使用手册
- win10或win8下安装msi格式安装包报错(error code is 2502/2503)
- ASP.NET去除HTML标签并截取指定长度字符串
- php7 wordpress 报错修改