首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
您找到你想要的搜索结果了吗?
是的
没有找到

es中的analyzer,tokenizer,filter你真的了解吗?

最近在做搜索推荐相关的需求,有一个场景中需要某一列能处理多种分词器的分词匹配,比如我输入汉字或拼音或语义相近的词都需要把匹配结果返回回来。经过一番调研,最终我们选择了elasticsearch来处理数据的索引与搜索,在配置分词器时会发现大多分词器配置中都需要配置analyzer、tokenizer、filter,那么这三个东西分别代表着什么,又有什么样的联系呢?这就是本文要重点讨论的事情。关于如何在elasticsearch中使用分词器[1]以及常用的中文分词器[2]和拼音分词器[3]是什么,该怎么样去配置这些问题不是本文要讨论的重点,链接都已经奉上,需要的自取。本文咱们就来聚焦讨论一下analyzer、tokenizer、filter之间的区别与联系。

06

【ES三周年】ES最佳实践案例

Elasticsearch 是一个高效、快速且高度可扩展的搜索引擎。它已经成为许多公司和组织的首选搜索引擎,特别是在大型数据集的情况下。 根据经验,在使用 Elasticsearch 时遵循一些最佳实践可以帮助您实现更好的性能和可维护性。 第一项最佳实践是对数据进行良好的设计和建模。这意味着数据需要在索引之前进行精心设计和建模,以确保正确的搜索和过滤。在建立索引之前,首先需要确定索引的字段,并确定如何解析和存储需要索引的数据。为了减少查询的处理时间,必须避免不必要的字段嵌套。 第二项最佳实践是索引和分片的优化。在 Elasticsearch 中,索引通常是垂直划分数据的方式。对于大型数据集,我们需要对索引进行水平分片,以便每个节点都可以处理一部分索引。此外,我们还需要进行分片的恰当设置和大小的控制,以便避免节点过载,从而每个节点在集群中受益平均。 第三项最佳实践是对查询进行优化。良好的查询设计可以极大地增加性能。为了最大限度地减少搜索的时间,我们建议在搜索操作中使用一些基本的 Elasticsearch 查询优化技巧,例如使用 match 查询,尽可能减小过滤器查询的数量等。 第四项最佳实践是监控 Elasticsearch 的健康状况。在 Elasticsearch 集群中,节点状态、索引状态、负载均衡、缓存大小、查询速度等都可以影响整个集群的性能。因此,借助 Elasticsearch 的监控工具,每天都对集群进行定期监控的有效健康状况的大有裨益。 最后一项最佳实践是在维护 Elasticsearch 系统时进行数据重建和性能分析。数据重建有助于缩小索引大小,释放磁盘空间,并确保数据有序。同时,定期对 Elasticsearch 进行性能分析有助于发现性能瓶颈和优化 Elasticsearch 集群,以便其在提供服务和响应时间方面获得更好的结果。 综上所述,Elasticsearch 是一个强大的搜索引擎,但需要遵循一些有效的最佳实践,从而发挥其最大的潜力。事实上,良好的 Elasticsearch 系统设计和性能优化,可以帮助您的公司提高效率,改善搜索结果质量,并提高整个系统的可靠性,还可以保证您的系统能够保持最新状态并且运作更加高效。

02
领券