文档中心 Elasticsearch Service 开发教程 腾讯云 ES+SCF 快速构建搜索服务

腾讯云 ES+SCF 快速构建搜索服务

最近更新时间:2019-12-04 10:09:17

搜索服务

搜索服务广泛的存在于我们身边,例如我们生活中用的百度、工作中用的 wiki 搜索、淘宝时用的商品搜索等。这些场景的数据具有数据量大、结构化、读多写少等特点,而传统的数据库的事务特性在搜索场景并没有很好的使用空间,并且在全文检索方面速度慢(如 like 语句)。因此,Elasticsearch 应运而生。

Elasticsearch 是一个广泛应用于全文搜索领域的开源搜索引擎,它可以快速地索引、搜索和分析海量的文本数据。腾讯云 ES 是基于 Elasticsearch 构建的高可用、可伸缩的云端托管 Elasticsearch 服务,对结构化和非结构化的数据都有良好的支持,同时还提供了简单易用的 RESTful API 和各种语言的客户端,方便快速搭建稳定的搜索服务。

本文将针对搜索场景,使用 腾讯云 ES 官方文档 作为语料,介绍如何使用腾讯云 ES+SCF 快速搭建搜索服务。搜索服务界面示例如下:
image

资源准备

只需要一个 ES 集群。在腾讯云购买一个 ES 集群,集群的规模根据搜索服务的 QPS 和存入的文档的数据量而定。具体可参考 节点类型存储配置建议

部署搜索服务

使用腾讯云免费的 SCF 工具部署搜索服务的前端界面和后台服务。

  1. 在【云函数】>【函数服务】界面左上角首先选择您购买 ES 集群的地域。
  2. 新建一个函数服务,记住您设置的函数名称,然后选择【下一步】>【完成】。
  3. 函数配置页单击右上角的【编辑】,开启内网访问,并选择您创建 ES 所选的 VPC,然后单击【保存】。
  4. 首先将 代码 zip 包 下载到本地。然后在函数代码页的提交方法中选择上传本地 zip 包,并选择刚下载的 zip 包,单击【保存】。
  5. 函数代码页修改代码。需要修改的文件有index.pyindex.html
    • index.py中的es_endpoint修改为您的 ES 集群的内网地址,填写格式如:http://10.0.3.14:9200
    • index.py中的es_password修改为白金版 ES 密码,如果不是白金版则不修改。
    • index.html中的server_name修改为您创建的 SCF 函数的函数名称,默认为myserver
      image
      image
      注意:

      样例默认使用es_corpus_0126作为索引名,请确保该索引没有业务在使用。如需修改,可在index.py中修改es_index变量。

  6. 触发方式页单击【添加触发方式】,按下图添加 API 网关触发器,并启用集成响应,然后单击【保存】。
  7. 可在触发方式中看到函数的“访问路径”,单击此路径即可访问页面。
  8. 上传 腾讯云 ES 官方文档 样例数据。单击搜索框上方的文字,自动导入数据。
  9. 至此,一个简单的基于腾讯云 ES 的问答搜索服务后台已部署完成。

了解更多

停用词和用户词典导入

停用词不会被 ES 检索,用户词典在分词的时候将保留该词。在上面的案例中,我们导入了默认的 停用词库用户词典,您也可以通过 ES 集群详情页的【高级配置】>【更新词典】导入自己的停用词和用户词典。
image

同义词配置

同义词配置需要在创建索引时指定,支持 Solr 和 WordNet 两种同义词格式,具体可参考 Solr synonyms 对格式的介绍。