es搜索优化&mysql查询优化

用户4945346

发布于 2020-06-16 10:35:13

1.5K0

发布于 2020-06-16 10:35:13

这周优化了我们沙抖官网搜索的功能，这个搜索目前是根据视频标题进行匹配，之前是对用户输入的关键词进行了分词查找，比如用户输入【机器人】,这样的话，只要视频标题中有关键词的任意一个字都会被搜到，比如含有【人】字的标题会展示出来，并可能排的很靠前，所以我就对当前的搜索进行了优化，现在搜索是优先进行相邻短语查询 match_phrase，如果相邻短语查询结果小于2个就进行普通的分词查询，这个相邻短语查询是要求在请求字符串中的所有查询项必须都在文档中存在，文中顺序也得和请求字符串一致，且彼此相连。这样查询的话，标题中含有【机器人】的结果肯定在前。

修改后的查询body体为:

{
    "query": {
        "bool": {
            "filter": {
                "match_phrase": {
                    "video_title": word
                }
            },
            "must": {
                "range": {
                    "video_date": {
                        "gte": "now-30d+8h",
                        "lte": "now+8h"
                    }
                }
            }
        }
    },
    "sort": {
        "video_like": {
            "order": "desc"
        }
    },
    "from": start,
    "size": size,
    "highlight": {
        "pre_tags": [
            "<strong style='color:red'>"
        ],
        "post_tags": [
            "</strong>"
        ],
        "fields": {
            "video_title": {

            }
        }
    }
}

这周内我还对我们的数据表查询进行了优化，加了普通索引和联合索引，现在我们一个视频数据表的数据量是几百兆大小，根据视频行业进行查询时，mysql 响应速度在 600ms 左右，我对行业字段添加了普通索引，查询响应在 30 ms 左右，前后对比优化结果还是很明显的。我们还有根据视频分类进行筛选的功能，视频表的查询条件经常用到视频发布时间和视频分类字段，我就给这俩加了联合索引。添加联合索引后，查询速度也是在 30ms 左右。正如网友所说，如果正确设计并且使用索引 mysql 就是一辆兰博基尼，否则的话它就是人力三轮车。

添加索引语句如下:

1.普通索引
ALTER TABLE `aweme_data` ADD INDEX category_id_index ( `category_id` );
2.添加联合索引
ALTER TABLE `aweme_data` ADD INDEX type_create_time ( `type_id`, `aweme_create_time`);

本文参与腾讯云自媒体分享计划，分享自微信公众号。

原始发表：2020-04-12，如有侵权请联系 cloudcommunity@tencent.com 删除

云数据库 SQL Server