有奖捉虫:云通信与企业服务文档专题,速来> HOT
文档中心 > 云数据库 MariaDB > 最佳实践 > 利用热点更新技术应对秒杀场景

1 引言

1.1 背景

在“秒杀”和“限时抢购”等这样的场景下,大量用户在极短时间内请求大量商品。而体现在 MySQL 数据库中,同一商品在数据库里肯定是一行存储,所以会有大量的线程来竞争 InnoDB 行锁,当并发度越高时等待的线程也会越多,TPS 会下降 RT 会上升,数据库的吞吐量会严重受到影响。本文档描述 MariaDB 解决“秒杀”和“限时抢购”所做的特殊优化——热点更新技术。

1.2 使用简介

热点更新:采用如下示例语句对某个数据对象频繁进行更新。 目前仅支持 Percona5.7.17版本,可在 MariaDB 购买页 购买。
UPDATE COMMIT_ON_SUCCESS ROLLBACK_ON_FAIL QUEUE_ON_PK 88 TARGET_AFFECT_ROW 1 table_name SET k=k+1 WHERE id=88

2 UPDATE 和 INSERT 语法变化

UPDATE 和 INSERT 的 SQL 语句可以增加新关键字,以表达热点更新的功能,红色为新增内容。

2.1 UPDATE 语法

UPDATE [LOW_PRIORITY]
[COMMIT_ON_SUCCESS] [ROLLBACK_ON_FALL] [QUEUE_ONPK expr1] [TARGET_AFFECT_ROW expr2]
[IGNORE] table_reference
SET col_name1={expr1|DEFAULT} [, col_name2={expr2|DEFAULT}] ...
[WHERE where_condition]

2.2 INSERT 语法

INSERT [LOW_PRIORITY | DLAYED | HIGH_PRIORITY]
[COMMIT_ON_SUCESS] [ROLLBACK_ON_FAIL] [QUEUE_ON_PK expr]
[IGNORE]
[INTO] tbl_name
[PARTITION (partition_name,...)]

2.3 说明

1. UPDATE 只支持单对象更新,即支持 "single-table-syntax",不支持 "multiple-table-syntax"。
2. 只支持单机场景,XA 场景之后的迭代版本由 proxy 实现。
3. INSERT 的三种语法都支持,这里只列举一种。
4. 标准语法参考官方标准:UPDATE SyntaxINSERT Syntax
5. QUEUE_ON_PK指定的 expr 的值的对象,实施热点更新功能,通常 expr 的值是一个正整数值。
6. 参数含义:
COMMIT_ON_SUCCESS:更新操作成功后,立即提交。适合单语句作为一个事务。
ROLLBACK_ON_FAIL:更新操作失败后吗,立即回滚。适合单语句作为一个事务。
QUEUE_ON_PK expr:指定热点更新对象,对被更新的对象封锁和解锁。被更新的对象总数不超过hot_commodity_query_size,即,具有不同值的 expr 的个数不超过hot_commodity_query_size。expr 取值自由,但建议与主键保持一致,也可以不一致。
TARGET_AFFECT_ROW expr:指定热点更新影响的数据行。expr 是一个正整数([1, MAX], MAX 是 8 位正数的最大值)。通常 expr 为 1,表示只有一行受到影响。

2.4 建议

使用时,只在单语句事务中增加全部新增的参数使用。
UPDATE COMMIT_ON_SUCCESS ROLLBACK_ON_FAIL QUEUE_ON_PK 88 TARGET_AFFECT_ROW 1 table_name SET k=k+1 WHERE id=88

2.5 示例

CREATE DATABASE hc_db;

CREATE TABLE hc_tbl(a INT PRIMARY KEY, b INT, c INT);

CREATE TABLE hc_tbl_2(a INT PRIMARY KEY, b INT, c INT);

2.5.1 INSERT 示例


INSERT COMMIT_ON_SUCCESS ROLLBACK_ON_FAIL QUEUE_ON_PK 1 INTO hc_tbl VALUES(1, 1, 1);

INSERT COMMIT_ON_SUCCESS ROLLBACK_ON_FAIL QUEUE_ON_PK 1 INTO hc_tbl SET a= 2;

INSERT COMMIT_ON_SUCCESS ROLLBACK_ON_FAIL QUEUE_ON_PK 1 INTO hc_tbl_2 SELECT * FROM hc_tbl;

2.5.2 UPDATE 示例

UPDATE COMMIT_ON_SUCCESS ROLLBACK_ON_FAIL QUEUE_ON_PK 1 TARGET_AFFECT_ROW 1 hc_tbl SET b= b+1 WHERE a = 1;

QUEUE_ON_PK exprexpr 不一定和 WHERE clause 中的值一致

UPDATE COMMIT_ON_SUCCESS ROLLBACK_ON_FAIL QUEUE_ON_PK 2 TARGET_AFFECT_ROW 1 hc_tbl SET b= b+1 WHERE a = 1;

3 新增参数说明

参数名
功能
类型
默认值
其他
hot_commodity
_enable
控制热点更新功能的开闭
布尔型
true 打开热点更新功能
运行中关闭此参数,新的事务不再使用热点更新。最好是系统启动前就设置好,而不是运行时改变
hot_commodity
_trace
控制跟踪功能的开闭
布尔型
false 关闭跟踪功能
打开时,跟踪信息会输出到标准输出
hot_commodity
_query_size
控制允许对多少个热点更新对象进行更新/插入操作
数值型
10000
起到限流的作用
hot_commodity
_query_size_modify_enable
控制能否修改hot_commodity_query_size
布尔型
false 不允许修改hot_commodity_query_size
方便在单元测试中改hot_commodity_query_size
注意
如果 MySQL server 启动的时候,参数hot_commodity_enable是关闭的,则需要设置其为打开,重新启动 server,才能初始化全局的数据对象表。但如果hot_commodity_query_size值为 0,即使打开了hot_commodity_enable,也不能使用热点更新。所以热点更新功能需要同时设置:
hot_commodity_enable=ON
hot_commodity_query_size=10000 为一个大于 0 的数值,建议控制在 10000、20000 左右,需要根据硬件环境和应用压力等实际情况测试确定其适合的值。
启动 server。