按分类统计商品总数的性能优化思考

如上图,在很多购物类商城系统中经常能看到类似的产品分类列表,今天市场部的同志们要求每个分类后要显示该类的产品总数,并且没有产品的分类不用显示。公司这个项目中的分类有近1000种(并且是无限级分类的树型结构),如果按常规统计方法,每个分类ID都去count一下(同时考虑到每个分类的下级子分类产品数),这样的处理效率肯定很低的。

想了个办法从二个层面优化:

1.数据库层面

创建一个临时表,用游标把产品总数分类事先统计好,一次性在数据库中完成,避免ASPX页面中的多次查询请求。

-- =============================================
-- Author:		<菩提树下的杨过>
-- Create date: <2010-05-31>
-- Description:	<分类统计产品总数>
-- =============================================
CREATE PROCEDURE up_ProductClassCount 	
AS
BEGIN	
	SET NOCOUNT ON;    
	--select .. into 操作会创建新表,下面的语句保证了创建前先删除同名表
	if (select COUNT(*) from sys.tables where name = 'T_ProductClassCount')>0
		drop table T_ProductClassCount

	--把分类表中的id先插入到临时表中
	SELECT F_Id as F_ClsId ,0 as F_Count INTO T_ProductClassCount FROM T_Class WHERE F_Type='Product'

	--用游标对临时表进行汇总处理
	declare @clsid uniqueidentifier;
	declare @count int;
	--创建游标
	declare _temp_cursor Cursor 
		For Select * From T_ProductClassCount
	Open _temp_cursor --打开游标

	Fetch next From _temp_cursor  
	Into @clsid,@count

	While(@@Fetch_Status = 0)
	Begin
		select @count=COUNT(0) from T_Product where F_ClsId in (select F_Id from T_Class where F_Id=@clsid or F_ParentIdStr like '%' + CONVERT(nvarchar(50),@clsid) + '%');
		update T_ProductClassCount set f_count=@count where f_clsid=@clsid;
		print CONVERT(nvarchar(50),@clsid) + ',' + Convert(nvarchar(50),@count) --辅助调试的打印语句
		Fetch next From _temp_cursor  Into @clsid,@count
	End
	Close _temp_cursor --关闭游标
	Deallocate _temp_cursor --释放游标
END

2.页面的数据缓存优化

分类列表显示时利用数据依赖缓存,如果临时表的数据没有变化,则直接从缓存中取值显示,如果上述临时表的数据有变化,则更新缓存。 

3.产品在增删改时,调用一下步骤1中的存储过程,以更新临时表.

注:因为公司平台每天新增的产品数并不多,主要压力来自数据的查询,所以总体看下来这样优化的效果还是比较理想的。

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏数据和云

经典故障分析 - ASSM引发的索引争用与 enq HW -contention 等待事件

作者介绍: 孙加鹏 云和恩墨技术顾问 六年Oracle技术顾问经验,所服务的行业包括电信运营商、金融业、制造业等。 擅长Oracle的故障诊断、高可用架构、升级...

3044
来自专栏Hadoop数据仓库

HAWQ技术解析(十二) —— 查询优化

        即便对SELECT等数据库查询语句已经很熟悉了,但HAWQ里的查询有其自己的特点,还是需要研究一下。 一、HAWQ的查询处理流程        ...

6066
来自专栏维C果糖

史上最简单的 MySQL 教程(二)「关系型数据库」

关系型数据库,是一种建立在关系模型(数学模型)上的数据库。

4309
来自专栏软件测试经验与教训

使用Excel批量生成SQL脚本

我以为生活是猫吃鱼,狗吃肉,奥特曼打小怪兽。现实确是鼠整猫,羊耍狼,俩熊玩死光头强!这个世界这么疯狂,让我们如何坚强!

1452
来自专栏Spark学习技巧

flink 有状态udf 引起血案一

最近在做一个画像的任务,sql实现的,其中有一个udf,会做很多事情,包括将从redis读出历史值加权,并将中间结果和加权后的结果更新到redis。

2615
来自专栏JavaEdge

2 数据库结构优化

3386
来自专栏数据和云

深入解析:DB2 V10.5新特性列式存储表的优点与缺点

李培杨 云和恩墨西区交付技术顾问,有多年数据库运维经验,长期服务移动运营商行业客户,熟悉 DB2 数据库故障诊断,数据库迁移升级。

1274
来自专栏数据和云

【新书连载】诊断Cache buffers chains案例一则

题记:这是某移动运营商在SQL线下审核项目中,协助开发商完善数据库性能的过程。以往开发商遇到此问题总是怀疑是数据库的Bug,试图尝试重启Tuxedo、Weblo...

3438
来自专栏数据和云

Oracle 12.2新特性掌上手册 - 第七卷 Big Data and Data Warehousing

编辑手记:也许Oracle 12.2在内核上的智能改进只能让你眼前一亮,那今天基于Big Data和数据仓库的性能优化增强则会让你伸手触Oracle的强大灵魂。...

3027
来自专栏数据和云

超实用运维经验:TEMP表空间不足、热块竞争经典案例

作者介绍 ? 邓秋爽 云和恩墨技术专家,擅长于SQL tuning、troubleshooting 系统运行过程中可能遇见各种各样的性能问题,如果仅仅是当前系统...

3125

扫码关注云+社区

领取腾讯云代金券