Loading [MathJax]/jax/output/CommonHTML/config.js
前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
社区首页 >专栏 >人大、腾讯数据库联合攻坚交答卷:7项顶会论文突破,成果落地TDSQL产线

人大、腾讯数据库联合攻坚交答卷:7项顶会论文突破,成果落地TDSQL产线

作者头像
腾讯云数据库 TencentDB
发布于 2025-03-29 02:56:49
发布于 2025-03-29 02:56:49
830
举报
近日,中国人民大学与腾讯联合创新实验室召开2025年度会议,集中展示了双方围绕"金融级分布式数据库系统"联合攻关成果——近两年在数据库领域三大国际顶会(VLDB/ICDE/SIGMOD)累计录用7篇前沿论文,部分研究核心技术已深度应用于腾讯云数据库TDSQL产线,在金融、政务等关键领域实现规模化落地。

中国人民大学数据工程与知识工程教育部重点实验室主任杜小勇,中国人民大学信息学院副院长(主持工作)柴云鹏,信息学院陈红教授、陈晋川副教授、卞昊穹老师,数据工程与知识工程教育部重点实验室卢卫教授、张峰教授、李彤副教授,以及腾讯技术管理委员会主任王巨宏,腾讯云数据库TDSQL技术研发总经理潘安群,腾讯高校合作总监刘婷婷出席会议。

中国人民大学三位教授围绕双方联合研究成果带来主题分享,以下是核心研究成果摘要👇

事务处理优化

//并发控制协议优化

针对复杂环境下的数据库事务处理挑战,提出多项关键技术突破。在混合并发控制方面,提出HDCC,通过锁共享机制与全局验证机制融合确定性(Calvin)与非确定性(OCC)并发控制,采用双日志交替恢复技术解决跨机制故障恢复难题,实现单机与分布式场景下5.7倍性能提升,该成果录用于VLDB 2025。

(HDCC架构图)

//跨空间域协议优化

跨地域异构数据源的数据库中间件中,分布式事务因网络延迟和锁竞争时间过长(事务阻塞等待锁)导致性能显著下降。提出延迟感知的地理分布式事务处理方案GeoTP,减少分布式事务的网络往返,通过策略性延迟锁获取,缩短锁竞争跨度,进一步优化调度器策略,最小化锁冲突时长。在YCSB 和 TPC-C 基准测试中,GeoTP对比原生中间件最高实现 17.7 倍性能提升,该成果录用于ICDE 2025。

(GeoTP架构图)

//分布式事务优化

分布式事务因多轮跨节点通信导致性能低下,现有方法(分区迁移或超级节点)存在迁移阻塞、单点瓶颈等缺陷,难以兼顾性能与扩展性。提出 Lion 事务处理协议,结合 LSTM 工作负载预测算法,异步预调整副本位置,动态匹配事务访问模式;通过抢占式、异步的副本位置优化,避免数据迁移阻塞或超级节点瓶颈。对比现有最新协议,Lion吞吐量最高提升 2.7 倍,扩展性优化 76.4%,该成果发表于ICDE 2024。

(Lion架构图)

存储优化

//压缩直接计算优化

针对现有压缩文本处理方案存在支持操作类型有限、处理效率低、空间占用高等局限,难以满足海量文本数据高效管理需求。提出同态压缩理论,构建 HOCO 文本数据管理引擎。通过模块化与面向对象设计,支持多压缩方案的同态扩展,实现压缩域直接处理,覆盖随机访问、修改、分析等多元化文本处理任务,HOCO随机访问与修改吞吐量平均达现有方案 9.18 倍,文本分析任务延迟较未压缩处理降低 7.16 倍,该成果发表于SIGMOD 2024。

(HOCO架构图)

//学习索引优化

现有学习型索引在多核数据存储中面临扩展性瓶颈,存在并发性能受限、统计信息维护成本高、难以适应负载倾斜等问题,制约了其在高性能存储场景的应用。提出 SALI(可扩展自适应学习型索引框架),在动态适配负载倾斜下,优化并发场景下的索引结构演进,提升多核环境下的并行处理能力;在索引内部高效维护数据分布特征,降低元数据管理开销,增强索引扩展性。SALI在64 线程,较当前最先进的学习型索引,插入吞吐量平均提升 2.04 倍,该成果发表于SIGMOD 2024。

(SALI架构图)

会议还对实验室科研工作中表现优异的学生予以表彰,激励更多学子投身数据库研究。未来,双方将持续联合攻坚国产数据库技术,加速成果转化。

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2025-03-28,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 腾讯云数据库 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
暂无评论
推荐阅读
编辑精选文章
换一批
入选国际数据库顶级会议ICDE,腾讯云数据库技术创新获权威认可
今日获悉,腾讯云数据库2篇论文入选国际数据库顶级会议ICDE。其分布式事务协议——Lion和内存-磁盘跨越索引设计框架,解决了数据库领域的普遍难题,技术创新获得国际权威认可。
小腾资讯君
2024/05/16
1580
腾讯云数据库TDSQL两篇论文入选数据库顶会SIGMOD,产学研结合助力国产数据库生态建设
文章出处:腾讯科技 6月20日-25日,数据库顶会2021 ACM SIGMOD 在西安举行,腾讯云数据库TDSQL团队两篇论文入选。 SIGMOD数据管理国际会议是数据库领域具有最高学术地位的国际性学术会议。腾讯云数据库两篇入选论文涉及多级缓冲管理器Spitfire概念的首次提出和多种级别强一致性的创新突破,致力于从基础理论层面推动数据库技术创新突破。在本次大会中,腾讯云数据库技术总监邱敏分享了腾讯云原生数据库发展过程中遇到的挑战和技术创新点。 在今年的研究类论文“Spitfire : A Three-
腾讯数据库技术
2021/06/25
6700
【犀牛鸟·视野】这些论文为何脱颖而出?腾讯TDSQL带你走进VLDB 2019
VLDB 2019(Very Large Data Bases)于2019.8.26-2019.8.30在洛杉矶召开,腾讯TDSQL分布式数据库团队带来现场报道。 VLDB是三大国际顶尖数据库会议之一(其余二者为SIGMOD和ICDE),根据大会官方公布,今年VLDB共接收了128篇Research Paper、22篇IndustryPaper和48个Demo。 (敬请期待TDSQL后续精彩论文解读) Keynote 本届VLDB带来三个Keynote,角度分别为:尝试从不同的技术角度更优雅地解决应用
腾讯高校合作
2019/09/04
9660
【犀牛鸟·视野】这些论文为何脱颖而出?腾讯TDSQL带你走进VLDB 2019
NDBC | 腾讯TDSQL提出三个“数据库之问”,数据库技术未来重点在哪?
李海翔,网名“那海蓝蓝”,腾讯金融云数据库技术专家。中国人民大学信息学院工程硕士企业导师。著有《数据库事务处理的艺术:事务管理和并发访问控制》、《数据库查询优化器的艺术:原理解析与SQL性能优化》、《大数据管理》。
分布式数据库TDSQL
2019/10/17
1.3K0
NDBC | 腾讯TDSQL提出三个“数据库之问”,数据库技术未来重点在哪?
现场直击 | 腾讯TDSQL带你走进VLDB 2019
VLDB 2019(Very Large Data Bases)于2019.8.26 – 2019.8.30在洛杉矶召开,腾讯TDSQL分布式数据库团队带来现场报道。
分布式数据库TDSQL
2019/08/30
2K0
现场直击 | 腾讯TDSQL带你走进VLDB 2019
腾讯与中国人民大学开源最新研究成果:3TS腾讯事务处理技术验证系统
作者:李海翔,腾讯TEG数据库技术专家 一个是全球领先的科技公司,一个是中国数据库基础学术研究的摇篮,近日,中国人民大学-腾讯协同创新实验室正式举行揭牌仪式。据了解,双方已聚焦在数据库基础研究领域进行了多年的前沿产学研合作,以及数据库人才合作培养计划,在推进数据库安全可控的同时面向未来大规模多场景数字化时代进行前沿创新研究储备,其中实验室输出的包括“全时态数据库系统”等多项成果相继被VLDB等国际顶会收录,同时申请获得了多项国家技术专利。 在本次实验室揭牌亮相的同时,腾讯与中国人民大学研究团队还
腾讯技术工程官方号
2020/11/30
7720
腾讯云数据库亮相VLDB,产学协同推动数据库技术创新
2024年8月26日,数据库领域国际顶会International Conference on Very Large Data Bases(VLDB 2024)在广州隆重开幕。腾讯云数据库携多个学术与工业联合研究的成果重磅亮相,持续致力于打造产学研用协同创新新范式。
小腾资讯君
2024/08/30
2070
TDSQL带你走进数据库顶会VLDB 2018 | 论文纵览
一年一届的数据库领域顶级会议VLDB 2018即将于当地时间8月27日-8月31日在巴西里约热内卢召开。 在本届大会上,腾讯公司TDSQL团队携手中国人民大学、武汉大学共同投中一篇Demo Paper,该工作旨在分布式数据库TDSQL上高效地实现相似查询。 TDSQL团队一直在努力为用户提供丰富的功能、高效的性能和便捷的服务。 在大会召开之际,腾讯TDSQL团队对本届大会的论文佳作进行了分析,萃取了精华之精华以飨读者,分享技术,让我们一起共同成长。 VLDB VLDB 会议全称Very Larg
腾讯技术工程官方号
2018/08/28
11.7K4
TDSQL带你走进数据库顶会VLDB 2018 | 论文纵览
即将亮相 SIGMOD ,腾讯云TDSQL凭什么这么秀?
国产数据库的火热从来不是一夜时间的事情,虽然看起来像是一夜梨花开,但更重要是一直以来源头创新工作的厚积薄发。 6月20日-25日,2021 ACM SIGMOD 即将在西安举行。在今年的SIGMOD会议现场,来自腾讯云数据库TDSQL的大咖们将受邀分享自己的洞见和理论创新成果,展示腾讯云数据库TDSQL在数据库基础创新领域的最新探索和研究成果。 今年,TDSQL相关论文被入选SIGMOD,领域涉及分布式数据库事务处理、存储等关键技术领域,致力于从基础理论层面推动数据库技术创新突破。其中,腾讯云原生数据
腾讯云数据库 TencentDB
2021/06/18
9070
VLDB 2019 | 揭秘腾讯TDSQL全时态数据库系统
【编者按:全时态数据为数据安全、数据重演、数据挖掘和AI技术的施展提供了物理基础。这篇入选VLDB 2019的论文介绍,基于腾讯云TDSQL扩展而来的全时态数据库系统(T-TDSQL),在保证OLTP性能的前提下提供了轻量级的全时态数据管理功能和全时态数据的事务处理能力、以及集当前态数据于生产系统集历史态数据于分析型系统的集群架构,构成了全时态数据的完备解决方案。】
分布式数据库TDSQL
2019/08/29
10.2K0
VLDB 2019 | 揭秘腾讯TDSQL全时态数据库系统
【犀牛鸟·硬核】 VLDB 2019 | 揭秘腾讯与中国人民大学最新联合研究成果TDSQL全时态数据库系统
编者按:全时态数据为数据安全、数据重演、数据挖掘和AI技术的施展提供了物理基础。这篇入选VLDB 2019的论文介绍,基于腾讯云TDSQL扩展而来的全时态数据库系统(T-TDSQL),在保证OLTP性能的前提下提供了轻量级的全时态数据管理功能和全时态数据的事务处理能力、以及集当前态数据于生产系统集历史态数据于分析型系统的集群架构,构成了全时态数据的完备解决方案。 前言 01 腾讯与中国人民大学于2017年起,依托于腾讯TEG计费平台部丰富的实战经验和中国人民大学数据工程与知识工程教育部重点实验室的多年学术
腾讯高校合作
2019/08/29
7750
【犀牛鸟·硬核】 VLDB 2019 | 揭秘腾讯与中国人民大学最新联合研究成果TDSQL全时态数据库系统
这次,听人大教授讲讲分布式数据库的多级一致性
近年来,凭借高可扩展、高可用等技术特性,分布式数据库正在成为金融行业数字化转型的重要支撑。分布式数据库如何在不同的金融级应用场景下,在确保数据一致性的前提下,同时保障系统的高性能和高可扩展性,是分布式数据库的一个核心技术挑战。 针对以上分布式一致性的困境,中国人民大学-腾讯协同创新实验室研究提出“多级一致性”的事务处理理念。该技术包含严格可串行化、顺序可串行化、可串行化三大隔离级别,可针对不同应用场景要求,极大地平衡性能与一致性要求,满足金融及各类企业场景的分布式事务处理需求。该项技术已应用于腾讯分布式数据
腾讯云数据库 TencentDB
2022/11/18
4120
这次,听人大教授讲讲分布式数据库的多级一致性
TDSQL参加全球数据库顶级盛会 VLDB 2018回顾
作者介绍:卞昊穹(hankbian):腾讯数据库TDSQL团队成员,高级工程师。中国人民大学博士,曾在SIGMOD、ICDE、CIKM等数据库相关领域顶级会议发表论文多篇。目前参与和主导多项TDSQL查询和存储优化的研发工作。
腾讯云数据库 TencentDB
2018/10/15
2K0
犀牛鸟硬核 | 腾讯云数据库TDSQL两篇论文入选顶会SIGMOD,产学研结合助力国产数据库生态建设
6月20日-25日,2021 ACM SIGMOD 在西安举行,腾讯云数据库TDSQL两篇论文入选,领域涉及分布式数据库事务处理、存储等关键技术领域,致力于从基础理论层面推动数据库技术创新突破。 数据库作为三大基础软件技术之一,安全可控的发展不仅要依靠前沿基础技术创新,同时包括在人才、应用等生态领域的融合发展。腾讯云数据库TDSQL一直致力于进一步推动AI、新硬件、云计算等技术和数据库技术的深度融合创新,并加大对数据库基础研究创新、数据库产学研合作生态的建设投入,助力国产数据库学术人才培养和技术创新
腾讯高校合作
2021/06/25
7090
今天,我们和人民大学一起干了件大事!
今天,我们和人民大学一起干了件大事! 我们知道,数据库作为IT系统三大基础软件之一,以及卡脖子关键技术之一,它的安全可控和技术创新关乎国计民生,重要性不言而喻,在国家大力发展新基建以及倡导走“更高水平的自力更生之路”背景下,加快实现新兴国产数据库的安全可控以及升级替换已经刻不容缓。 11月25日,腾讯公司与中国人民大学共同建立的中国人民大学-腾讯协同创新实验室正式揭牌。中国人民大学副校长王轶教授、中国人民大学校长助理兼理工学科建设处处长杜小勇教授、腾讯公司副总裁王巨宏、腾讯云副总裁李纲等共同出席了揭牌
腾讯云数据库 TencentDB
2020/11/27
4770
前沿技术趋势大盘点,数据库专家邀你畅谈SIGMOD!
回顾数据库领域数十年的发展历程,每一次技术革新浪潮的开端,都源自于从业人员在行业技术前沿一次又一次的探索。 在当前,随着新一轮技术浪潮的兴起,以计算机、通信、互联网等为技术支撑的信息时代,正逐步过渡到以人工智能、云计算、大数据、物联网为关键技术引领的智能新时代。智能化、湖仓一体化、超融合化等发展趋势,被越来越多地落地实践。 比如,为应对海量复杂场景数据服务在性能、成本、服务等方面的需求,数据库正呈现出底层多模多引擎的融合、开发者接口的融合、软硬一体交付以及全链路生态的融合的趋势。腾讯云将原有的TDSQL
腾讯云数据库 TencentDB
2021/06/23
8980
腾讯云数据库2篇论文入选行业顶会SIGMOD,技术创新获权威认可
SIGMOD(Special Interest Group on Management Of Data)作为数据库领域的“风向标”,拥有40余年发展历史,每年为数据库领域提供大量高质量的研究论文和研究成果,具有重要的学术价值和行业引导意义,与VLDB、ICDE并称数据库三大优质会议。
腾讯云数据库 TencentDB
2024/06/16
2850
腾讯云数据库2篇论文入选行业顶会SIGMOD,技术创新获权威认可
美团内部讲座|周烜:华东师范大学的数据库系统研究
【Top Talk/大咖说】由美团技术学院和科研合作部主办,面向全体技术同学,定期邀请美团资深技术专家、业界大咖、高校学者及畅销书作者,为大家分享最佳实践、互联网热门话题、学术界前沿技术进展等内容,帮助美团同学开拓视野、提升认知。
美团技术团队
2020/11/11
5250
美团内部讲座|周烜:华东师范大学的数据库系统研究
2019DTCC大会分享:分布式数据库全局读一致性
作者简介:李海翔,网名“那海蓝蓝”,腾讯金融云数据库技术专家。中国人民大学信息学院工程硕士企业导师。著有《数据库事务处理的艺术:事务管理和并发访问控制》、《数据库查询优化器的艺术:原理解析与SQL性能优化》、《大数据管理》,广受好评。
腾讯技术工程官方号
2019/05/16
1.8K0
2019DTCC大会分享:分布式数据库全局读一致性
深化产学交流合作,腾讯云数据库与学界专家共话技术发展应用
本文转载自“中国日报”官网 数据库技术发端于上世纪五十年代,近几十年,数据库市场几乎被Oracle、DB2等国外厂商所垄断。随着云计算、互联网的发展,国产数据库竞相发展并在云与分布式时代实现新一代数据库技术升级迭代,并逐渐走向产业化应用,为我国基础技术安全可控与产业技术数字化升级发挥巨大的推动作用。 作为国内领先的数据库厂商,腾讯云数据库一直致力于推动数据库基础研究创新、数据库产学研合作生态建设,助力国产数据库学术人才培养和技术创新生态建设发展。 为促进数据库领域的产学交流与合作,让更多数据库从业者了解最新
腾讯高校合作
2022/08/26
3900
推荐阅读
入选国际数据库顶级会议ICDE,腾讯云数据库技术创新获权威认可
1580
腾讯云数据库TDSQL两篇论文入选数据库顶会SIGMOD,产学研结合助力国产数据库生态建设
6700
【犀牛鸟·视野】这些论文为何脱颖而出?腾讯TDSQL带你走进VLDB 2019
9660
NDBC | 腾讯TDSQL提出三个“数据库之问”,数据库技术未来重点在哪?
1.3K0
现场直击 | 腾讯TDSQL带你走进VLDB 2019
2K0
腾讯与中国人民大学开源最新研究成果:3TS腾讯事务处理技术验证系统
7720
腾讯云数据库亮相VLDB,产学协同推动数据库技术创新
2070
TDSQL带你走进数据库顶会VLDB 2018 | 论文纵览
11.7K4
即将亮相 SIGMOD ,腾讯云TDSQL凭什么这么秀?
9070
VLDB 2019 | 揭秘腾讯TDSQL全时态数据库系统
10.2K0
【犀牛鸟·硬核】 VLDB 2019 | 揭秘腾讯与中国人民大学最新联合研究成果TDSQL全时态数据库系统
7750
这次,听人大教授讲讲分布式数据库的多级一致性
4120
TDSQL参加全球数据库顶级盛会 VLDB 2018回顾
2K0
犀牛鸟硬核 | 腾讯云数据库TDSQL两篇论文入选顶会SIGMOD,产学研结合助力国产数据库生态建设
7090
今天,我们和人民大学一起干了件大事!
4770
前沿技术趋势大盘点,数据库专家邀你畅谈SIGMOD!
8980
腾讯云数据库2篇论文入选行业顶会SIGMOD,技术创新获权威认可
2850
美团内部讲座|周烜:华东师范大学的数据库系统研究
5250
2019DTCC大会分享:分布式数据库全局读一致性
1.8K0
深化产学交流合作,腾讯云数据库与学界专家共话技术发展应用
3900
相关推荐
入选国际数据库顶级会议ICDE,腾讯云数据库技术创新获权威认可
更多 >
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档