ACMUG年会,腾讯云揭秘TXSQL内核建设之路

2017年12月9日至10日,腾讯云受邀参加国内MySQL技术领域影响力最大的技术盛筵—ACMUG年会。

腾讯云数据库专家张青林在会上分享了腾讯自研 MySQL 分支 - TXSQL 的经验。张青林一直专注于MySQL内核开发和相关架构工作,服务于腾讯公司自研产品业务和腾讯云业务。本次分享主要从性能优化、企业级特性和线上稳定性等多个维度进行详细的介绍,并且对 TXSQL 在未来的发力点进行了阐述。

作为腾讯规模最大的 MySQL 数据库服务,CDB 在腾讯云上也是最受欢迎的关系型数据库产品。CDB 不仅具备备份回档、监控、快速扩容等数据库运维的全套解决方案,而且拥有深度定制的内核版本 Tencent MySQL,简称TXSQL。

TXSQL内核版本拥有更高的性能、更强的稳定性,同时提供 Oracle MySQL 企业级版本才拥有的特性,对内支持集团内部业务的发展,对外提供强有力的竟争力,助力腾讯云的快速奔跑。

TXSQL 在腾讯云 CDB 中所处的模块和作用以及 TXSQL的 发展,既是为了解决腾讯云日益增长的规模以及各行各业对数据库不断增长的高要求,也是为了解决用户在日常运维中遇到的问题,提升用户产品体验。

虽然TXSQL最近才对外露面,其实早在腾讯云尚未开始对外服务的时候,TXSQL就已经作为腾讯内部的MySQL分支再开发维护,一路从5.1,5.5,5.6,5.7至今,并且正在整合研究8.0的新特性。刚开仅仅针对TXSQL做一些bug fix,并提交到社区,以及做一些和内部OSS系统整合的能力。随着集群规模的逐渐扩大,一些优化逐渐被整合,同时,也吸收了MariaDB以及Percona的版本特性。

随后,云业务迅速发展,对TXSQL提出了更高的要求,在账号体系,秒级监控,系统调优,以及锁优化,结合大内存、PCIE卡的优化等大量出现。

TXSQL 在性能、企业级特性、稳定性方面做了大量的研究,特别是在 Innodb Redo、Replicaion 性能优化、强一致等方面。

例如,众所周知,Redo log是MySQL几个重要的日志之一,所有对引擎的提交,都会涉及到该文件的操作。腾讯云TXSQL团队优化了这里的并发读写能力,并以双缓冲buffer来加速,同时配以并行复制优化,让引擎能力得以最大限度发挥。在云条件下,数据库大都有主从配置,半同步网络访问优化,以及大锁拆分也提高了整体系统的性能。

另外,不同于大多商业数据库,MySQL的引擎层是单独出来的,虽然层次更加清晰但同时这里层次之间的交互却容易影响性能。因此,腾讯云做了计算下推的工作,把一些查询需要计算的地方,放到引擎层做,减少了引擎和SQL层的交互,降低RT的同时提升性能。

TXSQL 在复制方面的优化同样达到了很好的优化效果,其中io重构,table map log event 的缓存等特性得到了官方的肯定和认可。

本次分享中,腾讯云还分享了TXSQL 最新的一些技术点和以后的发展及发力点,如批量计算、执行计划缓存、AI+Query、RocksDB 支持等。作为MariaDB Foundation的白金会员,腾讯云将会把一些原创的内核特性集成到社区版的MariaDB上去,相信很快就会与大家见面。

同时在本次年会上,腾讯云还透露了后续TXSQL内核的部分规划,比如基于数据库内核的审计、数据加密等往常企业级数据库才有的功能,即将上线和大家见面。

想了解更多详细内容,欢迎访问腾讯云数据库内核专栏

https://cloud.tencent.com/developer/column/1551

原创声明,本文系作者授权云+社区发表,未经许可,不得转载。

如有侵权,请联系 yunjia_community@tencent.com 删除。

编辑于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏安恒信息

策略升级 | 快速发现OWASP TOP 10 2017漏洞

OWASP(开源Web应用安全项目)于2017年11月22正式发布OWASP Top 10 2017最终版本,作为全球网络安全500强, 云安全、...

2698
来自专栏大数据钻研

你不要升级到 Windows 10 的 10 大理由

本文通过对微软合作伙伴的询问,了解到他们不想升级到Windows 10的原因。下面,我们将详细讲解用户不该升级到Windows 10的十大理由。 在佛罗里达州多...

2675
来自专栏java一日一条

从“小白”到“白帽子黑客”的实用指南

早先,我也是半个黑客,经常在学校的教务系统看妹子。通过 URL 注入的方式,可以轻松进入别人的个人信息页。后来,又通过某种方式发现了管理员的账号,管理员又没有修...

882
来自专栏喔家ArchiSelf

来吧,一个IoT应用设计

大量的研究表明,智能家居和可穿戴设备是目前最流行的物联网应用。嵌入式的MCU是这些物联网应用程序的核心。 然而,为了在这个快速而有竞争力的市场上成为一个有效的基...

1142
来自专栏非著名程序员

是的,这是我的记录之道

前几天分享了两篇关于我的学习之道,面试之道的文章。颇受大家的好评,很多人都感觉受益良多,给了他们借鉴学习的经验。对此,其实我心里还是非常欣慰的,今天继续分享关于...

1155
来自专栏java一日一条

你不要升级到 Windows 10 的 10 大理由

本文通过对微软合作伙伴的询问,了解到他们不想升级到Windows 10的原因。下面,我们将详细讲解用户不该升级到Windows 10的十大理由。

1103
来自专栏Java架构沉思录

知乎大V@Phodal:小白也能看懂的Web安全进阶指南

早先,我也是半个黑客,经常在学校的教务系统看妹子。通过 URL 注入的方式,可以轻松进入别人的个人信息页。后来,又通过某种方式发现了管理员的账号,管理员又没有修...

1232
来自专栏云计算D1net

如何管理好企业的数据

灾难恢复没有银弹。一旦发生停机,企业高管们会条件反射地以最快地速度采取各种灾难恢复手段。 虽然大多数IT主管和数据管理专家承认没有万全的安全解决方案来保...

3214
来自专栏云计算D1net

Amazon Workspace正式上市 云计算领域现巨头之争

作为电子零售兼云服务巨头打造的虚拟桌面基础设施服务,号称以“Windows 7桌面使用体验”为基础的Amazon Workspace已经正式迎来上市消息。 ...

2815
来自专栏云计算D1net

免费云存储越存越大,服务商越赔越多?

我国的互联网行业有一个特色,免费即正义。而且这一趋势愈演愈烈,哪家公司能免费的更多,体验更好,用户便蜂拥而来。云存储就是一个这样的状况,而且几家巨头互相竞争之下...

4588

扫码关注云+社区