首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

腾讯数据库CDB技术演进之路

作者简介:程彬,腾讯基础架构部数据库研发负责人。2008年毕业加入腾讯,一直从事数据存储相关研发工作;在计算浪潮涌来之时参与到腾讯存储产品的打造。...目前在腾讯TEG基础架构部,负责数据库(CDB)和硬盘(CBS)研发相关工作。 大家好,我是程序员程彬,08年毕业后加入腾讯,一直在腾讯技术工程事业群从事存储系统研发和运营相关工作。...今天我和大家分享的主题是腾讯云云数据库CDB技术演进。 ?   这次我会从存储、复制和数据库引擎三个维度来介绍数据库CDB技术演进。...很多人都好奇鹅厂的数据库。谈起腾讯,都知道微信、QQ、游戏。其实腾讯不仅仅是一家社交娱乐互联网公司,也是一家计算技术公司。...2013年CDB的用户又有了新变化。首先第一个是腾讯上开发商的变化,早期很多开发商把一些非核心应用放到上,所以整个计算和IO要求不是特别高。

1.9K70
您找到你想要的搜索结果了吗?
是的
没有找到

腾讯CDB基础版新建用户及数据库的方法

入手了一台腾讯CDB基础版,看到+校园的活动是3元/月,刚开始没有看到什么提示说是会有限制,利欲熏心啊!...基础版基本用来测试和学习的,当业务CDB来使用基本没戏。...QQ截图20180703070937.jpg 这不得不吐槽一下了,如果没有深入研究过腾讯私有网络的用户,那么极容易跳坑了,买了个CDB不能内网互通,只能看着了,当然,36元一年,放着也不错了吧……[doge...以下才是正文 到此,我没有继续等待,CDB是可以开启外网访问的,那我是不是可以用外网连接呢!...既然远程登陆了mysql,那用命令来创建也是一样的 create database 数据库名; 下面我们来为我们创建的数据库授权,让前面创建的用户拥有刚创建的这个数据库的所有权限 grant all privileges

2K130

腾讯CDB】MySQL审计功能大揭秘

数据库来说也类似,数据库也有出入口,对所有连接出入口监控,记录下所有动作,一旦有问题了,查询历史动作,找到关键信息。...审计定义:能够实时记录网络上的数据库活动,对数据库遭受到的风险行为进行告警,对攻击行为进行阻断 常见的审计方式 应用层审计         在应用系统中直接审计,语句还没往数据库后台发就先做了审计,不影响数据库性能...,对底层用的是什么数据库也不关心,但对应用系统压力比较大,并且应用系统需要解析语句,有一定复杂度。...插件审计         对于开源数据库,通常都有提供插件方式增加功能。...oracle审计简介         谈到数据库审计,不能不提oracle,oracle 数据库的审计功能有10多年甚至更长的历史了,对数据库sql审计功能影响深远,几乎任何数据库审计都会参考,下面我们简单了解下

4.9K00

腾讯 CDB 内核特性与优化实践

简怀兵,腾讯数据库高级工程师,负责腾讯 CDB 内核及基础设施建设,从事 MySQL 内核开发工作 8年,具有丰富的优化经验;在分布式存储等领域有丰富经验。...TxSQL,是腾讯 CDB(Cloud Database 数据库)的内核,由开源的数据库 MySQL 分支发展而来。...本文会从四个方面来对 TxSQL(腾讯CDB内核)进行解读,分别是: TxSQL 的发展历程 TxSQL 的特性功能 TxSQL 的深度优化 TxSQL 的演进计划 一、TxSQL 的发展历程 TxSQL...最早是用于腾讯的内部业务,像腾讯游戏当中使用的数据库。...支付业务对数据库提出了更高的要求,尤其是在性能和稳定性方面。 再后来,运营推动其发展,针对外部需求加上更多功能。大家比较熟悉的可能就是 RDS(腾讯)。

2.8K00

腾讯CDB的AI技术实践:CDBTune

作者:邢家树,高级工程师,目前就职于腾讯TEG基础架构部数据库团队。...腾讯数据库技术团队维护MySQL内核分支TXSQL,100%兼容原生MySQL版本,对内支持微信红包,彩票等集团内部业务,对外为腾讯CDB for MySQL提供内核版本。...导语:CDBTune是腾讯自主研发的数据库智能性能调优工具。相比于现有业界通用方法,CDBTune无需细分负载类型和积累大量样本,通过智能学习参与参数调优,获得较好的参数调优效果。...腾讯的智能性能调优工具如何在不断实践中破解这些问题呢?...更多前沿数据库技术和案例分享,请关注我们的微信号:腾讯数据库CDB 腾讯数据库公众号文章版.jpg

12.9K73

腾讯企业级MySQL(CDB)-Returning语法使用

本文以视频+文字放送,为你带来腾讯企业级MySQL-Returning语法使用 【需求背景】 在一些数据库场景中,用户会在使用insert语句之后希望返回刚才所插入的数据行。...腾讯企业级MySQL(CDB)支持一种更简单的实现方式,就是使用returning语法,在insert语句后面,增加returning关键字,从而直接返回刚才所插入的数据行。...腾讯数据库技术团队对内支持QQ空间、微信红包、腾讯广告、腾讯音乐、腾讯新闻等公司自研业务,对外在腾讯上依托于CBS+CFS的底座,支持TencentDB相关产品,如CynosDB、CDB、CTSDB、...腾讯数据库技术团队专注于持续优化数据库内核和架构能力,提升数据库性能和稳定性,为腾讯自研业务和腾讯客户提供“省心、放心”的数据库服务。...此公众号旨在和广大数据库技术爱好者一起推广和分享数据库领域专业知识,希望对大家有所帮助。 ↓ ↓ 点击【阅读原文】可查看腾讯企业级MySQL产品详情页

1.1K10

腾讯企业级MySQL(CDB)-列压缩特性

腾讯企业级MySQL(CDB)运用列压缩功能来压缩访问不频繁的大字段,同时能够减少整行字段的存储空间,进而提高整体读写访问的效率。...(统计执行速度快,内容一致) 列压缩功能实际上是来源于IEG团队的贡献,腾讯数据库技术团队把这个特性放到腾讯数据库5.7版本里面,为广大腾讯用户提供服务,欢迎大家尝试使用这个功能,谢谢大家! ?...腾讯数据库技术团队对内支持QQ空间、微信红包、腾讯广告、腾讯音乐、腾讯新闻等公司自研业务,对外在腾讯上依托于CBS+CFS的底座,支持TencentDB相关产品,如CynosDB、CDB、CTSDB、...腾讯数据库技术团队专注于持续优化数据库内核和架构能力,提升数据库性能和稳定性,为腾讯自研业务和腾讯客户提供“省心、放心”的数据库服务。...此公众号旨在和广大数据库技术爱好者一起推广和分享数据库领域专业知识,希望对大家有所帮助。 ↓ ↓ 点击【阅读原文】可查看腾讯企业级MySQL产品详情页

79920

腾讯CDB】如何快速删除InnoDB中的大表

搜索关注“腾讯数据库”官方微信立得10元腾讯无门槛代金券,体验移动端一键管理数据库,学习更多数据库技术实战教程。...搜索关注“腾讯数据库”官方微信立得10元腾讯无门槛代金券,体验移动端一键管理数据库,学习更多数据库技术实战教程。...dict_sys->mutex是性能瓶颈的问题,但是,这个方案是不安全的,因为提前释放dict_sys->mutex意味着需要提前提交innodb事务,于是上述的DROP TABLE过程变为:搜索关注“腾讯数据库...”官方微信立得10元腾讯无门槛代金券,体验移动端一键管理数据库,学习更多数据库技术实战教程。...搜索关注“腾讯数据库”官方微信立得10元腾讯无门槛代金券,体验移动端一键管理数据库,学习更多数据库技术实战教程。

3.7K20

使用DataPump迁移非CDBCDB数据库

那就是将之前的N多非CDB数据库整合到CDB,原来的数据库将作为CDB数据库下一个PDB容器,各个PDB之间也可以通过快速dblink实现交互。...一、几种常用的迁移方法 image.png 如上图所示,通常有3种方式来实现将非CDB迁移到CDB数据库 注:文中所描述的迁移到CDB,指的是非CDB迁移之后将作为目标CDB的一个PDB数据库...1、Datapump/TTS   使用Datapump迁移的场景:     源非CDB数据库使用了与目标数据库不同的字节码(简单说就是跨OS平台)     源非CDB数据库使用了与目标数据库不同的字符集...  使用TTS方式迁移     TTS方式与传统的导出导入方式以及可传输数据库多适用于用户定义的对象位于当个表空间情行 2、使用DBMS_PDB包实现   该方式将非CDB数据库构建一个XML.../pdbseed', 4 '/app/oracle/ora12c/oradata/cdb1/reportdb'); --将数据库置为open SQL> alter pluggable database

66820

腾讯CDB】教你玩转MyRocksRocksDB—STATISTICS与后台线程篇

然而在生产系统中使用新的存储引擎自然有它的潜在风险,除了通过外部的各种benchmark工具测试得到各种性能数据,全方位的内部指标可以帮助我们真正了解数据库内部正在发生的事情,对于性能调优和开发都具有指导意义...搜索关注“腾讯数据库”官方微信立得10元腾讯无门槛代金券,体验移动端一键管理数据库,学习更多数据库技术实战教程。...DBSTATS: 数据库操作的统计。 CF_COMPACTION: 各个Column family进行compaction的相关指标统计。 MEMORY_STATS: 内存使用情况。...搜索关注“腾讯数据库”官方微信立得10元腾讯无门槛代金券,体验移动端一键管理数据库,学习更多数据库技术实战教程。...搜索关注“腾讯数据库”官方微信立得10元腾讯无门槛代金券,体验移动端一键管理数据库,学习更多数据库技术实战教程。

3.9K70

Percona server与腾讯cdb热点更新性能压测

特别声明 本文针对腾讯数据库cdb做热点单行更新性能压测,不涉及其他可用性,功能性介绍。本文的压测结果也不作为任何潜在客户的购买建议(我可木有收广告费)。...因此我对比有赞自建数据库腾讯 cdb在热点秒杀单行更新场景下的性能差异。...数据库有很多优势,备份,ha,监控,升级降级等各种常规运维都自动化,简化DBA很多事情。劣势是习惯自建运维的人而言数据库也有很多限制比如宿主机黑盒,底层cpu 个数,iops,各种安全规则等等。...给实际操作带来很多不便利比如遇到非业务导致的性能问题,大概率只能联系dba支持排查了,而且他们的响应时间也是个问题。 后续写写 如果从自建数据库迁移到数据库要做哪些事情。...大家也可以聊聊上之后,作为DBA 你感觉到有什么改变?

1.6K30

腾讯CDB】源码分析·MySQL5.7中MDL实现分析

搜索关注“腾讯数据库”官方微信立得10元腾讯无门槛代金券,体验移动端一键管理数据库,学习更多数据库技术实战教程。 2....搜索关注“腾讯数据库”官方微信立得10元腾讯无门槛代金券,体验移动端一键管理数据库,学习更多数据库技术实战教程。...搜索关注“腾讯数据库”官方微信立得10元腾讯无门槛代金券,体验移动端一键管理数据库,学习更多数据库技术实战教程。...搜索关注“腾讯数据库”官方微信立得10元腾讯无门槛代金券,体验移动端一键管理数据库,学习更多数据库技术实战教程。...搜索关注“腾讯数据库”官方微信立得10元腾讯无门槛代金券,体验移动端一键管理数据库,学习更多数据库技术实战教程。

3.1K30

视频|腾讯企业级MySQL(CDB)-动态线程池功能

本文以视频+文字放送,为你带来腾讯企业级MySQL-动态线程池功能 【背景】 MySQL两种常用工作模式 MySQL比较常用的工作模式有两种,one-thread-per-connection 和 threadpool...Threadpool 最早由 percona 支持,CDB对其进行了改进。...为了解决此问题,CDB支持了线程池动态切换功能,支持在不重启的情况下,快速完成工作模式的切换。...腾讯数据库技术团队对内支持QQ空间、微信红包、腾讯广告、腾讯音乐、腾讯新闻等公司自研业务,对外在腾讯上依托于CBS+CFS的底座,支持TencentDB相关产品,如CynosDB、CDB、CTSDB、...腾讯数据库技术团队专注于持续优化数据库内核和架构能力,提升数据库性能和稳定性,为腾讯自研业务和腾讯客户提供“省心、放心”的数据库服务。

60140

腾讯CDB复制选型及容量评估

压测目的: CDB复制模型选型 CDB容量规划参考 CDB现在支持类型复制类型比较多,我这里选择以下几种复制类型压测对比: MySQL 5.6[异步|半同步|增强半同步]复制,5.7异步复制(当时...CDB类型: 高可用版 4000MB内存, 200G存储空间 ? 2....从这里看觉的CDB的MySQL 5.6增强半同步复制比MySQL5.7的异步复制性能还好。也可以说CDB的MySQL5.6优化的相当不错。(压测过程备节点延迟比较大) 4....咨询CDB的技术人员,原来他们CDB没有限制网卡流,单个CDB是万兆网卡(使用CDB的就笑吧),另外说明一个惊天秘密:CDB压测那会还没限制IO,这是大福利(这个资料有半年多时间了,现在是不是这样,不保证了...觉的有时想想腾讯做游戏基因在这里也是性能为王的一惯作风。 6. 思考: 为什么CDB中MySQL 5.6复制看着比MySQL5.7还利害呢?

65320

数据库-腾讯数据库

数据库-腾讯数据库主要分为:数据库MySQL,数据库Redis,数据库MongoDB以及SQL Server 腾讯数据库地址 http://cloud.tencent.com/act/pro...数据库MySQL三年只需1400多元,平均一年不到500元,非常的优惠。还有其它各种类型的数据库都非常便宜 1、数据库MySQL高可用版: 双节点架构,自动容灾。...提供备份回档、监控、快速扩容、数据传输、安全审计、只读实例等运维全套 2、数据库Redis 采用主从节点架构,提供数据持久化和备份,亚毫秒级延迟,最高内存可支持4T,提供恢复,监控,按需升级等运维全套解决方案...3、数据库SQL Server 具有微软正版授权、即开即用、稳定可靠、安全运行、弹性扩缩容等特点,同时也具备高可用架构、数据安全保障和故障秒级恢复功能,对基于 Windows 架构的应用程序具有完美的支持...4、数据库MongoDB 适用于海量数据存储场景,支持三副本、集群,兼容DynamoDB 协议,提供备份,恢复,监控,权限管理等运维全套解决方案 1.jpg

21.5K20

Python实现腾讯CDB备份文件自动上传到COS

一、背景 需求:目前遇到的客户需求为将腾讯CDB备份文件自动上传到腾讯COS内,再次抛砖引玉,还有很多类似的需求均可以采用此类方法解决,线下IDC数据文件备份至云端COS内,或根据文件下载地址url.../cos5/bucket # 腾讯公共信息配置段 [common] # 腾讯 secretid secret_id = AKIDMdjegcmoGxxxxxxxxxxxxxxxxxxxx # 腾讯...secretkey secret_key = d5MRL4VoxyvlQvxxxxxxxxxxxxxx # 腾讯cos信息配置段 [cosinfo] # cos所在地域 cos_region =...# 腾讯cdb信息配置段 [cdbinfo] # cdb实例id cdb_instanceid = cdb-rqaxxxxx # cdb所在地域 cdb_region = ap-shanghai...终端:终端也不仅局限于腾讯COS,此思路方法也可用于其他平台如阿里OSS,亚马逊Amazon S3,百度BOS 等。

2.4K170

腾讯数据库

1.领取或购买到腾讯关系型数据库,根据你需要的数据库类型进行新建就会进入购买页 2.刚购买的数据库都要进行初始化操作,就是点按钮选择你要的类型 3.对数据库进行管理,点击管理 4.忘记密码的可以在账号管理进行数据库密码重置...,然后就是将我们需要的数据库文件导入,在数据库管理中新增数据库,将SQL文件导入,根据文件大小和网络上传速度等待时间有长短 5.完成后可以通过登录按钮使用phpmyadmin查看数据内容 在 腾讯控制台...中,依次单击【产品】>【关系型数据库】>【MySQL】>【实例列表】,选择状态为运行中的目标实例,点击【登录】。...点击【返回PMA】访问数据库。...当然你可以直接在phpmyadmin操作数据导入导出等操作 5.同账号下同区的服务器里面的项目需要访问数据,只需要将访问数据库的配置文件修改成内网地址,以及账号密码写对就可以了

10.7K20
领券