首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

腾讯分布式数据库 DCDB 架构解密

腾讯分布式数据库是一个适用于OLTP场景且与MySQL 5.5 、5.6兼容的分布式关系型数据库。...腾讯分布式数据库解决方案: 简介: CDB for TDSQL的诞生经历了十余年: 2002年,基于运营商SP业务,腾讯数据库团队开始对 MySQL进行改造 2004年,腾讯互联网增值业务开始爆发...2015年,TDSQL正式进驻腾讯,并更名为腾讯金融级数据库CDB for TDSQL,开始面向腾讯之外的企业提供金融级数据库服务。...2017年,腾讯CDB for TDSQL更名为CDB for MariaDB,同时正式推出分布式数据库DCDB 架构: 系统由三个模块组成:Scheduler、Agent、网关,三个模块的信息交换都是通过...分布式数据库的未来规划 DCDB支持小表广播、分布式事务等 DCDB支持复杂查询

3.4K10
您找到你想要的搜索结果了吗?
是的
没有找到

深度解析:腾讯分布式数据库 DCDB

腾讯分布式数据库DCDB 腾讯分布式数据库(DCDB)是部署在腾讯上的一种,面向OLTP业务支持自动水平拆分(分表)的share nothing架构的分布式数据库。...DCDB也是随着腾讯业务规模不断扩大而发展起来的,从2004年开始,腾讯部分业务就已经开始遇到单机数据库架构已经无法支撑,进而开始研究分布式架构,业务发展最终推动了数据库架构技术的不断革新,面对日益复杂的需求...截止到2017年,包括微信支付,腾讯充值,阅文集团等腾讯公司交易、转账等核心系统90%以上都使用了腾讯分布式数据库(DCDB)。...DCDB的前身是腾讯自研TDSQL,我们的设计理念是淡化复杂的拆分、扩展等逻辑,让开发者使用DCDB就像使用集中式单机数据库一样顺利。...拆分键的限制 为了提高语法解析效率,避免因为shardkey设置导致路由错误,DCDB规定了拆分键设定的技术限制(请参考腾讯官方文档): 如存在主键或者唯一索引,则shardkey字段必须是主键以及所有唯一索引的一部分

6.7K11

电商月将至,腾讯DCDB助力电商企业应对支付洪峰

本次会议,腾讯带着其分布式数据库DCDB(内部代号TDSQL)亮相大会,向全国600余名数据库技术的研究者、教师、同学和开发者展示了腾讯的数据库技术。...浙江是中国电子商务大省,腾讯分布式数据库DCDB(内部代号TDSQL)恰好是解决类似于电商、O2O的订单交易、购买支付场景的利器。 为什么说DCDB适用于电商、02O等业务呢?...当然,DCDB也是腾讯首个将完整的信息安全要求和风控体系做到整个数据库系统中的产品之一。...而采用基于开源协议的分布式数据架构DCDB腾讯服务,按需使用且无高昂的license费用,将极大的节省业务使用数据库成本。...目前,作为支撑了腾讯内外超过100亿以账户,200亿以上的交易流水和海量的虚拟交易的数据库,腾讯分布式数据库DCDB已经广泛应用在银行、保险、理财、电商、O2O等核心系统中。

3K12

一文教你迅速解决分布式事务 XA 一致性问题

腾讯分布式数据库DCDB,却已在内部业务中应用多年。...腾讯首发分布式数据库XA 支持MySQL 5.7 腾讯分布式数据库DCDB,是基于腾讯金融级数据库(公司内部代号TDSQL)化改造而来的兼容MySQL协议的分布式数据库。...现如今,腾讯DCDB已经正式在MySQL 5.7(percona分支)协议上支持分布式事务XA,并已在腾讯公有、金融发布供开发者使用。...腾讯DCDB XA关键实现方案 1、DCDB架构介绍 腾讯DCDB整个集群架构简图如下图,MySQL采用主从节点配置(也叫作主备)一套主从节点叫做SET,在每一个SET外配置网关(TProxy),形成一个物理分片...腾讯DCDB的强同步为腾讯金融级数据库自研的一项能力,性能比官方半同步大幅提高,几乎等于异步复制性能,腾讯DCDB腾讯内部应用多年,未发生过一起因为主从切换、故障带来的数据误差。

4K20

DCDB让秒杀更从容、购物更狂欢

分布式数据库DCDB腾讯内部代号”TDSQL”,是解决类似于电商、O2O的订单交易、购买支付场景的利器。 为什么说DCDB最适用于电商、02O等业务呢?...类似问题也是电商等业务常见场景,而米大师的经验是,除了通过架构将支付系统按场景、业务、流量进行解耦,利用的弹性(和的冗余资源池),在活动时快速自动的部署业务服务器。...当然,DCDB也是腾讯首个将完整的信息安全要求和风控体系做到整个数据库系统中的产品之一。...而采用基于开源协议的分布式数据架构DCDB腾讯服务,按需使用且无高昂的license费用,将极大的节省业务使用数据库成本。...目前,作为支撑了腾讯内外超过100亿以账户,200亿以上的交易流水和海量的虚拟交易的数据库,腾讯分布式数据库DCDB已经广泛应用在银行、保险、理财、电商、O2O等核心系统中。

2.3K11

用分布式技术轻松化解数据库容量和性能瓶颈

上一章节我们介绍了腾讯分布式数据库的发展历史,基本原理和使用方法;本章节我们继续分析下分布式数据库 DCDB 的优势和应用场景。...的 2 倍以上,且腾讯数据库团体还在持续优化。...而腾讯 DCDB 通过多种优化,提供了高于开源 XA(分布式事务简称)的性能。...目前 DCDB 可以保证该字段全局唯一和有序递增,但不保证连续性。 8. 基于多租户闲时超用技术 公有虚拟化让多个租户的业务共享物理设备性能,而传统隔离方案严格限制了每个租户实例的性能大小。...;DCDB 在线扩容仅需管理员到腾讯WEB控制台点击付费即可,扩容过程对业务完全透明,无需业务停机。

4K00

腾讯偷袭腾讯

02李鑫眼神.jpg 时间回到九月份的一个下午,坐在工位上的的E.m突然接到一个秘密任务: 干掉腾讯! 行动代号:干掉腾讯  下达这道命令的是Fooying。...Fooying是腾讯安全鼎实验室的成员,负责守卫腾讯的安全。从加入腾讯的那一天起,他和他的团队就枕戈待旦,时时刻刻提防着黑客对腾讯的攻击。...随着腾讯的快速发展,越来越多的企业入驻腾讯,不少黑客也将攻击的目标转移到了上。国内外因为被黑客攻击导致的删库、数据泄露、病毒勒索的公司比比皆是。腾讯云安全的重要性可想而知。...刘钢工位前.JPG Rud是本次红蓝对抗的红军负责人,将迎战蓝军猛烈的攻击,守卫腾讯。 在腾讯,每天都有众多安全人员在巡视、建设腾讯的安全防线。尽管如此,攻防两端终究是一场不均衡的较量。...腾讯的红蓝对抗已经逐步常态化,既是保护自己的方式,也是守护上合作伙伴的重要途径。 腾讯,正在用一场场自我的战斗,磨练出更安全的

113.4K30

腾讯“开发者实验室”与“DCDB”产品揽获工信部信通院两大年度奖项

在本届大会上,腾讯“开发者实验室”与“DCDB”产品分别荣获由中国信息通信研究院颁发的2017年度“最具创新DevOps产品” 奖及“最具影响力数据库产品”奖。...“最具影响力数据库产品”奖——腾讯分布式数据库(简称DCDB) 采用集群架构,整个集群架构简图如下图。...运维支撑系统(OSS):基于DCDB定制开发的一套综合的业务运营和管理平台,同时也是真正融合了数据库管理特点,将网络管理、系统管理、监控服务有机整合在一起。...(请注意,TProxy并非腾讯网关TGW集群)。...TzooKeeper)拉取数据库节点(分片)状态,提供分片路由,实现透明读写; 记录并监控SQL执行信息,分析SQL执行效率,记录并监控用户接入信息,进行安全性鉴权,阻断风险操作;TProxy前端部署为腾讯网关系统

87711

腾讯:基于腾讯搭建WordPress(领取腾讯优惠券)

这篇文章交大家如何在腾讯上创建一个WordPress网站,方法及其简单,小白都能操作,个人做网站多年,这是最好的一个建站方案,如果你想搭建一个自己的博客,可以按照我的图文操作试试,我的教程是基于Linux...首先就是注册购买服务器购买域名详细参考:腾讯服务器怎么购买(领取腾讯优惠券) 腾讯新客专属福利2860元代金券 腾讯新客专属福利2860元代金券 腾讯双十一最新活动 腾讯双十一最新活动 购置一个域名...域名注册地址 1,首先需要在腾讯购买一台服务器 打开腾讯云云服务购买页面,也可以打开腾讯优惠活动页面购置一台服务器 QQ截图20201110170311.png 选择CentOS系统

96.6K80

结合 qws 和 qbt ,本地开发环境搭建

作者:陈彦贝 安装qws容器 以及 初始化化本地项目 qws 是腾讯内部封装的一个NodeJS框架,它主要解决NodeJS及公共库的版本管理、进程线程管理、公共Api抽离、日志搜集等功能,简洁来说,qws...如何初始化本地项目的依赖 以 dcdb_proj项为例,我们来讲讲如何安装它的本地依赖。...使用nginx转发,解决cookie同步问题 腾讯有统一的单点登录页面,我们访问本地项目的时候,会自动跳转到登录页面,那么如何同步cookie,保持登录状态呢?...') module.exports = [{ pattern: /(entra\.qcloud\.dcdb\....有了nproxy代理之后,我们还需要配置浏览器,将浏览器的请求打到我们的代理服务器上 图:浏览器配置 而其中的dcdb开发模式,指向的就是nproxy代理服务器。

1.7K10

【玩转腾讯】Hexo博客部署腾讯

简介 由于博客原来部署在Github上访问速度太慢,所以将原Hexo博客部署到腾讯 部署环境 腾讯服务器(CentOS 64位) 服务器配置 安装依赖包 yum install curl-devel...chmod 400 /etc/sudoers 本地使用gitbash创建密钥 ssh-keygen -t rsa //因为我在GitHub上部署博客时已经创建过密钥,这里可以直接跳过生成,用以前的密钥 在腾讯云中创建...600 .ssh/authorized_keys chmod 700 .ssh 本地测试 ssh -v git@SERVER //@后是你自己的服务器公网IP,如果不出现failed字样,说明成功 服务器中创建网站目录并设置权限...config.yml文件中的deploy后的repo改为: git@SERVER:/home/git/blog.git //@后为你的服务器公网IP 以上全部完成后,执行hexo的部署命令即可完成在腾讯服务器上的博客部署

82.1K2215

【玩转腾讯腾讯函数SCF初探

前不久的微信开发者大会上在推他们的Serverless架构,即他们的产品腾讯函数SCF。...大意就是workers提供一个免运维的轻量级的js的运行环境 现在微信小程序开发这么火,那么就拿腾讯的SCF函数作为一个入门的helloword。...相关的配置信息,可以打开腾讯的web控制台查看。 接下来就是编写函数部分了。...通常来说,很多云服务对内网流量是免费的,比如腾讯COS,而函数也有一些内网流量的免计费的说明,如果你的服务器刚好部署在成都区,那么,流量就变成走公网得收费了,当然还有时延问题。...这个也说明函数还有待完善的地方,不过相信以后还是会越来越好。

63K92

腾讯Serverless】腾讯Serverless + Typescript实践

目的 最近serverless愈来愈火,我刚好在培训,比较有时间去尝试一些新东西,所以趁这个时候去使用下serverless,尝试使用typescript和nodejs开发,部署在腾讯scf上的一个小工具...环境搭建 首先为了方便开发,建议安装腾讯scf提供的命令行工具或者vscode插件。...而在部署的时候,我才发现在使用typescript时,无法在腾讯scf目前的部署要求以及项目的文件目录管理中做到完美的配合。 后面和同事讨论后,还是有不错的方法是达到两者的平衡。...scf,是可以运行的,而且是把整个项目都打包了上去,日后腾讯scf接入了cloud studio,webIDE看到的文件架构和本地看到的文件架构是一致的。...总结 上面说了这么多,这里给一个总结就是: 虽然腾讯scf没有原生支持typescript,但是经过一些方法还是可以做到两者的完美配合。

147.1K52

余国良:微信小游戏的架构设计与开发

我们看一个案例,这个案例是我们腾讯上一个真实客户的案例。它的小游戏在上线很短的时间内从几万人飙升到200万左右。这个客户经历了什么?...这个架构简单使用应对一般的休闲性游戏也是够用的,我们看一下它在腾讯上的追加时间是什么样的。...这里用到一些腾讯的产品我们做一些介绍,首先是CLB,腾讯的CLB单集群提供超过1.2亿的最大连接数,轻松应对亿级访问量,单集群可处理峰值40GB/S的流量,每秒处理包量可达600万。...在腾讯上,一千台主机的平均耗时是63秒,接入弹性伸缩服务以及流动的基础能力,我们可以很方便的对服务进行快速动态的扩缩容,第三个就是我们的BGT高防服务,在必要的时候我们可以通过BGT高防对于游戏进行保护...为了简化大存储的设计,我们可以用一些分布式数据库产品,比如说腾讯DCDB,它的原理是通过增加中间的代理层,到多个物理感,像复杂性完全封装在代理层,。

8K208

腾讯大学【腾讯工业在线课堂】系列

腾讯大学」特推出【腾讯工业在线课堂】系列!智能制造产品方案一网打尽! 海量干货等你来!3月10日~3月27日 行业专家在线分享不间断!...欢迎预约腾讯工业在线课堂系列,准时观看直播~ 日期 课程名 讲师 3月10日 【已结束,看回放】面向仿真生态的仿真 俞瑞霞 安世亚太工业业务发展总监 3月10日 【已结束,看回放】工业互联网的进化...】【疫情办公】传统企业疫情期间如何保障工作正常开展 竺晶 腾讯企点团队售前架构师 3月16日10:00 【即将开始】打赢疫情防控阻击战——企业复工复产智慧抗疫解决方案 王立书 腾讯企业业务首席架构师...3月17日10:00 【即将开始】供应链金融及产业风控 李云龙 腾讯供应链金融产品负责人 3月17日19:30 【即将开始】区块链在工业行业中的应用 敖萌 腾讯区块链首席架构师 3月18日10:00...(14)【疫情防控】腾讯与瑞欧威尔联合疫情解决方案 为有效应对疫情,帮助政府及医疗卫生单位提高防控效率,助力制造企业尽快复工复产,瑞欧威尔联合腾讯推出“企业复工智能方案”,智慧通行,远程设备管理,远程医疗

45.1K81

腾讯迁移工具案例实践:阿里迁移到腾讯

对于阿里批量迁移到腾讯,HyperMotion可以支持批量一键式安装Agent软件,做到了操作步骤简单化、自动化,可以满足常见源端操作系统类型。...迁移到的目标腾讯,HyperMotion迁移产品也是面向于原生设计,所有目标腾讯的操作,通过底层API接口封装自动化调用腾讯接口实现资源调度,无需过多人为介入,简单易操作。...选择目标平台设置,选择腾讯平台 5.png 配置腾讯连接的AK、SK及其他配置信息 6.png 选择迁移腾讯平台,添加迁移虚拟机到HyperMotion平台 选择安装完成Agent自动加入到迁移平台的虚拟机...虚拟机数据同步完成后,就可以批量勾选启动主机 10.png 填写在目标腾讯启动迁移主机时所需要的计算网络等相关配置。 11.png 迁移到腾讯成功机器会显示腾讯主机的相关信息。...12.png 阿里迁移上腾讯是目前常见的一个场景,需要选择一款成熟的产品来解决人力、技术及安全层面的诸多问题,让企业上变的更加简单高效。HyperMotion就是你上的一把利器,你值得拥有。

52.5K30

腾讯迁移工具案例实践:华为迁移到腾讯

对于华为批量迁移到腾讯,HyperMotion可以支持批量一键式安装Agent软件,做到了操作步骤简单化、自动化,可以满足常见源端操作系统类型。...迁移到的目标腾讯,HyperMotion迁移产品也是面向于原生设计,所有目标腾讯的操作,通过底层API接口封装自动化调用腾讯接口实现资源调度,无需过多人为介入,简单易操作。...选择目标平台设置,选择腾讯平台 5.png 配置腾讯连接的AK、SK及其他配置信息 6.png 选择迁移腾讯平台,添加迁移虚拟机到HyperMotion平台 选择安装完成Agent自动加入到迁移平台的虚拟机...虚拟机数据同步完成后,就可以批量勾选启动主机 10.png 填写在目标腾讯启动迁移主机时所需要的计算网络等相关配置。 11.png 迁移到腾讯成功机器会显示腾讯主机的相关信息。...12.png 这时可以登录到腾讯进行验证迁移虚拟机创建的情况及其他配置工作。

17.5K30

腾讯 Toolkit

腾讯 Toolkit 是免费的本地 IDE 插件,帮助开发者更高效地开发、测试。...通过插件,可以将本地应用一键部署到任 CVM、Lighthouse、TKE、SCF、TCB 等;支持 API 查看及运行,云端调试。...在 Visual Studio Code 版本中,我们现提供了如下功能 API 查看、在线调用、下载示例代码、云端 Cloud Studio 开发Cloud Studio 工作空间 VSCode Remote...SSH 、打开工作空间支持 CLS 查看日志支持 CVM 查看、remote ssh、sftp 功能支持托管查看、新建、更新服务功能支持 Lighthouse 查看、remote ssh、sftp...功能支持 SCF 函数查看、部署、删除、下载、远程调用、函数日志、本地调用、远程调试、创建触发器模板、创建项目模板等功能支持 TKE 集群

28120

腾讯Elasticsearch

最近是腾讯ES三周年,为了嫖一波福利,所以今天水一篇文章~(bushi) ---- 前言 众所周知,腾讯Elasticsearch(简称ES)是一款分布式搜索引擎,可以帮助开发者构建高性能、可伸缩的搜索应用...而最近的一段日子,是腾讯ES合作三周年的时间,我也来凑波热闹吧~ ---- 初体验 先说说我对于Elasticsearch的印象吧,在我看来,腾讯Elasticsearch是一种基于开源搜索引擎Elasticsearch...换句话说,我们在腾讯的每个角落都能发现Elasticsearch的影子。 大概是两年以前吧,我初次接触腾讯Elasticsearch的相关服务,当时就给我留下了深刻的印象。...那时的腾讯就像现在一样,提供了一个很直观的面板控制台,对于初学者的我们非常的友好与便捷;其次,在使用腾讯Elasticsearch的过程中,我注意到其强大的搜索和分析功能。...下面我将从个人角度阐述我与腾讯的渊源以及浅浅分析一下腾讯Elasticsearch的优化方向,帮助开发者更好地理解和应用这个服务。

14K20
领券