文档建议反馈控制台
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
发布

聊聊分布式数据库TDSQL的技术架构

那么什么是分布式数据库，其分布式、强一致性、高可用以及无损升级等特性又是如何实现的呢。今天我们在这篇文中使用 TDSQL 技术架构来进行学习和理解。...在腾讯早在 2002 年的时候，也主要是使用 Mysql 来存储腾讯的计费等数据，但后来由于业务的快速发展，用户量越来越大，增值业务收入规模也越来越大，对可用性的要求水涨船高，就开始自研分布式数据库，大约到了...TDSQL 是一个对应用层透明的分布式数据库。应用可以像使用单机数据库一样简单地使用，不必像分库分表那样关心底层的划分策略。数据库自己内部封装事务、分片、灾备、扩展性等功能。...这是分布式数据库的首要目标，对用户屏蔽分布式，只在逻辑上提供整张的表访问，简化用户使用数据库的方式。 由于 SQL 引擎只负责计算，不负责存储，本身是无状态的。...SET 是分布式数据库实例。一个 SET 内部包含了 Master、Slave 节点。每个 SET 中存储哪些数据是由 shardkey 来进行分散的。

3.2K10

TDSQL分布式数据库的HDFS和LOCAL备份配置

image.png 产品介绍：TDSQL分布式数据库是腾讯公司结合自身支付、金融等核心业务需求，紧紧抓住了国外传统集中式数据库难以适应业务规模快速增长这一现实问题，从2009年开始研制新一代分布式数据库系统...产品特点：TDSQL作为一款具有金融级特性的分布式数据库产品，具备强一致高可用、全球部署架构、分布式水平扩展、高性能、易运维、企业级安全等特性，同时提供智能 DBA、自动化运营、监控告警、数据多源异构同步迁移等配套设施...，为客户提供完整的分布式数据库解决方案。...凭借核心事务处理技术的突破，以及完善的系统生态，解决了国产分布式数据库市场通用化难题。...TDSQL，然后简单的创建一些数据，来测试TDSQL的备份，包括物理备份和逻辑备份。

3.1K40
    • 您找到你想要的搜索结果了吗？
    是的
    没有找到

    分布式数据库创新技术奖，TDSQL他来了！

    腾讯云凭借其信息技术系统的安全可控性和前沿技术的创新性，在一众企业中脱颖而出，荣获“分布式数据库创新技术奖”。...在云原生专题论坛上，腾讯云数据库产品专家梁文灿先生就腾讯云企业级分布式数据库TDSQL生态发展战略、落地应用案例做出了详细介绍。...TDSQL-C基于全新计算存储分离的分布式数据库架构，融合传统数据库和云计算技术优势，100%兼容MySQL和PostgreSQL，极致计算能力突破千核，存储容量达PB级别，使得性能和安全性媲美商用数据库...TDSQL-C 简介 张远介绍说，TDSQL-C是腾讯云自研的新一代企业级云原生分布式数据库，经过五年的打磨，在总体架构上，TDSQL-C是基于共享存储的存储和计算分离的架构。...同时TDSQL在支持多写方面会进一步探索，未来TDSQL-C也会向HTAP方向演进，TDSQL-C会同时具备OLTP和OLAP的能力。

    1.8K40

    客户心声｜福建海峡银行TDSQL国产分布式数据库应用实践

    新核心关键业务系统采用“微服务+分布式”架构，改造历时14个月，依托腾讯云企业级分布式数据库TDSQL良好的兼容性、成熟的迁移能力和技术服务支持，海峡银行快速完成了核心系统的国产数据库替换，并基于腾讯云数据库...福建海峡银行信息科技部朱正珊为大家分享TDSQL国产分布式数据库在福建海峡银行的应用实践，用福建海峡银行的“亲身经历”教会您如何选型，如何优化，其中的关键节点、注意事项也都一一给您讲清楚。...选型原则 我们从安全性、稳定性、业务连续性、运维成本、实施案例、产品生态等多维度出发，经过多轮测试选择了腾讯云企业级分布式数据库TDSQL。...经过网络故障推演，我们发现基于TDSQL的跨IDC强同步，同IDC异步、同IDC可提升为强同步、管控主节点在主中心的要素设置下，可避免批量数据更新导致延迟的情况以及在极端情况下出现分布式数据库脑裂的场景...对分布式数据库来说，需要快速的故障隔离和恢复，这就需要多层级的高可用机制、良好的运行监控体系、自动化运维体系，带来比较好的运营管理体验。 我们在实践过程中也在不断的结合TDSQL本身的特性做优化。

    3K50

    TDSQL演进与突破：把企业级分布式数据库做到极致

    面对历史新机遇，基础技术创新要如何为产业带来新的能力驱动，在2021腾讯数字生态大会上，腾讯云数据库技术负责人潘安群，围绕“将企业级分布式数据库做到极致”的主题，分享了腾讯云数据库TDSQL的一些工作和思考...随着金融政企技术系统对国产化、数字化改造升级的需求加速，国产企业级分布式数据库单引擎极致能力主要受到金融级核心系统应用能力、快速平稳“去O”、新形互联网业务转型等需求和挑战驱动，实现技术突破。...首先，总结而言，数字化时代金融、政务、互联网、电商等企业对分布式数据库的应用需求体现在以下4个方面： 1.支持稳态业务的核心应用能力需求持续增强：表现为需要数据库系统在高可用、强一致、稳定可靠的基础上，...2.平稳快速“去O”：除了核心应用，金融政企系统中还有大量周边系统或者次核心应用，这些核心应用往往有几百上千套系统，由于历史原因需要短期之内快速“去O”，并基于国产分布式数据库快速上线，如第一个月上线10...与此同时，TDSQL 新敏态引擎具有对分布式事务完整支持的特性，支撑了上层计算引擎多主读写架构的实现，并与计算引擎结合实现了计算下推、分布式事务一阶段优化等多纬度优化，进一步实现分布式数据库系统性能极致提升

    1.9K80

    TDSQL再登巅峰：中国分布式数据库市场份额No1

    TDSQL的主要特点 腾讯云的企业级分布式数据库TDSQL具有金融级分布式、多引擎融合、快速扩容、智能运维、数据安全、兼容性强以及优质的客户服务等特点，能够满足不同行业和场景的数据处理需求，为使用者提供安全...其主要特点归纳起来如下： ➢ 金融级分布式数据库：TDSQL具有完整的金融级分布式数据库产品体系，提供业界领先的高可用、计算存储分离、企业级安全等能力，能够满足金融行业对数据安全、可靠性和稳定性的严格要求...TDSQL应用案例 TDSQL（腾讯云企业级分布式数据库）在金融、公共服务、电信等垂直行业客户得到广泛应用，并助力中国金融行业信息化发展。在市场份额方面，TDSQL已经取得了国内领先的成绩。...此后伴随腾讯云的发展，TDSQL 作为安全可控的分布式数据库拳头产品开始对外推向市场。...➢ 大型机下移：TDSQL 助力张家港行成功率先将银行传统核心系统由集中式数据库存储改造为分布式数据库存储，实现数据库技术系统全面自主可控。

    1.7K10

    告别散装教程，TDSQL分布式数据库技术原理干货合辑来了！

    为帮助开发者更好地了解和学习分布式数据库技术，2020年3月，腾讯云数据库、云加社区联合腾讯TEG数据库工作组特推出为期3个月的数据库专题线上技术沙龙，邀请数十位鹅厂资深数据库专家深入解读TDSQL、TBase...TDSQL是腾讯自研的金融级分布式数据库产品，在行业内屡次率先突破，包括助力微众银行搭建首个全行级互联网银行核心系统，以及助力张家港农商行实现传统核心系统数据库首次国产化等。...目前，TDSQL已广泛应用于金融、政务、物联网、智慧零售等行业，拥有大量分布式数据库最佳实践，至今对外服务超过600家金融政企机构。...作为行业领先的分布式数据库产品，TDSQL认为，完善的技术生态服务，是多方面解决用户痛点的基础。...不仅如此，TDSQL提供了完善的数据库多源同步迁移服务（TDSQL-MULTISRCSYNC），支持企业高效稳健地从传统集中型数据库迁移到新一代分布式数据库，大大降低了传统数据库迁移改造的门槛。

    1.8K30

    腾讯云分布式数据库TDSQL的十年自主可控之路

    其中，腾讯云也首次正式对外披露分布式数据库TDSQL的十年自主可控之路。 数据作为金融行业的生命线，承载数据的数据库产品，无疑是金融科技的核心，也是当前金融产业安全、自主可控的关键。...腾讯云分布式数据库TDSQL负责人潘安群 一方面，由于核心知识产权掌握在国外厂商手中，极有可能发生厂商断供风险，且该行业长期被传统厂商垄断，金融企业IT成本居高不下。...十年探索，TDSQL专为“金融”而生 “一款金融级的分布式数据库，必须要经过数年的积淀，以及海量业务场景的锤炼 ”， 腾讯云分布式数据库TDSQL负责人潘安群表示。 TDSQL的诞生正是如此。...此外，分布式数据库TDSQL为用户提供数据库防火墙、透明加密、自动脱敏等安全防护措施，减少用户误操作和黑客入侵带来的安全风险。...往期推荐 《带你认识真正的金融级自主可控分布式数据库》 《腾讯云分布式数据库TDSQL2018回顾》 ? 免费试用 包括云数据库MySQL在内的40+款热门云产品，实名认证的企业用户可免费试用！

    1.7K20

    腾讯分布式数据库TDSQL金融级能力的架构原理解读

    三月为TDSQL专题月，本文将带来直播回顾第一篇《腾讯自研分布式数据库TDSQL核心架构及特性拆解》。...视频内容 大家好，我今天分享的主题是基于计费海量场景自研演进的分布式数据库TDSQL的核心架构解读。...一、TDSQL是什么：腾讯如何打造一款金融级分布式数据库 我们先初步了解TDSQL产品，以及它的适用场景。...存储节点要强调的是TDSQL的两种存储形态，一种是Noshard数据库，一种是分布式数据库（也叫Shard版TDSQL）。...好，捕捉到这个请求之后，在ZK上创建一个任务节点，这个任务节点被调度模块捕获，捕获之后就处理任务。处理完任务，再把它的处理结果返回到ZK上。

    7.7K43

    培训认证｜腾讯云TDSQL、TBase初级认证发布，限时免费

    关注腾讯云大学，了解行业最新技术动态 腾讯云CloudLite-分布式数据库TDSQL认证、腾讯云CloudLite-分布式数据库TBase认证是腾讯云数据库联合腾讯云大学发起的一款初级认证类型。...腾讯云CloudLite-分布式数据库TDSQL认证简介 数据库交付运维工程师-腾讯云TDSQL认证（TCA）是针对腾讯分布式OLTP数据库交付运维人员的初级认证，通过该认证，可有效验证您是否能够独立规划组件...，部署TDSQL分布式数据库产品，验证部署结果，并能够通过TDSQL赤兔管理平台进行实例创建、分布式表创建和操作、备份恢复配置、命令方式登录TDSQL进行操作管理；适合从事TDSQL项目交付、初级TDSQL...腾讯云CloudLite-分布式数据库TBase认证简介 腾讯云PaaS平台交付运维初级工程师-腾讯云TBase认证（TCA）是针对腾讯分布式HTAP数据库交付运维人员的初级认证，通过该认证，可有效验证您是否能够独立规划组件...，部署TBase分布式数据库产品，验证部署结果，并能够通过TBase管理平台OSS进行实例创建、分布式表创建和操作、备份恢复配置、CLI方式登录TBase进行操作管理；适合从事TBase项目交付、初级TBase

    3K20

    基于MySQL的分布式数据库TDSQL十年锻造经验分享

    所以这也是我们为什么将TDSQL在腾讯云上开发出来的一个目的，就是希望TDSQL在近十年在腾讯海量数据运营下走过的弯路、以及解决的问题，在其它团队不要再走一遍。...因为之前在行业内做分布式数据库的人认为，MySQL体系做不到数据零丢失或者是主备之间数据的一致性，但其实这个东西是没什么问题的，是完全可以做到的，看看我们是怎么做这个点的。...图：TDSQL核心架构 这是TDSQL的架构，现在分布式架构一般分为三个核心模块，第一模块是数据节点（上图右下角），通常是一主两备的方式。...TDSQL一开始是定位在腾讯内部做计费、金融支付这类场景，是常见的OLTP场景。...而且TDSQL也是通过TPCC测试验证的。

    1.7K30

    破解分布式数据库的高可用难题：TDSQL高可用方案实现

    视频内容 大家好，今天我分享的主题是TDSQL多地多中心高可用方案。TDSQL是腾讯推出的金融级分布式数据库。...在正式切入正题前，我们先回顾一下上一次分享有关TDSQL的核心特性以及整体架构。 好，接下来我们先看一下TDSQL核心特性。 我们今天的重点聚焦在“金融级高可用”上。...一、TDSQL数据库一致性：强同步机制是最核心的保障 首先，我们回顾一下TDSQL的关键特性—强同步机制，它是TDSQL保证数据不会丢、不会错的关键，并且相比于MySQL的半同步复制，TDSQL强同步复制的性能更是接近于异步...首先是LVS模块，首先作为接入层它不是一个TDSQL的内部组件，TDSQL的SQL引擎兼容不同的负载均衡，比如软件负载LVS、硬件负载L5等。...往期推荐 直播回顾 | 腾讯分布式数据库TDSQL金融级能力的架构原理解读​ 特惠体验云数据库

    4.3K40

    腾讯TDSQL：带你认识真正的金融级自主可控分布式数据库

    实际上，腾讯推出的 TDSQL(TencentDistributed SQL) 金融级分布式数据库，在对内支撑微信红包业务的同时，对外也正在为中国金融行业技术自主可控分布式数据库解决方案 作为国内首家互联网银行...目前 TDSQL 已正式通过腾讯金融云对外输出金融级分布式数据库产品服务，除了微众银行，腾讯分布式数据库 TDSQL 还支撑着华通银行、华夏银行、潍坊银行、内蒙金谷农商银行、北京人寿、爱心人寿等众多银行和保险公司的互联网核心生产系统...业务场景爆发推动数据库进化 从架构上讲，TDSQL 是 Shared-Nothing 架构的分布式数据库；从部署方式来讲，TDSQL 是一款支持多租户的云数据库；从能力上讲，TDSQL 比当前流行 HTAP...基于规则和基于代价的查询引擎 当前大多数分布式数据库都设计的是基于规则的查询引擎 (RBO)，这意味着，它有着一套严格的使用规则，只要你按照它去写 SQL 语句，无论数据表中的内容怎样，也不会影响到你的...值得一提的是 TDSQL 已获得包括 ISO27001、ISO22301、PCI DSS、SOC 审计，工信部分布式数据库测试，IT168 技术突破大奖，多项国家或国际认证和行业殊荣。

    5.1K30

    腾讯云分布式数据库TDSQL的十年自主可控之路

    其中，腾讯云也首次正式对外披露分布式数据库TDSQL的十年自主可控之路。 数据作为金融行业的生命线，承载数据的数据库产品，无疑是金融科技的核心，也是当前金融产业安全、自主可控的关键。...腾讯云分布式数据库TDSQL负责人潘安群 一方面，由于核心知识产权掌握在国外厂商手中，极有可能发生厂商断供风险，且该行业长期被传统厂商垄断，金融企业IT成本居高不下。...在这种情况下，采用国产自主可控的分布式数据库显得尤为必要。...十年探索，TDSQL专为“金融”而生 “一款金融级的分布式数据库，必须要经过数年的积淀，以及海量业务场景的锤炼 ”， 腾讯云分布式数据库TDSQL负责人潘安群表示。 TDSQL的诞生正是如此。...此外，分布式数据库TDSQL为用户提供数据库防火墙、透明加密、自动脱敏等安全防护措施，减少用户误操作和黑客入侵带来的安全风险。

    3.3K10

    IT不打烊的tdsql_mysql学习记录1

    个节点其他一个hdfs一个安装web界面端口8081admin/123456登录界面http://ip/tdsqlpcloud/admin/123456集群管理集群设置 配置hdfs 单节点9870创建非分布式实例创建分布式实例...MySQL 的 GUIDGTID（Global Transaction Identifier，全局事务标识符）用于标识每一个已提交的事务，以下是查询方式：分布式数据库只能用时间闪回，不能用gtid集中数据库闪回...================================分布式数据库创建表--------------------------------8、#创建单表：分布式数据库，必须要有主键key建库--...-- 设置最大值，其他未定义项均选择默认值，创建序列成功后，可在 MYSQL.TDSQL_SEQUENCES 表中查看到序列元数据CREATE DATABASE db_employees;use db_employees...-读binlog日志-- 查看当前正在写入的 Binlog 文件及位置SHOW MASTER STATUS;分布式数据库ps -ef |grep 4003解析binlog日志工具路径/data/tdsql_run

    10600

    腾讯云数据库TDSQL通过金融分布式数据库检测

    1月21日，北京国家金融科技认证中心正式发布《2021年分布式数据库标准符合性检测参检机构名单》，腾讯云分布式数据库TDSQL名列其中，成为首款通过检测的互联网公司数据库产品，同时标志着TDSQL满足分布式数据库金融行业标准的各项要求...目前，腾讯云数据库TDSQL已成为众多金融机构推进国产数据库替换的首要选择。...截至2021年底，核心系统采用腾讯云TDSQL的金融行业已经超过20家，尤其在银行传统核心系统领域，腾讯云TDSQL位居国内数据库第一阵营。...2021年8月，基于腾讯云TDSQL打造的昆山农商银行新一代核心系统成功投产上线，是农商行核心系统首次采用“微服务应用+国产分布式数据库”架构。...2021年12月，腾讯云TDSQL在东吴证券新一代核心交易系统中成功落地，是在银行业率先打造首个传统核心国产数据库替换案例后，腾讯云TDSQL在券商核心交易系统场景下再次取得突破。

    1.3K20

    腾讯云分布式数据库TDSQL-TCA等级认证成绩单公示

    在2020年11月，我们上架了原腾讯云CloudLite-分布式数据库TDSQL认证、腾讯云CloudLite-分布式数据库TBase认证（现TDSQL和TBase都属于企业级分布式数据库TDSQL的分支...按照原规则，原TDSQL&TBase各项考试分数前100的同学,可分别获得对应的TDSQL交付运维工程师、TBase交付运维工程师培训考试代金券。...同时参与原TDSQL和TBase考试认证，总分数前100名的同学，可获得腾讯云纪念公仔。 以下是部分结果公示，完整名单请点击「阅读原文」。 1. TDSQL认证前20名 ? 2....原TDSQL及TBase认证总分前20名 ?  ...领取方式 原TDSQL&TBase各项考试分数前100的同学，将由系统自动将代金券发放到您的账户，代金券使用说明请参照链接https://docs.qq.com/doc/DSUVxd1NXVXVURll3

    1.9K20
    点击加载更多

    相关资讯

    热门标签

    更多标签

    活动推荐

      运营活动

      活动名称
      广告关闭

      腾讯云开发者

      扫码关注腾讯云开发者

      扫码关注腾讯云开发者

      领取腾讯云代金券

      热门产品

      热门推荐

      更多推荐

      Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有

      深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 粤公网安备44030502008569号

      腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号

      领券