首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

国产金融分布式数据库金融核心场景的探索与实践

作者 | 贾瓅园 金融行业作为国民经济的命脉和枢纽,对数据库有着极为严苛的要求。近年来,国产金融分布式数据库迈上了发展的快车道,在多个领域不断取得新突破。...今天为大家带来腾讯云金融行业架构专家贾瓅园老师在金融架构方面的分享,主题为“国产金融分布式数据库金融核心场景的探索实践”。...3 金融分布式数据库架构探索 根据上述分析与要求,结合分布式数据库金融领域的挑战与痛点,我们在金融分布式架构体系方面进行了探索。...完善金融整体解决方案,我们必须要在满足金融监管要求的同时,满足金融客户各类建设特点,以抽象思路和通用化的设计回归到统一的数据库产品。 深入金融业务场景探索。 打磨高可用和稳定性。...创新金融 DB SaaS 服务。以前述提及的数据迁移体系、运维模式、建设模式为例,它能否对未来的金融厂商、客户提供专业的数据库金融场景服务,这些都需要我们不断地去创新和探索。

1.3K30

金融分布式数据库架构设计要点

行业背景 银行业从最初的手工记账到会计电算化,到金融电子化,再到现在的金融科技,可以看到金融与科技的结合越来越紧密,人工智能、大数据、物联网、区块链等新兴技术改变了金融的交易方式,为金融行业的创新前行提供了源源不断的动力...同时互联网金融的兴起是一把双刃剑,带来了机遇的同时也带来了挑战。普惠金融使得金融的门槛降低,更多的普通大众参与到金融活动中,这让金融信息系统承受了越来越大的压力。...随着数据库瓶颈的凸显,进行分布式改造迫在眉睫。 数据库分布式改造的途径 数据库进行分布式改造主要有三种途径:分布式访问客户端、分布式访问中间件、分布式数据库。...分布式数据库总体架构 其实当前市面上的分布式数据库总体架构都是类似的,由必不可缺的三个组件组成:接入节点、数据节点、全局事务管理器。...分布式数据库如何实现PITR 数据库的PITR一般都是通过一个基础备份加上持续不间断的wal归档来做到的,这个基础备份可以是在线的,因为它并不需要数据库当时处于一致性状态,一致性可以通过replay redo

2.2K61
您找到你想要的搜索结果了吗?
是的
没有找到

亿客户和PB级数据规模的金融数据库实战历程

当时,腾讯有一款金融的分布式数据库产品TDSQL,其业务场景和对数据库的可靠性要求,和银行场景非常类似。...微众银行和腾讯TDSQL团队合作,共同将TDSQL打造为适合银行核心场景使用的金融分布式数据库产品,并将TDSQL用于微众银行的核心系统数据库。本文是对整个实践历程的总结。...从过往经验来看,当时除了oracle等少数传统的商业数据库,能满足金融银行场景的数据库产品并不多。...1.TDSQL架构介绍 TDSQL是基于MySQL/Mariadb社区版本打造的一款金融分布式数据库集群方案。...微众银行通过实践证明,TDSQL作为金融的核心数据库,是完全胜任的。

2.1K20

数据库安全之金融

金融行业正常业务范围概括起来主要有以下四大部分,分别是银行业,证券业,保险业及其他金融服务。其中银行业包括中央银行,商业银行,其他银行。证券业主要有股票、债券、期货及其他有价证券的投资交易活动。...其他金融业务是上述三种业务之外的业务,主要有金融信托、金融管理、金融租赁、财务公司、邮政储蓄、典当以及其他未列明的金融活动。...在这样的信息化背景下,金融行业紧跟潮流,在信息化设备采购上一直保持着国际先进水平,但仅保持硬件及软件系统的先进性还是不够的。...数据库作为金融行业信息系统的核心和基础,承载着越来越多的关键业务系统,整个业务流程过程中的操作、数据的变更、新增、删除都存储在数据库中,保存着客户的个人资料以及资金等各类信息。...针对网络中的威胁,金融行业也采取了很多防御措施,比如在金融信息系统最外层部署了网络防火墙,在应用层部署了IDS、IPS、WAF、堡垒机等一系列安全产品,在客户终端上也部署了相应的防病毒软件,但在数据库层面安全措施做得不够

1.7K20

面向金融应用的GreatSQL正式开源

GreatSQL完全免费并兼容MySQL或Percona Server。 GreatSQL由万里数据库发起、主导、维护,也欢迎广大MySQL使用者、爱好者下载使用,或者提交代码、issue等。 1....而GreatSQL已经有效解决了绝大多数较严重的问题,可以更放心地在金融应用场景使用MGR架构。 2....GreatSQL的优势及展望 在金融应用场景中,对数据的可靠性和架构的容错性要求都更高,对多数据中心甚至多活都有较高需求。为此,GreatSQL未来会在以下几方面着重发力。...2.1 增加更多金融场景需求特性 增加地理标签功能。当在多机房部署MGR时,可以保证每个机房中至少有一个节点都参与事务认证,确保该节点总有最新事务,这可用于解决多机房数据同步的问题。...其他更多企业特性展望 未来我们还计划将一部分企业特性也开放出来,包括且不仅限于国产化硬件适配、等保合规、安全加密、Oracle兼容等众多特性。 3.

67110

金融高可用!天翼云TeleDB数据库如何实现容灾双活?

例如:金融机构对安全性要求最高,在数据库灾备建设的各项要求上非常严格,一般核心业务系统会采用热备模式,通过三地五中心的异地多活方案来保证高可用,给予业务系统多重保障;而中小型企业主要保护业务、办公、管理文档数据...一方面,天翼云借鉴国际国内灾备标准,进一步细化灾备指标,添加库读写分离、表双写双读、行双写双读等能力,让数据库灾备标准更加优化,有法可依。...这一要求也达到了金融领域分布式数据库灾难恢复的能力标准。...正是基于金融高可用能力,天翼云TeleDB从层层选拔中脱颖而出,成功实现了健康码系统主中心和双活中心的切换:当新增资源池间互联电路中断或出现双活中心整体故障时,主中心业务完全不受影响,数据库集群将自动感知到双活中心发生故障...天翼云TeleDB作为云服务“国家队”,不断加快关键核心技术自主攻关,走出了一条引领国产化数据库高速发展之路,其历经十年打磨出的天翼云TeleDB系列产品,核心技术完全自主可控,其容灾方案展现出的金融高可用标准

2.8K10

腾讯分布式数据库TDSQL金融能力的架构原理解读

hrd7lij4yf.jpg] 第一章,产品简介以及适用场景 第二章,TDSQL架构分析及模块介绍 第三章,数据一致性保障 第四章,分布式TDSQL实践 第五章,数据同步与备份 一、TDSQL是什么:腾讯如何打造一款金融分布式数据库...我们开始把这个高可用的数据库产品化。到2012年,TDSQL的雏形就已经出来了,作为一款内部产品,开始在公司内部提供金融的数据强一致性、可靠性服务。...在金融场景,你没有办法去估量——假如错一条数据,到底这条数据是1分钱还是1个亿,所以数据强一致是我们最根本的一个特性。不允许丢,不允许错,这是对数据库起码的要求。 第二是金融高可用。...第五点是企业安全。金融数据是敏感的,一些敏感的金融数据需要在当前数据基础上再做一层更高级别的企业安全防护,比如数据库防火墙,以及透明加密,等等。...三、TDSQL金融特性之:数据强一致性保障 前面我们了解了TDSQL的整体架构和核心特性。接下来我们要重点聊一聊它最重要的特性——作为金融场景下不可或缺的数据强一致性的保障。

6K43

腾讯TDSQL:带你认识真正的金融自主可控分布式数据库

实际上,腾讯推出的 TDSQL(TencentDistributed SQL) 金融分布式数据库,在对内支撑微信红包业务的同时,对外也正在为中国金融行业技术自主可控分布式数据库解决方案 作为国内首家互联网银行...目前 TDSQL 已正式通过腾讯金融云对外输出金融分布式数据库产品服务,除了微众银行,腾讯分布式数据库 TDSQL 还支撑着华通银行、华夏银行、潍坊银行、内蒙金谷农商银行、北京人寿、爱心人寿等众多银行和保险公司的互联网核心生产系统...并已经为超过 500+ 的政企和金融机构提供数据库的公有云及私有云服务,客户覆盖银行、保险、证券、互联网金融、计费、第三方支付、物联网、互联网 +、政务等领域,得到了客户及行业的一致认可。...所以,从 08 年开始,团队决定重构 TDSQL 解决方案,针对金融类业务的特点,列出以下几个要点: 数据强一致的要求 数据库集群的可用性、稳定性和容灾要求要达到银行标准 业务无需拆分超大表,数据库自动拆分...金融业务的数据库发展及展望 金融业务涉及国计民生的重点业务,一个小小的 BUG,一个操作失误,就可能影响到数以万计的百姓资产准确性。正因为这样的责任,腾讯云 TDSQL 团队始终坚守则“本心”。

4.1K30

TiDB 金融备份及多中心容灾

金融行业来说,数据库作为最核心的基础组件之一,要求它能够安全运行和保障数据安全,这是一个刚需。另外,数据库服务本身的高可用,是我们实现整个对外数据服务连续性的最重要的基石。...TiDB 的金融备份及容灾之道 TiDB 经常这么多年的积累和逐渐完善,在整个分布式数据库的容灾和灾备的领域,我们达到了金融生产的要求。...但光有上述方案是不不够的,PingCAP 对于自身产品的要求是非常严格的,既然是要达到金融生产的要求,除了要有对应的技术方案、对应的技术实现之外,必须为产品本身提供专业的分布式测试的体系和手段。...任何中心失效,都会由另外两个中心来立刻进行故障的转移,以及对外继续提供正常的数据库服务。...、证券等金融客户提供完善的、可靠的、放心的、金融的分布式数据库服务。

1.1K31

直播回顾 | 腾讯分布式数据库TDSQL金融能力的架构原理解读

image.png 第一章,产品简介以及适用场景 第二章,TDSQL架构分析及模块介绍 第三章,数据一致性保障 第四章,分布式TDSQL实践 第五章,数据同步与备份 一、TDSQL是什么:腾讯如何打造一款金融分布式数据库...我们开始把这个高可用的数据库产品化。到2012年,TDSQL的雏形就已经出来了,作为一款内部产品,开始在公司内部提供金融的数据强一致性、可靠性服务。...在金融场景,你没有办法去估量——假如错一条数据,到底这条数据是1分钱还是1个亿,所以数据强一致是我们最根本的一个特性。不允许丢,不允许错,这是对数据库起码的要求。 第二是金融高可用。...第五点是企业安全。金融数据是敏感的,一些敏感的金融数据需要在当前数据基础上再做一层更高级别的企业安全防护,比如数据库防火墙,以及透明加密,等等。...四、TDSQL金融特性之:数据强一致性保障 前面我们了解了TDSQL的整体架构和核心特性。接下来我们要重点聊一聊它最重要的特性——作为金融场景下不可或缺的数据强一致性的保障。

1.7K30

国产数据库免费又好用

OpenGauss是什么 上一篇文章里我们提到了华为的自研生态 以Euler欧拉OS为底座 支持服务器、云计算、嵌入式等综合性的平台 Gauss 高斯是华为的数据库主打产品 同样也用了数学巨匠的名字 可以看出创作者团队在数学方面的情怀...9岁的高斯脱口而出:5050 每个学计算机的人都学过统计图表 著名的高斯分布-正态分布曲线 也是以他命名的 高斯数据库 高斯数据库诞生于PostGreSQL之上 基于PGSQL的9.2版进行演变 直到今天...发展到了 16 摈弃了很多之前的功能 甚至连系统表都改了 也因此造成很多工具 比如navicat的老版本无法连接 必须升级到最新 而另一方面 OpenGauss发展到了5.0 按照木兰宽松许可证 可供用户免费使用...继承了PG的免费优良传统 安装 数据库支持单体和主备的安装方法 安装包可以从官网下载 大家可以自行搜索 支持服务器直接安装 以及docker容器安装的方式 1....它的结构类似Oracle 包括 表空间 tablespace,库 database,模式 schema 库表索引等对象 都需要使用表空间 如不特指则使用默认 schema模式类似于子库的概念 一个真实数据库

53010

航母miRNA数据库

前几天有小伙伴问关于 miRNA 的数据库,由于 miRNA 相关的数据库太多了,要是分开介绍的话估计要好久好久。...幸好,有人已经把 miRNA 相关的数据库整理好了,我们只需要基于自己的目的进行查找就可以找到相对应的数据库,然后进行使用就行了。...我们需要做的就是,通过里面的描述来进行数据库筛选。 ? 数据库总结 这个数据库的使用基本上就是这样的,剩下的,就是我们基于出来的内容去选择自己想用的数据库了。...对于数据库的选择建议还是: 选择发表日期近的数据库,这样的数据库至少里面包含的数据肯定会比之前发表的多。 选择被引次数多的数据库,这样被引的多说明相对来说比较权威。...这类总结其他数据库的网站,最怕的还是不更新了,这样的话,那我们也就检索不到最新的数据库了。但是这个数据库上面,写了最近的更新是最近,所以应该还是一个时常更新的数据库的。

61820

深度解析金融分布式数据库一致性技术

上述方案确保了TDSQL无任何数据异常,且具备高性能的可扩展性,解决了分布式数据库金融场景应用的最核心技术挑战,使得国产分布式数据库实现在金融核心系统场景的可用、好用,进而推动国产基础软件产业化。...在WOT全球技术创新大会2022的腾讯云数据库专场中,腾讯云数据库专家架构师汪泗龙分享了金融分布式数据库TDSQL的一致性技术及应用实践,以下为详情内容: TDSQL产品介绍 1.1 发展历程...腾讯云数据库TDSQL诞生自腾讯内部百亿账户规模的金融场景。...在经过公有云的海量数字化、大规模高并发业务场景打磨以及内核的深度自研优化后,TDSQL逐渐形成标准化的国产分布式数据库产品,包括金融分布式TDSQL、计算与存储分离的云原生数据库TDSQL-C 等产品...作为领先的国产分布式数据库,TDSQL针对新型企业信息化以及快速实现国产化的转型升级需求,具备数据强一致、金融高可用、高性能低成本、线性水平扩展、企业安全、便捷智能运维等核心特性。

1.3K20

千亿海量数据库OceanBase

OceanBase是阿里集团研发的可扩展性关系型数据库,实现了数千亿条记录、数百TB数据上的跨行跨表事务。 OceanBase的目标是支持数百TB的数据量以及数十万TPS、数百万QPS的访问量。...一、OceanBase系统架构: 1、客户端:使用OceanBase的方式与MySQL完全相同,支持JDBC、C客户端访问,基于MySQL数据库开发的应用可以直接迁移至OceanBase。...三、OceanBase扩展 OceanBase融合了分布式存储系统和关系型数据库这两种技术,UpdateServer相当于一个高性能内存数据库,底层采用关系型数据库技术实现,ChunkServer相当于一个分布式文件存储系统...四、存储介质对比 类别 每秒读写(IOPS)次数 每GB价格(元) 随机读取 随机写入 内存 千万 150 友好 友好 SSD盘 35000 20 友好 写入放大问题 SAS磁盘 180 3 磁盘寻道

2K10
领券