首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

国产金融分布式数据库金融核心场景的探索与实践

作者 | 贾瓅园 金融行业作为国民经济的命脉和枢纽,对数据库有着极为严苛的要求。近年来,国产金融分布式数据库迈上了发展的快车道,在多个领域不断取得新突破。...今天为大家带来腾讯云金融行业架构专家贾瓅园老师在金融架构方面的分享,主题为“国产金融分布式数据库金融核心场景的探索实践”。...3 金融分布式数据库架构探索 根据上述分析与要求,结合分布式数据库金融领域的挑战与痛点,我们在金融分布式架构体系方面进行了探索。...完善金融整体解决方案,我们必须要在满足金融监管要求的同时,满足金融客户各类建设特点,以抽象思路和通用化的设计回归到统一的数据库产品。 深入金融业务场景探索。 打磨高可用和稳定性。...创新金融 DB SaaS 服务。以前述提及的数据迁移体系、运维模式、建设模式为例,它能否对未来的金融厂商、客户提供专业的数据库金融场景服务,这些都需要我们不断地去创新和探索。

1.3K30

金融分布式数据库架构设计要点

行业背景 银行业从最初的手工记账到会计电算化,到金融电子化,再到现在的金融科技,可以看到金融与科技的结合越来越紧密,人工智能、大数据、物联网、区块链等新兴技术改变了金融的交易方式,为金融行业的创新前行提供了源源不断的动力...同时互联网金融的兴起是一把双刃剑,带来了机遇的同时也带来了挑战。普惠金融使得金融的门槛降低,更多的普通大众参与到金融活动中,这让金融信息系统承受了越来越大的压力。...随着数据库瓶颈的凸显,进行分布式改造迫在眉睫。 数据库分布式改造的途径 数据库进行分布式改造主要有三种途径:分布式访问客户端、分布式访问中间件、分布式数据库。...分布式数据库总体架构 其实当前市面上的分布式数据库总体架构都是类似的,由必不可缺的三个组件组成:接入节点、数据节点、全局事务管理器。...分布式数据库如何实现PITR 数据库的PITR一般都是通过一个基础备份加上持续不间断的wal归档来做到的,这个基础备份可以是在线的,因为它并不需要数据库当时处于一致性状态,一致性可以通过replay redo

2.3K61
您找到你想要的搜索结果了吗?
是的
没有找到

肥皂与手纸:神奇的电商大数据分析

11.11光棍节已经过去,12.12促销又要到来,回望双十一的疯狂与激情,哪些人在小米、哪些人在华为,哪些人在林志玲,哪些人在杜蕾斯,都将是有趣的话题。...虽然市面上有不少大数据之类的书籍,但是真正专业电商技术解密和实践案例分享的书籍还真是独此一家,我马上去几本送给我的程序猿朋友们。...按道理讲朝阳区北京夜生活最丰富的地区了,曾经的天上人间,灯红酒绿的三里屯都在这里,双十一朝阳区的青年们都跑哪里去了。...,这一点我体会不到,因为我大多数时间步行到单位,也就10分钟,这也说明11.11是真正属于年轻人的节日,我老人家熬不过他们了。...电商大数据分析带来的惊喜和忧虑 性福指数让人血脉贲张,但是,生存大于享乐,从行业的角度,京东11.11大数据报告也有一些非常有价值的数据结果。

28.8K100

亿客户和PB级数据规模的金融数据库实战历程

当时,腾讯有一款金融的分布式数据库产品TDSQL,其业务场景和对数据库的可靠性要求,和银行场景非常类似。...微众银行和腾讯TDSQL团队合作,共同将TDSQL打造为适合银行核心场景使用的金融分布式数据库产品,并将TDSQL用于微众银行的核心系统数据库。本文是对整个实践历程的总结。...从过往经验来看,当时除了oracle等少数传统的商业数据库,能满足金融银行场景的数据库产品并不多。...1.TDSQL架构介绍 TDSQL是基于MySQL/Mariadb社区版本打造的一款金融分布式数据库集群方案。...微众银行通过实践证明,TDSQL作为金融的核心数据库,是完全胜任的。

2.1K20

天蝎座性福指数最低-肥皂与手纸:神奇的电商大数据分析

怎么这么多人肥皂和手纸?是啊,这就是趋势变化,一方面说明京东商城百货化成绩不俗,购物篮丰富度大大提升,另一方面也说明年轻网民们的生活必需品消费也呈现出电商化的趋势。 ?...新新人类的崛起为京东做出了很大的贡献,主要体现在用户柔性购物需求的常态化,在京东上数码手机或是肥皂手纸,说明京东用户已经习惯了网上购物生活,并且多样化购物,京东综合化的品牌定位已经深入人心了。 ?...(青春是最美好的时光,人不风流枉少年,风流勿忘套套) 让我比较伤心的一个数据是北京城区性福指数对比结果是,昌平区性福指数最高,本人居住多年的大朝阳区居然是一片灰白色,性福指数是最低的。...按道理讲朝阳区北京夜生活最丰富的地区了,曾经的天上人间,灯红酒绿的三里屯都在这里,双十一朝阳区的青年们都跑哪里去了。...比如,虽然网友在早上和深夜下单已经成为习惯,但是移动电商还是带来了不同的东西,数据显示移动端购物呈现出“随看随”的特点,这样的消费特征让每一个时段的购物频次相当扁平化。

19.1K80

金融高可用!天翼云TeleDB数据库如何实现容灾双活?

例如:金融机构对安全性要求最高,在数据库灾备建设的各项要求上非常严格,一般核心业务系统会采用热备模式,通过三地五中心的异地多活方案来保证高可用,给予业务系统多重保障;而中小型企业主要保护业务、办公、管理文档数据...一方面,天翼云借鉴国际国内灾备标准,进一步细化灾备指标,添加库读写分离、表双写双读、行双写双读等能力,让数据库灾备标准更加优化,有法可依。...这一要求也达到了金融领域分布式数据库灾难恢复的能力标准。...正是基于金融高可用能力,天翼云TeleDB从层层选拔中脱颖而出,成功实现了健康码系统主中心和双活中心的切换:当新增资源池间互联电路中断或出现双活中心整体故障时,主中心业务完全不受影响,数据库集群将自动感知到双活中心发生故障...天翼云TeleDB作为云服务“国家队”,不断加快关键核心技术自主攻关,走出了一条引领国产化数据库高速发展之路,其历经十年打磨出的天翼云TeleDB系列产品,核心技术完全自主可控,其容灾方案展现出的金融高可用标准

2.8K10

腾讯分布式数据库TDSQL金融能力的架构原理解读

hrd7lij4yf.jpg] 第一章,产品简介以及适用场景 第二章,TDSQL架构分析及模块介绍 第三章,数据一致性保障 第四章,分布式TDSQL实践 第五章,数据同步与备份 一、TDSQL是什么:腾讯如何打造一款金融分布式数据库...我们开始把这个高可用的数据库产品化。到2012年,TDSQL的雏形就已经出来了,作为一款内部产品,开始在公司内部提供金融的数据强一致性、可靠性服务。...在金融场景,你没有办法去估量——假如错一条数据,到底这条数据是1分钱还是1个亿,所以数据强一致是我们最根本的一个特性。不允许丢,不允许错,这是对数据库起码的要求。 第二是金融高可用。...第五点是企业安全。金融数据是敏感的,一些敏感的金融数据需要在当前数据基础上再做一层更高级别的企业安全防护,比如数据库防火墙,以及透明加密,等等。...三、TDSQL金融特性之:数据强一致性保障 前面我们了解了TDSQL的整体架构和核心特性。接下来我们要重点聊一聊它最重要的特性——作为金融场景下不可或缺的数据强一致性的保障。

6.2K43

腾讯TDSQL:带你认识真正的金融自主可控分布式数据库

实际上,腾讯推出的 TDSQL(TencentDistributed SQL) 金融分布式数据库,在对内支撑微信红包业务的同时,对外也正在为中国金融行业技术自主可控分布式数据库解决方案 作为国内首家互联网银行...目前 TDSQL 已正式通过腾讯金融云对外输出金融分布式数据库产品服务,除了微众银行,腾讯分布式数据库 TDSQL 还支撑着华通银行、华夏银行、潍坊银行、内蒙金谷农商银行、北京人寿、爱心人寿等众多银行和保险公司的互联网核心生产系统...并已经为超过 500+ 的政企和金融机构提供数据库的公有云及私有云服务,客户覆盖银行、保险、证券、互联网金融、计费、第三方支付、物联网、互联网 +、政务等领域,得到了客户及行业的一致认可。...所以,从 08 年开始,团队决定重构 TDSQL 解决方案,针对金融类业务的特点,列出以下几个要点: 数据强一致的要求 数据库集群的可用性、稳定性和容灾要求要达到银行标准 业务无需拆分超大表,数据库自动拆分...金融业务的数据库发展及展望 金融业务涉及国计民生的重点业务,一个小小的 BUG,一个操作失误,就可能影响到数以万计的百姓资产准确性。正因为这样的责任,腾讯云 TDSQL 团队始终坚守则“本心”。

4.2K30

直播回顾 | 腾讯分布式数据库TDSQL金融能力的架构原理解读

image.png 第一章,产品简介以及适用场景 第二章,TDSQL架构分析及模块介绍 第三章,数据一致性保障 第四章,分布式TDSQL实践 第五章,数据同步与备份 一、TDSQL是什么:腾讯如何打造一款金融分布式数据库...我们开始把这个高可用的数据库产品化。到2012年,TDSQL的雏形就已经出来了,作为一款内部产品,开始在公司内部提供金融的数据强一致性、可靠性服务。...在金融场景,你没有办法去估量——假如错一条数据,到底这条数据是1分钱还是1个亿,所以数据强一致是我们最根本的一个特性。不允许丢,不允许错,这是对数据库起码的要求。 第二是金融高可用。...第五点是企业安全。金融数据是敏感的,一些敏感的金融数据需要在当前数据基础上再做一层更高级别的企业安全防护,比如数据库防火墙,以及透明加密,等等。...四、TDSQL金融特性之:数据强一致性保障 前面我们了解了TDSQL的整体架构和核心特性。接下来我们要重点聊一聊它最重要的特性——作为金融场景下不可或缺的数据强一致性的保障。

1.7K30

架构揭秘:「京东白条」的数据架构进化之路

正是京东白条技术团队多年的努力,才造就了当前京东白条的『土生土长』,但具有京东白条特色的金融数据库选型方法论。...当京东白条的金融类业务启动时,现任京东白条研发负责人张栋芳,虽然预料到了其数据体量的大幅度增长,却没有想到这种增长将导致数据库选型方面的一系列变化,以及对数据库未来发展模式的启发。...作为京东科技旗下的杀手金融消费应用,今天的京东白条已经成长为服务数亿用户、日均产生巨额流量的庞大金融生态。在业务和数据量飞速增长的同时,京东白条后台的研发人员,也在紧张的焦头烂额中.......但京东白条业务体量巨大,是名副其实的金融高并发、海量数据的业务场景,因此在选择分库分表组件时应具备以下 4 个特点: 产品成熟稳定。...而每一次转型,无疑都是一次冒险,这对于追求稳定和体验的金融产品而言,无疑是需要慎重考虑的。 而在现阶段通用的数据架构体系下,整个行业都在经历一种新的不稳定业态。

1.9K20

2022年腾讯云「11.11」CDN短信视频云通信产品优惠活动价格汇总

2022年「11.11」大促热卖中,腾讯云CDN/短信/视频云/通信产品的优惠力度真香!活动面向新老客户都提供了诚意优惠,1分钱起超值入门体验!...戳链接前往活动:https://mc.tencent.com/OxsprN5o图片整体介绍CDN&音视频通信会场本次「11.11」活动一共有4个售卖区:首购特惠专区、限时组合购专区、企业专区和特惠专区,...限制了企业认证的客户才可以购买,产品类型多,规格比较全,优惠力度会介于首购专区和特惠专区之间,比对新老同享的套餐包,企业专区整体要比特惠专区低1%~5%;图片特惠专区:不限认证类型,不限新老客户都可以,...这里的产品类型是最全的,尽管在会场页面上优惠力度最小,但是相比日常来说,也是非常实惠了,小编看了下上个月购买的5万条短信要0.045元/条,现在只要0.037元/条,省下来的钱鸡腿吃不香么?...直点结合图片五、实时音视频简介:主打低延时互动直播和多人音视频两大场景化方案,快速搭建低成本、低延时、高品质的音视频互动服务适用场景:在线教育、语聊房、在线K歌、秀场直播、协同通信、狼人杀、剧本杀、在线医疗、在线金融图片六

152K60

Gdevops峰会丨分布式、中台等架构解析,及数仓集群、智能运维、监控优化等实操解读

PB万亿数据库性能优化及最佳实践 议题要点及收获: 重新认识MongoDB的十大核心优势及适用场景; 500亿IOT业务迁移,MongoDB如何实现成本十倍节省优化; 百亿ES数据迁移,MongoDB...如何实现成本近十倍节省优化; 万亿MongoDB集群最佳运维及性能优化实践; 没有万能的数据库,如何进行选型。...招商银行高可用架构实践 与云平台建设 议题要点及收获: 金融高可用架构主要关注哪些方面及Oracle高可用架构实践经验; 如何提高资源利用率,降低运营成本; 面对业务高速发展,如何快速交付并满足业务的不同需求场景...讲师介绍:负责京东科技数据库平台管理维护工作,带领团队平稳护航多次6.18、11.11大促,对数据库多业务场景架构设计、高并发解决方案、数据生态管控有丰富实践经验。...维稳618和双11:京东科技数据库 海量运维的生态体系建设与实践 议题要点及收获: 如何建设海量数据和高并发场景下的数据库生态治理体系; 以6.18、11.11等大促为例的数据库海量运维经验; 数据库全生命周期管理

3.5K30

深度解析金融分布式数据库一致性技术

上述方案确保了TDSQL无任何数据异常,且具备高性能的可扩展性,解决了分布式数据库金融场景应用的最核心技术挑战,使得国产分布式数据库实现在金融核心系统场景的可用、好用,进而推动国产基础软件产业化。...在WOT全球技术创新大会2022的腾讯云数据库专场中,腾讯云数据库专家架构师汪泗龙分享了金融分布式数据库TDSQL的一致性技术及应用实践,以下为详情内容: TDSQL产品介绍 1.1 发展历程...腾讯云数据库TDSQL诞生自腾讯内部百亿账户规模的金融场景。...在经过公有云的海量数字化、大规模高并发业务场景打磨以及内核的深度自研优化后,TDSQL逐渐形成标准化的国产分布式数据库产品,包括金融分布式TDSQL、计算与存储分离的云原生数据库TDSQL-C 等产品...作为领先的国产分布式数据库,TDSQL针对新型企业信息化以及快速实现国产化的转型升级需求,具备数据强一致、金融高可用、高性能低成本、线性水平扩展、企业安全、便捷智能运维等核心特性。

1.3K20

双 11 特供!临战前收下这几款小程序,分分钟省下一个亿

不买便宜的,只对的 当降价,刷口碑,各种眼花缭乱的宣传扑面而来时,会被太多信息淹没。小程序「什么值得」帮你从众多选择中过滤,做出有价值的消费。前看一看,无论在哪里下单,都可以当作参考。...时效性攻略负责满足眼下最痛的痛点,像 11.11 刷什么卡优惠最多,宝宝安全座椅选双 11 购指南,实实在在的干货贴。...「什么值得」小程序使用链接 https://minapp.com/miniapp/4724/ 不得不说,这款小程序在前的确是个实用的工具。 放宽心,不纠结 有这样一句话是:成大事者不纠结。...那么问题来了,费心挑了不少优价好物,怎么才能最划算,对得起节日做活动的优惠? 「消费分期计算器」这款小程序就是帮你理性消费的高效工具。算计好,省下一波可以再买买买。

56.8K40

【文中有福利】Gdevops广州站:全链路监控、数仓集群、智能运维、混沌工程等实操解析

讲师介绍:15年数据库领域工作经验,历任多家公司数据库技术负责人,对于主流数据库的高可用架构、性能优化、监控报警、自动化运维等方面均有丰富经验。...讲师介绍:负责京东科技数据库平台管理维护工作,带领团队平稳护航多次6.18、11.11大促,对数据库多业务场景架构设计、高并发解决方案、数据生态管控有丰富实践经验。...维稳618和双11:京东科技数据库 海量运维的生态体系建设与实践 议题要点及收获: 如何建设海量数据和高并发场景下的数据库生态治理体系; 以6.18、11.11等大促为例的数据库海量运维经验; 数据库全生命周期管理...中信银行的DevOps新实践 议题要点及收获: 如何通过DevOps转型为银行数字化赋能; 着眼组织能力提升,以敏捷为唯一指标,从体系、平台、文化等各方面同步开展,覆盖团队、产品线的敏捷转型经验...大型金融行业 DevOps工具链的建设实践 议题要点及收获: 了解开源和自建工具链之间的优劣势; 大幅降低流水线常见任务的耗时; 研发规范流程如何在工具落地; 自动化测试工具的设计和落地实践。

6.5K30

独家丨数字生态大会专有云干货分享

将公有云的能力延伸到私有云,提供了面向企业市场的IaaS\PaaS\SaaS服务。...主要把腾讯的计算存储网络和核心的中间件、数据库以独立产品形式交付到客户现场。...第二IaaS和PaaS解耦,我们经常说不把鸡蛋装在一个篮子里,很多客户要把IaaS和PaaS分开A厂商的IaaS产品,B厂商的PaaS产品,要让两者能很好的结合这就是IaaS和PaaS解耦。...目前我们在政务、金融、企业、交通、泛互联网行业,都做了非常多的标杆成功案例,帮助这些客户实现了数字化转型,并且支持他们的商业成功。 04 新的挑战思考 未来往哪里走?...比如客户的数据库应该怎么设计架构,业务怎么设计才可以多活等这时候客户没有特别多的经验。比如用了你的数据库为什么这么慢?

5.5K20

B站直播《MySQL冲冲冲》第五期文稿版

第三期回顾:MySQL 高可用 VS Oracle 高可用,MySQL 能否取代 Oracle 在金融行业的垄断局面??...在我看来,分布式数据库数据库没有什么太大的区别。它解决的是在互联网行业中,在线、海量数据存取的服务需求。举个例子,淘宝 11.11 活动。...11.11 前 1 小时肯定是最高峰的,根据我的经验,峰值少说应该是平均值的 10 倍,但 11.11 少说是 20 倍。也就是说,高峰期下单的 TPS(事务的数量)要达到 30 万,而且有所保留。...首先它是开源的,大家都可以看到源代码,哪里有问题,哪里写得好,都看得到。第二个就是它经过了实践,有些银行业务在用了,你我都敢往里面存钱,说明是能撑得住的。...引入二索引,那我就要把索引维护在中间件层,维护索引的成本非常高,DBLE 也会变得很重。DBLE 后面带 MySQL,MySQL 就可以自己用二索引。

2.3K20

京东商城技术架构部 | 我为11.11保驾护航

针对各业务系统可能出现的故障,我们的“故障演练系统”在11.11备战期间为多个0、1系统做了故障演练,验证各系统的稳定性,以及对已知故障是否具备足够的冗余度。...11.11备战,资源准备也非常重要的一环,我们通过积极有效的系统资源调度,投入最少的资源、满足了所有部门对容器、中间件、数据库等的需求,充分保障了各系统的备战工作。...中间件平台部 在各团队的紧张而稳步的准备中,我们又迎来了全行业的现象狂欢盛宴-11.11。整个11月,消费者翘首以盼,商家摩拳擦掌,友商蓄势以待,一切都为了那激情燃烧的狂欢。...数据库技术部 数据库技术部对数据库系统进行优化和智能化改造,通过智能分析预测技术,在大促前对资源进行合理调度;通过对监控升级,在大促期间应对高峰及时预警;通过接入ContainerFS对备份系统升级,在事后灾备方面做好切换及恢复的准备和方案...,从事前、事中、事后对11.11大促进行全面保障,力争做到防患未然,及时发现,最快处理,确保11.11数据库安全、稳定、高效运行。

12.6K30
领券