当下是分布式数据库发展的最佳时机。 中国移动互联网的快速发展,为新一代分布式架构技术体系提供了方向指引与最佳场景训练场,推动云计算时代分布式基础技术的诞生、演进。而国内自主研发的分布式技术的逐步发展,更是成就了一个个海量业务场景。 场景推动技术发展,技术也在支持、创造场景。历史告诉我们,每当新技术出现新的曙光,新商业已经蓄势待发。近年来,分布式数据库成为各大银行企业机构进行系统架构分布式转型的重要抓手。事实上,分布式数据库作为云计算时代的明珠,一次又一次撬动行业的变革:银行可以搭建全线上化的分布式互联网
本项目由安超云投递并参与“数据猿年度金猿策划活动——2022大数据产业创新技术突破榜单及奖项”评选。
究竟区块链与分布式数据库有什么不同?中心化和去中心化之间又是怎样界定的?这两种网络结构会带来什么不一样的使用体验?
随着业务规模的扩大,传统数据库面临诸多限制,分布式数据库成为解决之道。本文 介绍了北京银行在数字化转型过程中对分布式数据库技术的探索,分享了 TiDB 在北京银行的应用历程和未来展望 。
在传统数据大集中的环境下,银行核心系统很容易发生故障,而且一旦发生故障,影响面将特别广,带来很大的舆论压力和监管压力,历史上大型商业银行核心系统故障的例子不在少数。而且传统的集中式架构不易扩展,各模块间高度耦合,最终造成核心系统体量太过庞大、业务太过繁重。
导语 | 每一个时间段总是一个新时代,新技术层出不穷使得数据库技术焕发新生。Spanner、CockroachDB、TDSQL等分布式数据库正是这个时代的弄潮儿。本文由腾讯云数据库专家工程师 李海翔在 Techo TVP开发者峰会「数据的冰与火之歌——从在线数据库技术,到海量数据分析技术」 的《分布式数据库的演进》演讲分享整理而成,带大家品味分布式数据库架构、前沿技术和TDSQL技术实践,感受分布式数据库的技术之美。 点击可观看精彩演讲视频 一、分布式数据库架构 我今天所分享的内容主要集中在数据库技
一款的优秀国产分布式数据库应该表现如何?尽管你可能没有察觉,但领先的数据库产品已经在产业化的道路上越走越远、越走越深入,助力行业数据库实现全面自主可控。 日前,CCF主办的2019 中国计算机大会(CNCC 2019)在苏州落下帷幕。会上,腾讯金融级分布式数据库TDSQL负责人潘安群分享了TDSQL的15年研发演进历程。 据了解,在十数年的积累打磨中,TDSQL持续地优化分布式、高可用、高性能等特性,以及不断完善满足客户的需求。而统计数据显示,作为一款自主可控数据库,TDSQL持续在行业保持领先,
曾就职于京东科技,负责数据库产品研发,热爱开源,关注数据库生态,目前专注于 ShardingSphere 数据库中间件开发以及开源社区建设。
2012 年开始,由腾讯内部业务适配而衍生的自研分布式数据库 TDSQL 正式诞生。2020年12月,腾讯云数据库三大产品线统一升级,将 TDSQL、CynosDB(现为TDSQL-C)、TBase (现为TDSQL PG版)统一至全新的 TDSQL 系列中。砥砺前行十余载,这家互联网厂商在数据库领域立下一座座丰碑,腾讯云TDSQL 每次都能精准踩点的秘诀是什么? 1 腾讯云 TDSQL 的前世今生 要想真正的了解腾讯云 TDSQL,首先要了解其发展历程。TDSQL 发展经历了四个发展阶段: 第一阶段:2
11月16日,腾讯云正式对外宣布,旗下国产金融级分布式数据库TDSQL已经在印尼Bank Neo Commerce银行新核心系统完成搭建并正式投入使用推动后者实现分布式数字化转型。这不仅意味着腾讯云自研数据库TDSQL在国内金融级市场应用走在前列,同时,凭借在云计算、互联网等领域的核心技术优势,在国际数据库领域具备强有力的竞争优势。 Bank Neo Commerce银行(以下简称BNC)是一家成立于1988年的印尼银行,于2019年初获得Akulaku投资,并通过金融科技的手段在短短半年内获得超过50万
在数字化时代,数据量呈现指数级增长,尤其是视频、图像、语音等数据急速积累。数据库,在整个数据价值体系中,承担着基石的作用。海啸一般的数据正在向我们迎面扑来,关于数据的整个计算、存储、应用技术体系,都必须经过大刀阔斧的改造,才能有效应对巨量的数据处理需求。那么,作为数据帝国的“重臣”,数据库该如何进化呢?答案是原生分布式数据库。
水平拆分的概念随着分布式数据库的推广已为大部分人熟知,分库分表、异构索引、小表广播、这些功能几乎是产品功能需求标配。然而有些客户使用分布式数据库后的体验不尽如意。本文尝试从数据的角度总结分布式数据的复制(replication)和分区(partition)技术原理和方案,其中分区也有称为分片(sharding),希望能引起读者一些思考,在分布式数据库选型中能注意这些细节的区别,选择适合业务的数据水平拆分方案。
当前,全球数字化浪潮推动数字经济与实体经济融合,更多的企业意识到数据平台对业务增长和创新的重要性。通过国产化迁移和替换数据库,中国数据库市场蓬勃发展,为企业自主创新奠定了基础。本文以中国人寿财险公司为例,详述其从 Oracle 到 TiDB 分布式数据库的四个阶段的迁移,展示了金融行业对数据库的高要求和国产数据库的价值应用。
克莱顿•克里斯坦森教授在其著作《创新者的窘境》中提出一个有趣的观点:固守既有的成功经验和发展路径,严重阻碍那些昔日霸主开发“破坏性”技术,而新的竞争对手会从难以预测的地方冒出来,改变看似铁板一块的市场格局。
北京银行是一家城市商业银行,公司价值位列中国区域性发展银行的首位,依托于中国经济的大环境,北京银行的资产总量在全球千家大银行中名列第 61 位,连续六年跻身全球银行业百强。北京银行积极开辟多元化的业务经营,例如北京地区的社保缴纳和医保代发,都是由北京银行在提供服务,在你入职一家公司的时候,收到的医保折子就是来自北京银行。
日前,基于国产金融级分布式数据库腾讯云TDSQL打造的张家港农商银行新一代核心业务系统成功上线投产。这是在国内银行首次在传统核心业务系统场景下,采用国产分布式数据库,打破了该领域对国外数据库的长期依赖,率先响应了国家对金融核心领域技术自主可控的要求。
在数据量持续爆增、数据日益多样化的今天,传统数据库的迭代速度已经追不上数据的增速,企业对数据库计算和存储能力的要求也越来越高。不久前,腾讯云数据库分布式TDSQL发布金融级全自研新敏态引擎,可以完美适配金融敏态业务。
近日,由《金融电子化》杂志社主办、北京金融科技产业联盟协办的“2019中国金融科技年会暨第十届金融科技及服务优秀创新奖颁奖典礼”在京成功召开。腾讯云TDSQL分布式数据库解决方案荣获“2019金融科技创新突出贡献奖——开发创新贡献奖”。
如果说核心系统是金融机构业务系统的“心脏”,那么数据库则是“心脏”的“心脏”,业务数据就像流淌在业务系统中的“血液”,拥有一颗健壮的“心脏”是系统高效处理业务和维持正常运转的必备条件。由于金融级数据库技术的高度复杂性,国内金融机构的核心系统长期依赖国外商用数据库产品,金融机构不但无法自主掌控核心系统的“心脏”,而且还需要长期投入高昂的软硬件成本,同时互联网业务的爆发性增长也导致“心脏”压力骤增,成本呈指数级增加。因此,如何实现金融级数据库的自主可控和降本增效,为核心系统平稳换“心”,成为金融行业关注的焦点
而数据库作为软件系统的核心组成部分,尤其是面对当下很多基于微服务、容器化的服务层可以无限弹性扩展的云原生时代,了解不同数据库的基本原理和适用场景,对很多技术人来说避免瓶颈、解决瓶颈,从一开始就能选择好适合自己业务场景的数据库,都是很有帮助的。
近日,由《金融电子化》杂志社主办、北京金融科技产业联盟协办的“2019中国金融科技年会暨第十届金融科技及服务优秀创新奖颁奖典礼”在京成功召开,会上公布了2019年度金融科技及服务优秀创新奖的评选结果并颁奖,腾讯云国产数据库TDSQL作为金融级分布式数据库,凭借一直以来在金融行业核心交易业务的突破创新和应用实践,荣获“2019金融科技创新突出贡献奖——开发创新贡献奖”。 《金融电子化》作为央行下属金融科技领域权威媒体,一直致力于宣传、报道我国金融科技事业的发展,表彰金融科技及服务创新项目,推动金融科技与业
关系数据库的全称是 Relational Database Management System,简称叫 RDBMS。
分布式数据库是相对于集中式数据而言的,具备分布式数据管理能力的一种新型数据库软件产品。是面对高性能、大数据量业务系统,特别是无法进行大规模重构的业务系统,实现分布式能力引入的一种有效解决方案。分布式数据库具备数据分片管理、分布式事务、读写分离等关键分布式能力,能够为应用提供类似与集中数据库的使用方式,可以降低应用实施分布式改造的复杂度。近年来,各国产厂商都在积极推进分布式数据库产品的研发,技术已经逐步成熟,金融行业也已经有成功案例投入生产系统使用。本文尝试从多个角度,阐述金融行业分布式数据库转型所面临的问题及解决思考。
在5G、新基建和数字化转型的背景下,云计算市场飞速增长,人才缺口日渐明显,与此同时,受多方面因素的影响,国内各类底层关键技术也在国家的扶持下努力实现国产化,在数据库方面,腾讯云也推出了TDSQL和TBase等自研数据库加入到了这个国产化的进程中。面对整个国产化云计算的大生态,生态人才的匮乏将成为行业发展的一大瓶颈。 为了解决国产数据库人才匮乏的情况,我们在7月28日对腾讯云数据库的合作伙伴、区技和部分客户等群体进行了为期两天的培训,两天中讲师对参加培训的学员们进行了关于国产数据库TDSQL全方位的培训,累
分布式系统比单机系统复杂得多,但经过多年的发展,业界已经有了丰富的分布式系统理论,也有了许多优秀的组件。在分布式系统理论里,最近流行的微服务架构理论成了佼佼者,微服务的概念也成了当前分布式系统实现方案中的主流,显然,微服务架构成了分布式系统的一种形式。优秀的分布式系统组件早期主要以国内阿里巴巴的Dubbo(现今已经被Apache归纳进入其孵化器)为主,后来从国外引入了Spring Boot和Spring Cloud,它们现在是微服务实现的主流方案。
导语:读书是一生的功课,技术人通过读书实现自我提升,学习优秀技术沉淀。TEG读书会本期特邀腾讯金融云专家工程师李海翔、TEG计费平台部专家工程师雷海林、MySQL数据库专家姜承尧,为大家带来数据库方向好书推荐。来看看技术大牛在读什么,国庆遇见好书,愿本期书单助您更专业。 李海翔,腾讯金融云专家工程师,从事分布式数据库TDSQL研发工作。出版著作:《数据库查询优化器的艺术 原理解析与SQL性能优化》、《数据库事务处理的艺术 事务管理与并发控制》,广受好评。中国人民大学信息学院工程硕士企业导师。 理论类
关系型数据库指的是使用关系模型(二维表格模型)来组织数据的数据库,由二维表及其之间的联系所组成的一个数据组织。
随着互联网的不断发展和逐渐普及,各行各业也纷纷选择了上云之路,腾讯云数据库致力于运用领先技术,助力企业上云,分布式数据库TDSQL就是部署在腾讯云上的一款具备强一致高可用、全球部署架构、分布式水平扩展、高性能、企业级安全等特性的数据库产品,《图说TDSQL》栏目将以图文结合的形式,带大家了解TDSQL的方方面面。 本文将为你详细解读,腾讯云TDSQL携手张家港农商银行的“破壁之路”,共同促进银行传统核心数据库首次实现国产化。 接下来我们以文字更详细地分享每张图背后的细节和故
金融行业作为国民经济的命脉和枢纽,对底层数据库的能力要求在不断提高。具有高性能、可扩展、高可用等特性的分布式数据库是金融行业数字化转型的重要支撑。 金融企业如何在不同的应用场景下,做好分布式数据库的选型和落地呢?本文从业务、技术、行业角度出发,从市场发展到落地实践,全方位全流程为您剖析分布式数据库在金融场景中的应用与实践。本文将会为您解答以下几个问题: 如何在品目繁多的市场中选择一款合适的数据库? 从哪些维度去考察数据库? 数据库迁移过程中需要注意哪些要点呢?金融客户的诉求是什么? 有无实际的案例可供参考
分布式数据库已经流行好多年,产品非常众多,其中分布式数据库中间件使用场景最广。本文主要是总结如何基于分布式数据库中间件做数据库架构设计,以充分发挥它的分布式能力。各个中间件产品功能核心原理相同,细节上有些区别。这里仅以阿里云的DRDS为例分析,在产品架构、功能、成熟度和市场占有率上,它都比同行产品有优势。
在各种因素的推动下,分布式数据库已经成为一种技术潮流,甚至是新基建很重要的一部分,该类型数据库也在众多行业进行了广泛落地,供需两旺。分布式数据库的架构设计思想也很值得广大开发者学习。本文,InfoQ 希望呈现有关分布式数据库的架构设计优化及实践相关内容。
“ 2017 年微众银行将每个账户的运营成本降 至平均只有 6 元 人民币,仅为内地传统银行的 1/10 ,相比国际银行则更低,只有其成本的 2% 至 5% 。”
金融行业作为国民经济的命脉和枢纽,对底层数据库的能力要求在不断提高。具有高性能、可扩展、高可用等特性的分布式数据库是金融行业数字化转型的重要支撑。作为金融企业或金融行业从业者,如何在不同的应用场景下,做好分布式数据库的选型和落地?本文从业务、技术、行业角度出发,从市场发展到落地实践,全方位全流程为您剖析分布式数据库在金融场景中的应用与实践。本文将会为您解答以下具体问题: 如何在品目繁多的市场中选择一款合适的数据库? 从哪些维度去考察数据库? 数据库迁移过程中需要注意哪些要点呢? 有无实际的案例可供参考呢?
文章介绍了分布式数据库在项目中的使用场景,以及基于腾讯云DCDB的具体实现方案,包括分表、分库、负载均衡、高可用等方面的内容。
| 大咖介绍 苏强,腾讯云数据库资深产品经理,拥有多年ToB产品策划、产品运维经验。曾在多个知名企业任职产品经理,主导或参与多款业内知名的B端产品从0到1过程,部分主导产品已实现同类产品占有率第一。接手腾讯分布式数据库以来,主要负责腾讯云分布式数据库功能策划、市场能力建设、服务支撑能力建设和团队建设等。 ---- 大家好,我是来自腾讯云的苏强。从腾讯云分布式数据库商用那天起,我就在分布式数据库团队里,所以可以很自豪地说,我是最了解腾讯云分布式数据库的人之一。今天我将和大家分享近两年来分布式数据库在金融行业
腾讯云TDSQL创造了国产数据库一项新的里程碑,这个里程碑,值得国内每一位技术人为之振奋。 9月30日,腾讯云正式对外宣布企业级分布式数据库TDSQL金融核心系统客户已经超过20家,尤其在银行传统核心系统领域,位居国内第一阵营。 名单涵盖多家国有大行,及平安银行、张家港银行、昆山农商行等头部银行及广泛金融行业机构。 除了TDSQL,目前国内还鲜有一款国产数据库,在银行的传统核心系统成功上线。 规模化投产银行核心系统的国产数据库,是金融行业数据库应用国产化替换质的突破。 20家,一个不算太大的数字 但是对于
☆ 点击▲关注 腾讯云数据库 ☆ 实现信息技术的自主可控,可以说是金融行业最紧迫、最重要的推进战略了。 人民银行、银保监会等主管部门密集出台文件,指导金融行业核心领域自主可控技术应用。 拿数据库来说,自主可控这事儿业内也没少探索。 在腾讯云多项技术能力的支持下,微众银行 就打造出国内首个基于分布式数据库的互联网银行分布式核心系统架构。该系统架构现已可支撑单日处理最大金融交易笔数达3.46亿笔。 最近,我们和张家港行 又联手搞了件大事。张家港行新一代核心系统采用腾讯云TDSQL来承载核心
最近席卷全网的神剧《庆余年》,听说一开始不屑一顾的人,看了之后都会说“真香”。 数据君1.5倍速补课之后,秒被爱财怕老婆又善吹彩虹屁的老王圈粉。 众所周知,“宝藏男孩”王启年贪财和怕老婆两个特性不分先后,赚钱藏钱一把好手。 要薪资的时候,他这样说: 为什么要藏呢?他的钱全部上交给了老婆,享受“体贴入微”的搜身,平日里也只能想尽办法藏点钱充到小金库。 办公室文件里有银票: 脚趾缝里有铜板: 请范闲吃饭,从鞋袜中掏出两枚铜钱,豪气的说:“我请你吃饭!”这对他来说,简直是最破费的一次了。 但
近些年来,国产数据库成为较热门的话题。有越来越多的公司考虑采用国产数据库产品。近期在与twt社区的互动中,发现有大量相关的讨论,关注度也较高。特将自己回答的部分问题摘录如下,也算是对若干热点问题的个人观点。
最近在某个“群”, 经常看到吐槽某分布式数据库的“流言蜚语”,主要提到一些问题, 如系统不稳定,系统运行缓慢,等一些问题,细究大部分问题不在分布式数据库,而在于本身使用者不具备使用分布式数据库的最基本的“能力”。
“CCF学生领航计划”(Student Pilot Program,简称SPP)是中国计算机学会面向学生开设的直播类栏目,CCF学生会员可免费参加。第十二期为技术内容专场,特邀两位腾讯专家分享腾讯在“数据中心碳中和”与“分布式数据库TDSQL”领域的技术探索与实践。欢迎对相关领域感兴趣的同学参加。 报告题目1:《 腾讯在数据中心碳中和方面的技术探索 》 演讲嘉宾:梁家启,腾讯数据中心运营规划与能源负责人。曾任AWS全球数据中心senior tech lead,带领团队负责全球技术标准化与优化,建立全球数据中
上期我们给大家带来分布式数据管理如何完成数据存储,数据同步,数据跨端访问,并保证整个过程中跨设备数据安全的解读。
腾讯公司和中国计算机学会于2013年共同发起的CCF-腾讯犀牛鸟基金(以下简称犀牛鸟基金),始终致力于支持海内外青年学者开展前沿学术研究与技术实践。犀牛鸟基金通过提供企业真实问题与业务实际需求,搭建产学研合作及学术交流的平台,推动合作双方学术影响力的提升及研究成果的应用落地,促进自主技术的创新与发展。 本年度犀牛鸟基金共设立10个科研方向共33项研究课题 申报截止时间为2021年6月15日24:00(北京时间) 申报链接: https://www.withzz.com/project/detail/12
阅读字数: 2739用时: 10分钟 本文内容来源于彭旸在OSC源创会上海站上的主题演讲,IT大咖说为与开源中国合作的视频知识分享平台。 内容摘要 对于真正企业级应用,需要分布式NoSQL/NewSQ
分布式数据库进入人们的视野已经很久了。相对于传统的集中式数据库,分布式数据库在高性能、高可用、平滑拓展、高可靠、低成本等许多方面具有优势。 但时至今日,关于分布式数据库,似乎一直缺少足够权威和客观的解读。 现在,国家白皮书来了! 为了明确分布式数据库的概念,梳理分布式数据库的技术体系和应用现状,对未来的技术和应用趋势进行研判,中国软件评测中心牵头组织了腾讯云等厂商参与,调研了国内主要分布式数据库产品厂商,并对部分产品进行了测评,参考了国内外主要研究机构的学术成果,历时半年共同编制了《分布式数据库发展路径研
WOT(World of Tech)全球技术创新大会是由51CTO开创的综合性高端技术会议品牌,致力于展现国内外技术领域热点趋势、搭建全球技术人的深度分享交流平台、推动先进技术的场景落地与行业融合。自2012年首次举办以来,WOT已在十年间通过十八场高质量技术盛会的输出,累计影响了数千家科技企业与数万名一线技术人员。
网络信息的发展也使得数据的数量越来越庞大,想要除草如此庞大的数据,需要借助数据库的帮忙,目前数据库的种类非常多样,其中分布式数据库是一种较为新兴的数据库类型,下面为大家简单介绍分布式数据库系统是什么?以及分布式数据库系统主要有哪些优点?
大数据时代对数据处理能力的要求比较高,因而衍生出了很多种数据处理软件,比如能够储存大量数据的数据库数据库分为很多种类型,传统数据库主要是集中式数据库,目前出现了新型的分布式数据库,下面为大家简单介绍分布式数据库有什么用?以及分布式数据库的总体特征有哪些?
领取专属 10元无门槛券
手把手带您无忧上云