首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

首次揭秘1112背后的云数据库技术!| Q推荐

是什么样的数据库撑起了 2021 年的 11 12 的稳定进行?...《数据 Cool 谈》第三期,阿里巴巴大淘宝技术部 12 队长朱成、阿里巴巴业务平台 11 队长徐培德、阿里巴巴数据库 11 队长陈锦赋与 InfoQ 主编王一鹏,一同揭秘了 11 12 背后的数据库技术...行存储能力。...“那这背后对于一个新的数据库产品类型的要求,实际上整个业界大家都是在探索阶段。” 写在最后 11 12 背后的数据库技术支持远不止于此。... 11 12 丰富的运营活动和千亿交易额背后,数据库层面是包括 RDS、PolarDB、Tair、ADB(ADB3.0) 以及 Lindorm 等数据库产品提供的组合技。

31.6K50

金融高可用!天翼云TeleDB数据库如何实现容灾活?

一方面,天翼云借鉴国际国内灾备标准,进一步细化灾备指标,添加库读写分离、表读、行读等能力,让数据库灾备标准更加优化,有法可依。...,可一键式完成相关高可用集群部署操作; 自动检测、自动切换,无需人工干预; 提供虚IP管理,主从库路由秒切换; 相比国际标准,提供更细粒度容灾分级-库读写分离、表读、行读能力。...按照国家卫健委的要求,热备或活机制,应具备在紧急情况下第一时间进行快速切换的能力,确保系统故障整体恢复时间小于30分钟。 这一要求也达到了金融领域分布式数据库灾难恢复的能力标准。...正是基于金融高可用能力,天翼云TeleDB从层层选拔中脱颖而出,成功实现了健康码系统主中心和活中心的切换:当新增资源池间互联电路中断或出现活中心整体故障时,主中心业务完全不受影响,数据库集群将自动感知到活中心发生故障...天翼云TeleDB作为云服务“国家队”,不断加快关键核心技术自主攻关,走出了一条引领国产化数据库高速发展之路,其历经十年打磨出的天翼云TeleDB系列产品,核心技术完全自主可控,其容灾方案展现出的金融高可用标准

2.8K10
您找到你想要的搜索结果了吗?
是的
没有找到

推荐21-备战 11!蚂蚁金服万规模 K8s 集群管理系统如何设计?

作者 | 蚂蚁金服技术专家 沧漠 导读:Kubernetes 的出现使得广大开发同学也能运维复杂的分布式系统,它大幅降低了容器化应用部署的门槛,但运维和管理一个生产的高可用 Kubernetes 集群仍十分困难...这套面向终态的集群管理系统在今年备战 11 过程中,经受了性能和稳定性考验。 一个完备的集群管理系统除了保证集群稳定性和运维效率外,还应该提升集群整体资源利用率。...A4:Node 监控分为硬件、系统、组件,硬件监控数据来自 IDC,系统监控使用内部自研监控平台,组件(kubelet/pouch 等)监控我们扩展 NPD,提供 exporter 暴露接口给监控系统采集...A9:一个集群可以管理万节点,所以元集群理论上可以管理 3K+ 业务集群。 Q10:节点如果遇到系统内核、Docker、K8s 异常,如何从软件层面最大化保证系统正常?

7.4K10

10 年稳定支撑 11 ,国产数据库之光 OceanBase

这场阿里专为开发者打造的数据库交流学习的机会,怎么能少了我呢?于是西红柿也趁周末时间去”补课“了,一到现场可谓满满都是”压迫感“!没想到大家周末都这么有激情呀(见图一,千人会场座无虚席)。...OceanBase CTO 杨传辉在大会现场说,“OceanBase 将持续降低开发者使用门槛,全面提升 OceanBase 的易用性,打造真正对开发者友好的数据库,建设开放的技术生态,让国产数据库走向田间地头...简单来说,就是牛,非常牛, 11 知道吧?...OceanBase 已连续 10 年稳定支撑 11,创新推出“三地五中心”城市级容灾新标准,在被誉为“数据库世界杯”的 TPC-C 和 TPC-H 测试上都刷新了世界纪录。

3.2K50

国产金融分布式数据库金融核心场景的探索与实践

作者 | 贾瓅园 金融行业作为国民经济的命脉和枢纽,对数据库有着极为严苛的要求。近年来,国产金融分布式数据库迈上了发展的快车道,在多个领域不断取得新突破。...今天为大家带来腾讯云金融行业架构专家贾瓅园老师在金融架构方面的分享,主题为“国产金融分布式数据库金融核心场景的探索实践”。...3 金融分布式数据库架构探索 根据上述分析与要求,结合分布式数据库金融领域的挑战与痛点,我们在金融分布式架构体系方面进行了探索。...完善金融整体解决方案,我们必须要在满足金融监管要求的同时,满足金融客户各类建设特点,以抽象思路和通用化的设计回归到统一的数据库产品。 深入金融业务场景探索。 打磨高可用和稳定性。...创新金融 DB SaaS 服务。以前述提及的数据迁移体系、运维模式、建设模式为例,它能否对未来的金融厂商、客户提供专业的数据库金融场景服务,这些都需要我们不断地去创新和探索。

1.3K30

钉钉的开工利是,会成为企业市场的11吗?

开工利是会成企业市场的11 2009年,天猫前身的淘宝在单身节这一天决定来一场促销,规则很简单就是打五折,此后这个活动成长为一个庞然大物,11不再只是天猫的促销节,而是整个零售业的促销节。...比交易额本身更重要的是,11直接推动了电商在中国的普及和配套的技术、物流、金融等等服务的成熟。...长期来看,钉钉开工利是这个活动,对于行业的价值有望像11一样:一是促进更多中小企业应用移动智能办公应用,人财物事上钉钉,提高效率;二是促进企业服务市场的生态繁荣,就像11对物流、金融、技术的推进一样...正是因为此,钉钉开工利是活动今年的规模做到多少,我认为并不重要,重要的是钉钉占据了最有利的时间点,向客户和行业传达了要将开工日变为企业服务届的“11”的态度。...,同样是借鉴了天猫11的造节玩法。

18.1K40

金融分布式数据库架构设计要点

行业背景 银行业从最初的手工记账到会计电算化,到金融电子化,再到现在的金融科技,可以看到金融与科技的结合越来越紧密,人工智能、大数据、物联网、区块链等新兴技术改变了金融的交易方式,为金融行业的创新前行提供了源源不断的动力...同时互联网金融的兴起是一把双刃剑,带来了机遇的同时也带来了挑战。普惠金融使得金融的门槛降低,更多的普通大众参与到金融活动中,这让金融信息系统承受了越来越大的压力。...随着数据库瓶颈的凸显,进行分布式改造迫在眉睫。 数据库分布式改造的途径 数据库进行分布式改造主要有三种途径:分布式访问客户端、分布式访问中间件、分布式数据库。...分布式数据库总体架构 其实当前市面上的分布式数据库总体架构都是类似的,由必不可缺的三个组件组成:接入节点、数据节点、全局事务管理器。...分布式数据库如何实现PITR 数据库的PITR一般都是通过一个基础备份加上持续不间断的wal归档来做到的,这个基础备份可以是在线的,因为它并不需要数据库当时处于一致性状态,一致性可以通过replay redo

2.2K61

Kube-OVN:大型银行技术团队推荐金融云原生网络方案

近日,由TWT社区主办的2021容器云职业技能大赛团队赛的冠军作品:《适用于大中型银行的云原生技术体系建设方案》中,Kube-OVN成为银行技术团队推荐金融云原生网络最佳实践。...本文部分节选自获奖作品中的网络方案叙述,从打造金融容器云基建的出发点,为广大金融技术团队提供网络部分改造的路径参考。...兴业数金 系统运维工程师、林鑫 兴业数金 容器云工程师、王嵩阳 兴业银行 质量中心工程 转载来源:本文部分节选自“twt企业IT社区”公众号《适用于大中型银行的云原生技术体系建设方案》 大中型银行需要打造金融容器云基建...总结 作为一款金融云原生网络方案,Kube-OVN以成熟的OVS用作容器网络底座,通过将OpenStack领域成熟的网络功能平移到Kubernetes,融合了安全强化、智能运维、硬件加速等多方面的特性...在性能层面,Kube-OVN也具备金融优异表现。通过Kube-OVN调优,可以实现和现有容器网络有同等流量性能。

1.1K30

迎接11,深度剖析高并发数据库Sharding的道与术

迎接11,高并发数据库设计,文末有福利~~ 01、为什么讨论分库分表之道?...02、为什么需要数据库分库分表? 如何描述分库分表呢?可以这样定义分库分表,当业务的增长导致数据库瓶颈的时候,一种解决瓶颈的手段。 单机数据库很容易出瓶颈,包含性能、容量等。一方面是存在放大效应。...03、数据库分库分表的本质到底是什么? 我们回顾数据库发展的历史,数据库是怎么发展起来的?它在先解决什么问题?为什么现在会有瓶颈的问题? 计算机的本质是满足可计算性的快速计算。...1968年,IBM做出了第一现代意义上的数据库系统DBMS,除了没有SQL的支持,但是基本上已经是完善的现代数据库了,拥有现代数据库应有的存储、检索、状态一致等功能。 ?...1970年后关系型数据库兴起,那时候搞关系型数据库的公司,就像现在专门做NewSQL的数据库那么的酷。Oracle 是关系型数据库最终的胜利者。

2.8K40

2018-11-05 如何在「不可靠」硬件上实现金融高可用?

序言 就像在“传统关系数据库高可用的缺失”一文中所看到的,高可用在传统关系数据库的理论和实践上都是缺失的,这使得传统数据库无法做到主库备库完全一致,为了减少主库故障对业务的影响不得不使用昂贵的高可靠硬件...,缺乏高可用还导致了分布式OLTP数据库缺失、无法水平伸缩从而使得高并发业务不得不采用更加昂贵的大型服务器等。...作为分布式关系数据库,OceanBase必须解决这个问题。那么,采用普通PC服务器的OceanBase是如何做到高可用的呢?...OceanBase的做法是: 数据库的每个数据分片都有三个(或以上)的库,其中一个是主库,其余是备库,每台服务器上通常既有主库(一部分数据分片)也有备库(另一部分数据分片),而传统数据库整个库要么是主库要么是备库...这与银行采用的传统数据库的两地三中心的“主库(主机房)+同城热备库(同城热备机房)+异地灾备库(异地灾备机房)”有所不同,这种方式下通常只有主机房的服务器是处于工作状态的。

65820

2022 深圳国际金融科技大赛(FinTechathon)正式启航:打造世界顶尖赛事,全面推动金融科技创新!| Q推荐

金融科技(FinTech)是金融与科技的融合产物,目前已成为全球金融行业创新和竞争的制高点与主战场。业界一致认为,金融科技将在未来数年迎来战略发展机遇期,行业可能出现颠覆的科技创新改变金融生态。...为此,深圳市地方金融监督管理局在今年发布的《深圳市扶持金融科技发展若干措施》中明确表示,"从 2022 年起,深圳市人民政府将每年举办金融科技节,期间将举办金融科技大赛、金融科技论坛和金融科技展。"...这是一场面向金融科技前沿领域,专为学生团队打造的世界竞赛。...基于深圳市当下完整良好的金融科技生态,大赛倾力打造人工智能、区块链、金融产品经理三大赛道,多维挖掘高校学生的优秀金融科技创新成果,启思高校学生输出贴近金融科技企业需求的技术及产品解决方案。...值得一提的是,为贯彻落实深圳市金融科技节指导方针、营造深圳市良好的金融科技生态环境,在大赛决赛及颁奖环节还将举办“金融科技高校论坛”活动,特邀各位专家将围绕“金融科技”展开深度话题分享、圆桌对话,为金融科技领域的发展提供方法论与新思路

32810

亿客户和PB级数据规模的金融数据库实战历程

当时,腾讯有一款金融的分布式数据库产品TDSQL,其业务场景和对数据库的可靠性要求,和银行场景非常类似。...微众银行和腾讯TDSQL团队合作,共同将TDSQL打造为适合银行核心场景使用的金融分布式数据库产品,并将TDSQL用于微众银行的核心系统数据库。本文是对整个实践历程的总结。...从过往经验来看,当时除了oracle等少数传统的商业数据库,能满足金融银行场景的数据库产品并不多。...1.TDSQL架构介绍 TDSQL是基于MySQL/Mariadb社区版本打造的一款金融分布式数据库集群方案。...微众银行通过实践证明,TDSQL作为金融的核心数据库,是完全胜任的。

2.1K20

分布式数据库金融核心场景的落地实践 | Q推荐

金融行业作为国民经济的命脉和枢纽,对底层数据库的能力要求在不断提高。具有高性能、可扩展、高可用等特性的分布式数据库金融行业数字化转型的重要支撑。...2 《金融分布式数据库探索架构》 贾瓅园,腾讯云数据库行业架构专家 分布式数据库是基于业务与技术的需求和发展以及监管要求下,解决当下以及未来趋势发展等问题,更优更稳定地满足金融银行业发展的选择。...面对此背景和发展的时代,我们首先要满足高可用及中心以上容灾,这是银行或金融业对技术架构最基本的要求,在此基础之上要满足交易高频高效、低延迟的金融场景处理要求,再衍生到高吞吐能力。...基于多年的行业架构经验,贾瓅园从金融数据库实施角度出发,重点介绍了工作评估中的几个重要维度供参考。在实际应用过程中,应结合自身业务特点来评估维度的优先。...结合银行业的特点,孙亮为大家分享了几点在金融应用中常见诉求。金融行业的应用软件最高优先关注点就是稳定性,孙亮认为很多不太优雅甚至是不太合理的基础转型,其实都是考虑到优先稳定性的要求。

39120

淘宝11,亿流量高并发是怎么抗住的?看完这篇你就明白了!

转载自:https://segmentfault.com/a/1190000018626163 前言 本文以设计淘宝网的后台架构为例,介绍从一百个并发到千万并发情况下服务端的架构的演进过程,同时列举出每个演进阶段会遇到的相关技术...通过缓存能把绝大多数请求在读写数据库前拦截掉,大大降低数据库压力。...数据库设计到这种结构时,已经可以称为分布式数据库 但这只是一个逻辑的数据库整体,数据库里不同的组成部分是由不同的组件单独来实现的 如分库分表的管理和请求分发,由Mycat实现,SQL的解析由单机的数据库实现...架构瓶颈:由于LVS也是单机的,随着并发数增长到几十万时,LVS服务器最终会达到瓶颈,此时用户数达到千万甚至上亿别,用户分布在不同的地区,与服务器机房距离不同,导致了访问的延迟会明显不同。...此方式能实现机房间的负载均衡 至此,系统可做到机房级别的水平扩展,千万到亿的并发量都可通过增加机房来解决,系统入口处的请求并发量不再是问题。

1.8K21

腾讯分布式数据库TDSQL金融能力的架构原理解读

hrd7lij4yf.jpg] 第一章,产品简介以及适用场景 第二章,TDSQL架构分析及模块介绍 第三章,数据一致性保障 第四章,分布式TDSQL实践 第五章,数据同步与备份 一、TDSQL是什么:腾讯如何打造一款金融分布式数据库...我们开始把这个高可用的数据库产品化。到2012年,TDSQL的雏形就已经出来了,作为一款内部产品,开始在公司内部提供金融的数据强一致性、可靠性服务。...在金融场景,你没有办法去估量——假如错一条数据,到底这条数据是1分钱还是1个亿,所以数据强一致是我们最根本的一个特性。不允许丢,不允许错,这是对数据库起码的要求。 第二是金融高可用。...第五点是企业安全。金融数据是敏感的,一些敏感的金融数据需要在当前数据基础上再做一层更高级别的企业安全防护,比如数据库防火墙,以及透明加密,等等。...三、TDSQL金融特性之:数据强一致性保障 前面我们了解了TDSQL的整体架构和核心特性。接下来我们要重点聊一聊它最重要的特性——作为金融场景下不可或缺的数据强一致性的保障。

6K43

腾讯TDSQL:带你认识真正的金融自主可控分布式数据库

实际上,腾讯推出的 TDSQL(TencentDistributed SQL) 金融分布式数据库,在对内支撑微信红包业务的同时,对外也正在为中国金融行业技术自主可控分布式数据库解决方案 作为国内首家互联网银行...目前 TDSQL 已正式通过腾讯金融云对外输出金融分布式数据库产品服务,除了微众银行,腾讯分布式数据库 TDSQL 还支撑着华通银行、华夏银行、潍坊银行、内蒙金谷农商银行、北京人寿、爱心人寿等众多银行和保险公司的互联网核心生产系统...由于 MySQL 的半同步和 Galera 模式不仅对性能的损耗是非常大的,而且数据同步有大量毛刺,这给金融业务同城中心或两地三中心架构容灾架构带来了极大的挑战。 为什么会这样呢?...而在容灾能力方面,TDSQL 可以支持: 同城数据强一致下的活:当前腾讯公有云和金融云有大量的客户都选择了类似方案。...,分析语法树中表的连接方式和连接字段,然后遍历语法树中的过滤,排序等关键字段,再次分析各字段的区分度,对于区分度较高的字段会提供推荐优化方案,综合字段区分度,过滤规则,表连接顺序等多个因素推提供优化建议

4.1K30

推荐一个基于C++11的高性能运营流媒体服务框架

推荐一个比较好用的流媒体服务开源代码: ZLMediaKit: 实现RTSP/RTMP/HLS/HTTP协议的轻量级流媒体框架,支持大并发连接请求 https://gitee.com/xiahcu/ZLMediaKit...logo 一个基于C++11的高性能运营流媒体服务框架 [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-qGMRzHOl-1588662590011)(https://travis-ci.org...branch=master)] 项目特点 基于C++11开发,避免使用裸指针,代码稳定可靠;同时跨平台移植简单方便,代码清晰简洁。...商用流媒体服务器。 网络编程二次开发SDK。 功能清单 RTSP RTSP 服务器,支持RTMP/MP4转RTSP。...Y/NRTSP PlayerYRTSP PusherYRTMP PlayerYRTMP PusherYHTTP[S]YWebSocket[S]Y 后续任务 完善支持H265 编译要求 编译器支持C++11

2.8K10

金融科技&大数据产品推荐:BeyondContainer——基于Docker的企业应用智能化管理系统

—数据驱动金融商业裂变”大型主题策划活动第一部分的文章/案例/产品征集部分;感谢 BoCloud博云 的产品投递 1、产品名称 BeyondContainer容器云平台解决方案 2、所属分类 金融科技•...平台已经在金融、能源等行业得到了广泛应用,帮助企业实现基于容器的应用持续集成和快速部署、秒弹性伸缩、业务可用性保障等关键特性,帮助企业搭建基于容器的PaaS平台,以应对互联网时代业务快速发展的需要。...8、市场价值 加快金融机构产品上线周期,大大减少金融机构在IT产品上的投入成本,帮助金融机构快速实现互联网化转型。.../www.bocloud.com.cn/product_container.html 10、所属企业 苏州博纳讯动软件有限公司 - 企业介绍 - BoCloud博云(苏州博纳讯动软件有限公司),为企业客户提供专业的云计算服务...公司自主研发的多项软件产品,包括私有云产品BeyondSphere、企业容器管理平台BeyondContainer、数据中心自动化运维产品BeyondBSM等,已在金融、电力、政务、IDC等行业领域的生产系统中落地实施

1.7K40
领券