首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

系列(十一)——数据热能力建设【进阶篇】

业务数据备份采用热方式,容指标RPO接近“零”;但是RTO指标还是依赖于业务部署测试自动化能力。业务会进一步需要,在数据热技术架构下,在成本可控的情况下,是否能进一步提升RTO指标呢?...方案背景数据热,相对于数据冷,通过数据实时同步,对于RPO指标有了质的提升,达到了业务活的标准。但是业务恢复指标RTO没质的提升,主要是业务部署验证需要花费时间过于依赖企业运维自动化能力。...2.核心技术在IDC年代,资源扩容流程繁琐,而且周期长;在区域,按照1:1资源来部署业务,导致成本翻倍。...mysql采用数据同步方式做实时备份,这里未采用数据库自带实例,主要是由于实例为只读,不方便平时做容演练切换。...业务恢复业务恢复成本较低,如果以下两个方面做的充分:1.区日常业务验证能力,对于业务全面测试验证上线能力要求较高。2.容演练能力建设,增加平时运维成本以及自动化工具开发功能。

4.9K94

实战分享:activemq 在活建设中的研究

由于 activemq 承担着消息服务的重要角色,在这篇文章中我们重点讲述在活建设中 activemq 设计、规划、部署。...随着各个行业对 IT 建设的重视,越来越多的企业、单位正在筹备、实施 IT 建设。由于早期的建设并没有充分考虑多数据中心下容方案,势必在新的多数据中心环境需要做一番整体架构的调整、重建。...本文是对目前业界流行的消费服务产品 active 在活建设的一些探讨,希望起到抛砖引玉的效果。...目标 活建设最完美的架构设计:在同城、异地 2 个数据中心,在最极端情况下,例如单数据中心垮掉情况下,保证消息零丢失,支持 7*24 服务要求。...演讲议题涵盖 Oracle 18c 的新特性解析和 DBA 的未来、 Oracle 数据库故障诊断、金融行业 PaaS 云数据库平台解决方案等。欢迎各位数据库爱好者报名参与! ?

1.7K10
您找到你想要的搜索结果了吗?
是的
没有找到

蚂蚁金服11.11:支付宝和蚂蚁花呗的技术架构及实践

能够提供支持异地伸缩的能力,提供N+1的方案,提供整体性的故障恢复体系。...整个系统的水平可伸缩性大大提高,不再依赖同城IDC; 可以实现N+1的异地策略,大大缩减灾成本,同时确保设施真实可用; 整个系统已无单点存在,大大提升了整体的高可用性;同城和异地部署的多个单元可用作互的容设施...分布式数据架构 支付宝在2015年十一当天的高峰期间处理支付峰值8.59万笔/秒,已经是国际第一大系统支付。...在可用性方面,与金融云账务体系深度结合,借用账务系统的failover能力,使得蚂蚁花呗通过低成本改造就具备了同城、异地等高可用能力。...任何一个单元的数据库出了问题、能够快速进行容切换、不会影响这个单元的用户进行蚂蚁花呗支付。

4.2K60

VMware的活----我在vForum 2015分会场的分享(1)

本次VMware vForum大会(北京站和上海站),有幸和同事Alex You一起分享了《如何基于虚拟化构建活数据中心》课题。我主要负责介绍了VMware活方案。...很多同学表示出来了较大的兴趣,因此写出来共享给大家,由于内容较多,本次先发布部分内容。 一. 谈到,首先谈到灾害。在过去几年中,全球各国经历过许多大范围的灾难,如海啸,地震等。...当一个站点发生故障时,SRM会自动将故障站点的虚拟机在站点重启,实现切换。虚拟机切切换到站点,IP地址可以不变或者改变,站点切换时还可以定义虚拟机切换的优先级。...6.切换开始,过一会,虚拟会在站点重启。 ?...接下来请欣赏-VMware的活----我在vForum 2015分会场的分享(2)--活篇。

2.6K70

通过双十一等项目实践看架构技术

每年“ 11”都是一场电商盛会,消费者狂欢日。今年 11 的意义尤为重大,它已经发展成为全世界电商和消费者都参与进来的盛宴。...能够提供支持异地伸缩的能力,提供 N+1 的方案,提供整体性的故障恢复体系。...整个系统的水平可伸缩性大大提高,不再依赖同城 IDC; 可以实现 N+1 的异地策略,大大缩减灾成本,同时确保设施真实可用; 整个系统已无单点存在,大大提升了整体的高可用性;同城和异地部署的多个单元可用作互的容设施...在可用性方面,与金融云账务体系深度结合,借用账务系统的 failover 能力,使得蚂蚁花呗通过低成本改造就具备了同城、异地等高可用能力。...任何一个单元的数据库出了问题、能够快速进行容切换、不会影响这个单元的用户进行蚂蚁花呗支付。

2K30

活数据中心概念及优缺点介绍

首先我们要知道活就是Active-Active,故名思义就是两边都是活动在线提供服务的,是相对于传统的主模式Active-Standby模式的。...而一个中心的模式,如果生产数据中心瘫痪,需要半个小时、甚至两个小时、甚至更长时间才能启动中心,在启动中心的时间里,用户交易会严重受损。 活数据中心的最大优势是有效利用资源。...故银行系统容量规划时是充分考虑到交易峰值的,但这样在正常时间就有很大的交易浪费,以淘宝“双十一活动为例,交易量在几分钟内就可能达到全年交易量的总和,需要系统服务能力提高十倍,这时活数据中心和灵活快速的资源调度就充分发挥出了作用...活数据中心的建设三个条件 活数据中心的建设首先要满足三个条件,第一个是应用活,也就是说数据库一定要实现活,第二个是网络要活,业务网络要保证能够同时联通两个数据中心,第三个是数据要活,两边的数据要能够实现被独立使用...5.性价比并不会太高 我们经常会听到活容方案可以让生产中心和容中心都“活”起来,有效的利用资源,面临灾难性事件时,最大化业务系统的在线性,解除原有系统有等等的不足之处。

2.2K50

VMware的活----我在vForum 2015分会场的分享(2)

上一篇《VMware的活----我在vForum 2015分会场的分享(1)》介绍了VMware技术SRM,作为姊妹篇,本次将介绍VMware活技术。...心跳机制 vSAN延伸集群实施完毕后,vSAN会从主站点和站点分别选出两个ESXi,做站点间心跳通讯检测。...如果站整体出现故障,Master会从主站点选一个ESXi作为心跳的backup。 如果Master和仲裁站点5秒钟没有心跳,那么仲裁站点将被认为出现故障。...同城两个数据中心,异地作为中心通常在远端城市。同城之间,利用vSAN延伸集群提供数据同步复制,异地之间,利用VR提供数据的异步复制。...如果同城两个数据中心均出现故障,那么SRM将会让这些虚拟机在异地站点重启。

3.4K90

房产众筹成2014年十一最经典跨界活动

11月11日正在成为中国人的购物狂欢节,朋友圈在这几天呈现出井喷的态势,关于双十一的内容让人看不过来。...获得低价买房抽奖资格 几天前朋友圈便出现了关于“京东众筹1.1折买房子”的海报,10号活动内容揭晓:京东众筹联手远洋地产开展众筹活动,参与者在双十一当天可以支持11元(非京东金融用户)或者1111元(京东金融用户...超越金融和众筹本身的跨界互联网金融 毫无疑问,在预热之后趁着双十一的东风,这一次活动可以获得大量的支持。传统众筹商业模式主要是手续费,但京东金融志不在此,因为这次的众筹资金最终都会返还。...,显而易见,这次双十一跨界活动正是奔着“门槛低、新奇好玩、生活品质和参与感”这些目标去的。...互联网金融本身就是跨界产物,这一次搭上双十一快车,与过去相隔万里的房地产结合在一起,更是超级跨界。京东众筹与远洋地产联合的双十一众筹买房活动,算得上一次经典的跨界营销,算得上今年双十一黑马案例。

7K50

11在即,分享一些稳定性保障技术干货

; 90%库存放缓存应对高并发; 10%库存放数据库应对超卖; 3、数据库稳定性保障的SOP 数据库的可用性底线:99.99%; 故障需要有严格的定义规则; 数据库稳定性三板斧: 1)扩容:DB是有状态服务...,计算层便于扩容,将DB节点放到容器中,有需要扩容; 2):对于大流量读场景可通过流量切换方式,将部分流量迁移到备份集群分流; 3)巡检:慢SQL是常见的问题,可通过自动监控和历史数据分析,提供辅助式决策...; 线上监控告警及容预案 1、如何做好监控告警?...数据库层也需要做好监控; 比较好的实践是双机热,在数据同步方面需要有专门的保障机制; 5、高并发下,MySQL主同步会有较大延迟,该如何处理?...,快启快关) ; 同城活架构下,可通过定时任务的方式自动检测MySQL的0模式,定时改写数据; 高并发下MySQL主库往往写压力比较大,事务日志和binlog IO比较频繁,导致库拉取binlog

2.7K20

为健康和生命助力,数据库也有温度

同时,金融保险的行业属性使得水滴公司对数据容也有高要求,这对底层数据库的服务能力提出了巨大挑战。...借助于云数据库灵活的弹性扩展能力,水滴在春节活动结束后快速降配缩容,在满足业务实际需求的同时节省了大量成本。 在腾讯云数据库的支持下,水滴公司打了一场漂亮的春节红包仗。...1 Part Ⅱ 抗突发,我们时刻准备着 金融保险行业中,一个字符可能就代表数千万甚至上亿元的资产,当因数据中心硬件、网络、电力故障或不可抗灾难如地震、洪水等因素造成业务不可用情况时,同城中心就尤为重要...腾讯云MySQL数据库默认采用主架构,两个实例位于同一数据中心的不同服务器,当主实例不可用时,系统会自动将数据库连接切换至实例,在设置同城及异地中心的情况下,用户可将同城或异地中心切换为新的数据中心...同时,腾讯云数据库服务使用腾讯云内部带宽,不占用水滴公司的业务带宽,从而大幅节省了容建设的人力和资源成本,在保证业务高可用的前提下,实现效益最大化。

1.2K20

【DB笔试面试507】基于数据库的数据复制技术构建方案有哪些?

题目部分 基于数据库的数据复制技术构建方案有哪些? 答案部分 基于数据库的数据复制技术大体上可分为两类:数据库自己提供的数据容模块和第三方厂商提供的数据库复制技术。...这些系统无须具有一样的属性或相同的操作系统,数据库数据库版本。 Ø 数据一致性:备份数据库支持读一致性的查询活动(交易的一致性在任何时候都受到保护)。...所有复制对象结构(DDL)的改变,都必须通过Oracle提供的复制包来实施 基于日志挖掘 主要用途 恢复、高可用性 数据共享 数据同步 高可用与容、实时数据集成 实现简易程度 实现过程和管理简单...经过对以上几种数据库复制技术的分析,DataGuard、Stream、Advenced Replication是专为Oracle数据库开发的模块,适合于同构平台的Oracle数据库;Shareplex...适合于异构平台的Oracle数据库;GoldenGate适合于异构平台和异构数据库的容与应急备份,消除计划内停机、业务中心、数据仓库实时供给、实时报表等应用场景需求。

1.4K20

天翼云TeleDB数据库如何实现容活?

数据库作为企业数据的管理软件,是企业的核心资产,需要避免单点灾难,因此数据库需求应运而生。 但数据库想要实现绝对可靠的并不是一件容易的事。...随着越来越多的企业上云,如何做好云数据库,确保云上数据安全、保障云上业务不中断,这些问题对数据库技术提出了更高的要求。 此外,不同行业用户对于数据库的需求也不尽相同。...那么,在云时代,数据库方案应如何满足不同用户的需求?数据库的技术理念有着怎样的技术更新和迭代?...但如何达到国内外建设标准,其实是门值得深入钻研的必修课。 作为承载中国电信核心系统业务的天翼云TeleDB数据库,在提供容活能力方面有着出色的表现。...一方面,天翼云借鉴国际国内标准,进一步细化指标,添加库级读写分离、表级读、行级读等能力,让数据库标准更加优化,有法可依。

2.8K10

这可不是双十一防剁手秘籍!

双十都来了,双十一还会远吗?北方,特别是京津冀的剁手党们,赶紧多赚钱吧!剁手夏已发现谁盯上你的钱包了,看完这篇剁不剁手就看你自己了! 双十一出大招 恩恩,最近,阿里搞了个大新闻。...数据中心预计将在今年“11”活动中发挥极为重要的作用,为包括京津冀在内的北方用户提供更快的服务,双十一再也不用看着系统崩溃付款失败看好的东西被别人抢走了!...毕竟人家都说了,这个数据中心要在双十一中发挥巨大作用。阿里真正的目的是要掠夺北方人民的钱包。 按照2015年十一数据,成交额按区域划分,前五名为广东,浙江,江苏,上海,北京。...而2014年十一,广东、浙江、江苏、上海、山东。南方的城市同样占了四个,京津冀都没有城市上榜。...以云计算产业园为带动,建设一批公共服务和互联网应用平台、重点行业和企业云计算数据中心和中心。

5K20

微服务高可用容架构设计

两地三中心 两地三中心建立在同城活+异地的基础上,兼具高可用性和灾难备份的能力,其中异地中心 是指在异地的城市建立一个备份的中心,用于中心的数据备份,当中心出现自然灾害等原因而发生故障时...整体架构是同城活+主的组合方案。 部署方案: 微服务管控层:同城活部署,异地,各自的数据不需要做同步,只负责各自的服务管控。...应用层:不同数据分片的应用异地多活,相同数据分片的应用同城活,异地数据库层:数据分片一主多从,不同分片异地互。...部署单元设计:考虑容设计,单元与数据库分片绑定,同城单元活,异地部署单元。...应用层:每个地域包含全量单元分片,不同数据分片的应用异地多活,相同数据分片的应用同城活,异地数据库层:数据分片一主多从,不同分片异地互

54470

“两地三中心”和“活”简介--容技术方案

与异地模式相比较,本地中心具有投资成本低、建设速度快、运维管理相对简单、可靠性更高等优点;异地中心是指在异地建立一个备份的中心,用于中心的数据备份,当中心出现自然灾害等原因而发生故障时...异地中心 是指在异地的城市建立一个备份的中心,用于中心的数据备份,当中心出现自然灾害等原因而发生故障时,异地中心可以用备份数据进行业务的恢复。...( 生产中心、同城中心、异地 中心 ) 4、 活 数据中心 所谓 “ 活 ” 或 “ 多 活 ” 数据中心,区别于 传统 数据中心 和 中心的模式,前者 多个 或两个数据中心都处于运行当中...异地中心是指在异地的城市建立一个备份的中心,用于中心的数据备份,当中心出现自然灾害等原因而发生故障时,异地中心可以用备份数据进行业务的恢复。 1.3.4....这些系统无须具有一样的属性或相同的操作系统,数据库数据库版本。 数据一致性 – 备份数据库支持读一致性的查询活动 ( 交易的一致性在任何时候都受到保护 ) 。

10.2K126

云上容架构设计与方案

活架构一般是发生是两个数据中心相邻距离不远的场景。如果对于金融级的客户,还会考虑异地的。则采用以下的架构。保障活的公有云中断时,异地的私有云还能够在一定的时间内接管业务。 ?...五、数据级的容方案 对于以上的方案,投入的代价较大,例如需要支付活数据中心的高速通道费用、相同配置的云主机费用。...2、例如下图,也可以通过纯软件的方式进行,直接将备份的文件放下云端、或线下私有云。 ? 这两种方式本质上都是文件级的方案,因此对于数据库等高可靠性的业务支撑不如日志级的数据同步方案。...建议将的周期可以设置为一小时及以上,以保障数据库的运行稳定安全。同时为避免数据库在异常情况下无法恢复,建议使用原厂的工具进行数据实时日志级同步,如Oracle DG、Mysql的主从脚本等。...六、小结 1、如果中型企业、资金预算较充足,可以选择AZ方案、或线上+线下的活高可用方案。 2、对于金融级客户,可以选择两地三中心的方案。 3、对于普通企业客户,可以选择数据级的方案。

4.9K10

高级软件工程师(面试题)

在不能使用数据库的事务处理以及锁(表锁/行级锁)时,怎么保持数据一致性?怎么解决数据库并发操作? 怎样解决避免多个用户读读取同一条数据记录?...分表,分库有需要主要那些事项 分表,分库后怎么解决夸库查询 分表,分库后怎么创建索引 数据库复制问题 数据库复制有哪几种?...目前正在做推广促销活动,系统访问量大不能中断现有服务,哪怕30都会给公司带来不可挽回的损失。...高可用设计 什么是高可用 什么是双机热,双机热备有那些缺陷 什么是活 请简述实现软件高可用要考虑那些因素 软件设计中的问题 请简述设计一个远程异地系统 两个机房怎样设计系统 三个机房怎样设计系统...跨境情况需要考虑那些影响因素 软件开发问题 数据库怎样实现 缓存怎样实现 应用服务器怎样实现 Web 服务器怎样实现 计划任务、定时周期运行的程序怎样 消息队列怎样实现 活的软件怎样实现同一时刻只能一个运行

3.1K30

云化数据中心容解决方案

现阶段的云化数据中心的建设都是以主中心和两地三中心的模式为主。通常可以以主中心的模式作为基准,通过详细规划和逐步建设,向两地三中心的模式演进。...3)级别 级别主要考虑应用级容和数据级容(业务级容主要是面向非IT系统的范畴),在具体执行上,又可以分别采用活和主两种工作模式,因此,系统的级别包括: 应用主...数据主 应用活 数据主 应用活 数据活 工作模式 应用和数据仅在生产中心运行,并通过异步方式备份到中心。...图 5 数据一致性的挑战 数据库是容建设的关键,数据的一致性是实现同步需要首先考虑的问题,这需要通过在主数据中心之间建立数据的同步机制来保障。...在传统数据中心中,建设同步活级别的系统需要在生产中心和中心中配置对等的基础资源,而云化数据中心的建设则可以大大降低建设成本。

4K10

的架构分析和容选择策略

中心的架构按照源端之间的距离,可分为本地容、同城活、两地三中心。 1.1本地容 本地容一般指主机集群,当某台主机出现故障,不能正常工作时,其他的主机可以替代该主机,继续正常对外提供服务。...通常可通过共享存储或双机柜的方式实现本地容,其中多以共享存储为主。 共享存储由三部分组成:活动主节点,不活动节点,共享存储。...双机柜是一种不依赖共享存储而实现的高可用保护架构,采用主的高可用保护模式。...1.2同城活 同城活属于本地容,但根据运营模式可以分为主活两种形式: 主模式即生产中心正常对外提供服务时,同步将数据单项复制到端数据中心,且端不对外提供服务。...远端的备份机房能更大的提供能力,能更好的抵抗地震,恐袭等情况。活的机器必须部署到同城,距离更远的城市作为机房。

2.2K30

服务器解决方案–两地三中心(图文详解)

(以时间来度量),这是一个系统所选用的数据复制技术有密切关系的指标,用以衡量方案的数据冗余备份能力。...与异地模式相比较,本地中心具有投资成本低、建设速度快、运维管理相对简单、可靠性更高等优点;异地中心是指在异地建立一个备份的中心,用于中心的数据备份,当中心出现自然灾害等原因而发生故障时...,异地中心可以用备份数据进行业务的恢复。...业务以及基础组件异地活方案 数据库的异地活 Zookeeper异地活 先来点背景知识: 1、zookeeper中的server机器之间会组成leader/follower集群,1:n的关系。...基于功能分表方案 根据不同的功能拆分数据库或表,也是一种非常不错选择。 总结 方案都是有成本和风险的,也没有银弹,不可能打死所有的怪兽。还是随着业务发展,不断的演化才是王道。

13.6K103
领券