首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
您找到你想要的搜索结果了吗?
是的
没有找到

Elasticsearch集群复制(CCR)之腾讯云ES地域

集成X-Pack高级特性,适用日志分析/企业搜索/BI分析等场景 ---- 腾讯云ES目前已经提供了多可用区部署,即支持同地域机房的高可用方案,满足了绝大多数客户的需求。...但是依然会有部分客户希望进一步提升级别,能够做到地域。随着腾讯云ES双网卡功能的发布,使得地域成为可能。接下来我将介绍下腾讯云ES实现地域的详细步骤。...说明我们已经完成了地域集群的复制了。 至此,我们完成了地域复制的数据同步。...备注说明:由于是地域打通了网络,如果出现下面的Not connected状态,可能会出现网络不稳定的情况,会导致数据的复制有一定的延迟。

3.4K30

最佳实践 | 基于腾讯云ES如何地域集群复制为您解忧!

作者:吴,腾讯云大数据Elasticsearch高级开发工程师 腾讯云大数据ES目前已经提供了多可用区部署,即支持同地域机房的高可用方案,满足了绝大多数客户的需求。...但是依然会有部分客户希望进一步提升级别,能够做到地域。随着腾讯云ES双网卡功能的发布,使得地域成为可能。接下来我将介绍下腾讯云ES实现地域的详细步骤。...说明我们已经完成了地域集群的复制了。至此,我们完成了地域复制的数据同步。...备注说明:由于是地域打通了网络,如果出现下面的Not connected状态,可能会出现网络不稳定的情况,会导致数据的复制有一定的延迟。

1.2K20

KV存储IDC部署

1.背景   目前部分KV存储不支持IDC部署,所以如果有机房故障的话,就会影响KV存储的可用性。本文提供了一种通过KV存储代理层来实现IDC部署的方案。 2.实现原理 ?   ...如果主IDC出现故障,就可以把读请求通过负载均衡组件调度到备IDC,做到读操作。如果备IDC出现故障,可以通过将读请求调度到主IDC,读写都不受影响。   ...部署的。...本文提供了一个通用的解决方案,实现KV存储IDC部署。   ...当然目前还存在配置文件过多导致运维不方便,缺少友好的管理后台,写操作流水IDC同步并发量低下,不支持多地写多地读等问题,后续可以继续完善。

1.5K80

Serverless 实战:通过 Component 实现多地域部署

可支持同城多可用区备 / 备,保障高可用。...以多地域部署为例,我们可以考虑这样的架构: 同样是作为单地域解析服务,相对来说,多地域部署更加安全稳定,一旦某个地域的服务出现问题(例如 API 网关,云函数),都可以通过监控程序及时发现,并且迅速切换解析到其它地域...多地域部署的监控函数与时间触发器进行结合,定期进行网站可用性的排查,一旦出现问题,就可以在云解析层面进行解析切换,实现单地域服务的多地域部署方案: 这个方案的逻辑是先请求服务是否可用,如果不可用,则获取列表...如果不是单地域提供服务,那么就需要考虑多地域部署、多地域就近接入以及多地域方案。...底层服务的机制,不是云厂商要提供的么?理论上,这个机制是云厂商提供的,并且函数是无状态的,只要确保业务逻辑无问题,是不需要进行某些层级的主备等。

62120

系列(六)——数据存储建设

数据存储建设主要从数据可靠性和业务稳定性两个维度阐述。这两者有哪些区别呢?...举个例子,业务数据存储在COS,如果该地域出现地震等极端灾难,COS所在机房被外力摧毁导致业务数据全部丢失,属于数据可靠性范畴;同样如果COS机房网络出现波动或者机器出现负载,导致客户端请求数据出现延时高或者中断...CBS快照是地域粒度的,即region粒度,例如北京地域,只有出现地域极端情况,快照数据有可能丢失。...COS分布式存储系统架构多AZ架构为分层结构主要如下: image.png COS目前具备多AZ属性,如果对于核心数据,成本允许前提下,建议开启地域复制功能来进一步加固数据可靠性。...列举一下几个场景: 场景一: CBS快照地域能力建设 当前云平台CBS数据可靠性的能力在地域粒度,对于公司核心数据要求多地域备份时,需要业务通过调用云API来实现;高可用能力建设核心思路: 1.定期快照复制新

3.2K73

Ckafka 实现可用区部署案例

CKafka可用区部署 CKafka 专业版支持可用区部署,在拥有3个或3个以上可用区的地域购买 CKafka 实例时,可以任选其中两个可用区购买可用区实例。...是一个可以随时 failover 到另一个可用区的 VIP,当某个可用区不可用时,该 VIP 会自动漂移到该地域另一个可用的节点,从而实现可用区。...可用区部署优劣势 优势 可以大幅度提升集群的能力,当单个可用区出现意外的网络不稳定、断电重启等不可抗力风险时,仍能保证客户端在短时间等待重连后恢复消息的生产和消费。...目前广州、上海、北京几个主要地域可用区的时延一般10ms~40ms。...地域:选择和部署客户端的资源相近的地域。 可用区:根据实际需要选择可用区。 标准版:不支持多可用区部署。 专业版:若当前地域支持多可用区部署,则最多可选择2个可用区进行部署。

1.3K41

的架构分析和选择策略

1.传统中心的架构 半径是衡量方案所能承受的灾难影响范围的指标。不同灾难的影响范围是不同的,而距离也会影响到技术的选择。...中心的架构按照源备端之间的距离,可分为本地、同城双活、两地三中心。 1.1本地 本地一般指主机集群,当某台主机出现故障,不能正常工作时,其他的主机可以替代该主机,继续正常对外提供服务。...2.级别与能力 系统按保护级别可分为:数据级、应用级、业务级。...2.3业务级 业务级是全业务的,除了必要的IT相关技术,还要求具备全部的基础设施。...4.云级别和能力 参考传统的级别划分,由于云的基础设施采用了云平台,在云的级别划分上,应用级和业务级的区别已经不大了,因此在这里将云级别分为:数据级、业务级

2.2K30

【云顾问-混沌】 AZ 混沌演练

进行 AZ(可用区)和混沌演练变得尤为重要。...什么是 AZ 以及混沌演练? AZ 它是指在一个云服务商的多个可用区之间进行业务和数据备份、恢复和迁移的能力。... AZ 混沌演练的价值 AZ 和混沌演练相结合,可以帮助企业和组织实现以下目标: 提高业务可用性:确保业务在某个可用区发生故障时能够迅速迁移到其他可用区,保证业务的高可用性和持续性。...提高应急响应能力:通过定期进行 AZ 和混沌演练,提高企业和组织的应急响应能力,确保在发生问题时能够迅速采取恢复措施。 如何快速进行 AZ 混沌演练?...借助于腾讯云混沌演练平台,可方便快捷地进行 AZ 混沌演练时,可以遵循以下步骤: 前往腾讯云混沌演练平台【概览】选择「可用区演练」行业经验模版。

15910

系列(八)——同城数据冷备建设

为了让企业能更好用好云平台的数据安全能力,本文重点云平台数据备份冷备能力,以腾讯云为例,主要从以下两个维度介绍:同城数据冷备能解决企业什么问题,达到怎么样业务效果?...数据冷备介绍1.1 数据冷备概念数据冷备,业务数据文件在同地域或者地域定时做备份。数据不是实时备份,数据恢复存在不完整性,同时业务恢复无法自动切换,需要人工介入,数据冷备的RPO和RTO为小时级。...同城冷备份方案同城数据冷备方案主要依赖于云平台能力备份能力,对现有业务架构没有任何改造,方案架构如下:图片该方案核心要点说明:数据备份:云侧数据库mysql和redis在控制台设置数据备份参数,数据备份存储在COS,具备地域级别...指标详细说明能力具备同地域(不同可用区)数据备份能力,不具备不同地域的能力。...3.演练能力建设,增加平时运维成本以及自动化工具开发功能。

6.4K113

系列(九)——异地数据冷备建设

企业业务部署在云上,借助云平台的能力,企业几乎“零”成本拥有同地域数据备份的能力。...异地数据备份挑战相对同城数据备份,异地数据冷备主要挑战是成本,主要是地域之数据传输带宽成本。...对于同城数据备份,对企业来说“零”成本,企业可以把所有数据都进行备份;而地域数据备份,需要对业务进行梳理,尤其数据量比较大的业务,来决策哪些业务需要异地数据备份。...目前云函数支持备份产品如下:图片地域复制:目前云函数只支持同地域备份,即备份数据库和cos需要同地域,因此通过存储桶的地域复制能力,将对应的备份文件复制到异地的存储桶。...2.3 数据库备份服务数据库备份服务拥有一套完整的数据备份和数据恢复解决方案,具备实时增量备份以及快速的数据恢复能力,同时具备异地能力。

8.5K164

系列(三)——云网络建设

2)同地域不同可用区网络延时多大? 以腾讯云为例,在同地域选择机房地址的时候,距离大于60公里,要求不同可用区延时小于3ms,来满足云上客户同城建设基本需求。...1.2 云网络产品 对于云上网络产品,从业务流量维度主要分为: 流量走向 对应产品 建设 南北向流量 负载均衡(CLB)、NAT网关、弹性公网IP(EIP)、anycast IP 1.同城多活,避免可用区的流量...2.负载均衡公网CLB具备已AZ能力 3.NAT网关绑定多个EIP,提升连接数 东西向流量 专线接入、对等链接、云联网、VPN、private link 1.敏感业务建议不要使vpn打通 2.混合云专线接入方案...2.网络复杂度 同城或者异地建设,网络层面因素主要有三个: 1)跨区或者地域网络延时,对上层业务影响。 网络延时,通过优化基础设施手段是非常有限的,毕竟受限于实际物理距离和光速。...2)跨区或者地域云基础设施能力。 通常云服务厂家数据中心建设均有能力,这里建议还是选择大厂。 3)IDC到云上网络高可用建设。

4.4K93

备知识总结:与备份区别、备技术、体系规划

系统在企业中给与数据安全系数相当高的保障,但是系统倒是是什么,他们是什么意思?恐怕连正在使用备份的网络管理人员都不能解释。本文用最浅显的语言给大家解释备份到底是什么。...不可少 那么建设了备份系统,是否就不需要备份系统?...不能替换备份 系统会完整地把生产系统的任何变化复制到端去,包括不想让它复制的工作,比如不小心把计费系统内的用户信息表删除了,同时端的 用户信息表也会被完整地删除。...如果是同步,那端同时就删除了;如果是异步,那端在数据异步复制的间隔内就会被删除。这时就需要从备份系统 中取出最新备份,来恢复被错误删除的信息。...备份系统+异地系统 这是一个较为理想化的系统一体化解决方案,能够在很大程度上避免各种可能的错误。 恢复等级 ? 灾难恢复层次 ? 备技术层次 ? 1.1 磁盘阵列备技术 ?

8.2K21

系列(四)——业务应用层建设

综上所述,本文从云平台视角出发阐述应用层业务建设,主要分为方案设计考虑纬度、复杂度以及云上客户案例三个方面。 1.应用概述 1.1 应用部署 应用是否满足地域/可用区部署?...应用层调用链能接受跨区延时,一般以试点业务先观察,小步迭代方式逐步构建能力。...切换强依赖于调度系统以及配置系统稳定性。这里稳定性主要包括系统能力和性能;遇到大规模故障,大量信息配置变更请求调度系统和配置系统要能扛住洪峰,是保障这个方案的根基。...2.应用复杂度 计算应用层,主要考虑以下两个方面: 哪些节点执行任务。 这里要区分清楚哪些节点执行核心业务,这里会引入不同的复杂度。...image.png 3.2 应用层业务(单个应用单个可用区承载100%) 应用层调用链应该在同一个可用区完成;不同地域之间流量仅仅做来同步数据。

3.1K72

系列(七)——混合云公网出口建设

本文结合云平台公网能力,从网络平台角度来分析建设可行性。...2.公网出口方案 2.1 IDC和云平台出口互为主备 正常情况下,IDC和云平台公网出口流量是烟囱式,互不交叉;当IDC公网出口异常,流量切换到云平台,同样云平台公网出口异常,流量切换到IDC。...整体公网出口方案如下: image.png 2.1.1 云平台切换方案。 正常情况下,业务流量通过NAT访问公网,如上路绿色线条标识。...2.1.2 IDC切换方案 正常情况下,IDC业务流量通过NAT访问公网,如上路绿色线条标识。...IDC公网出口方案 (推荐) 1.方案简单,更多依赖云平台能力 2.方案落地快捷。 3.人力成本低,不需要自建系统。 4.维护成本低,不需要后续维护系统稳定性。

2.8K124

知识知多少

为什么要做? 你知道吗?自然灾害、设备故障、人为因素等都会造成业务中断。如今数字化时代,IT系统故障更会对公司业务造成难以估量的巨大经济损失。...3 关键词 RPO(Recovery Point Objective) 数据恢复点目标,主要指的是业务系统最大能容忍的数据丢失量。...体系介绍 1 数据中心 集团公司通过两地建立三个数据中心,通过双活、冷备等方式,实现两地三中心架构。...2 体系建设 系统类型 --- 策略 核心业务系统 --- 两地三活 关键平台系统 --- 同城双活 非关键系统 --- 异地冷备 3 技术方案 异地冷备 恢复能力 RTP≤1h RPO≤5min...演习要求 每年进行演练,所有核心业务与平台系统均要参演。 异地备恢复、同城双活切换、一键式自动化启停等恢复方式不断创新,要求演习规模逐年扩大和恢复效率逐年提升。 - End - ----

1.2K20

数据中心精讲(常见的建设模式)

当前,市场上常见的模式可分为同城、异地、双活数据中心、两地三中心几种。...同城 同城是在同城或相近区域内(≤200KM)建立两个数据中心:一个为数据中心,负责日常生产运行;另一个为灾难备份中心,负责在灾难发生后的应用系统运行。...异地 异地主备中心之间的距离较远(>200KM)因此一般采用异步镜像,会有少量的数据丢失。异地灾难备份不仅可以防范火灾、建筑物破坏等可能遇到的风险隐患,还能够防范战争、地震、水灾等风险。...异地备中心是指在异地的城市建立一个备份的备中心,用于双中心的数据备份,当双中心出现自然灾害等原因而发生故障时,异地备中心可以用备份数据进行业务的恢复。...双活数据中心 所谓“双活”或“多活”数据中心,区别于传统数据中心和备中心的模式,前者多个或两个数据中心都处于运行当中,运行相同的应用,具备同样的数据,能够提供中心业务负载均衡运行能力,实现持续的应用可用性和灾难备份能力

2.2K20
领券