首页
学习
活动
专区
圈层
工具
发布
首页标签高可用

#高可用

容器没 OOM 却被驱逐:memory.available 与硬阈值

一只特立独行的兔先生

节点内存曲线还没顶满,容器也没有 OOMKilled,Pod 却已经是 Failed,status.reason 为 Evicted。这是 kubelet 的节...

11010

云硬盘挂到另一可用区:延迟绑定与 diskZone 覆盖

一只特立独行的兔先生

多可用区 TKE 上,Pod Pending 不一定是容量不够。云硬盘和待挂载的云服务器必须在同一可用区,单台云服务器最多挂 20 块弹性云硬盘。Storage...

11210

半同步提交成功仍可能丢:超时降级与状态位

一只特立独行的兔先生

备库一抖动,半同步主库上的提交会先卡住。云数据库 MySQL 的复制说明写的是暂停约 10 秒,然后把复制降为异步,客户端又开始拿到成功。这个成功不再表示备库已...

9710

CKafka acks=all 仍可能丢:ISR 下限和 unclean 选举

一只特立独行的兔先生

支付回调、订单状态这类不能丢的消息,生产端把 acks 设成 all 就当成已经落稳。CKafka 新建 Topic 时,min.insync.replicas...

10910

节点失联后副本不会马上补上:300 秒容忍与驱逐限速

一只特立独行的兔先生

一台工作节点失联后,Deployment 不会立刻在其他节点补副本。控制面要先认定节点无响应,再打上 NoExecute 污点;Pod 默认还能再留 300 秒...

9710

节点排水卡在 PDB:健康计数、取整与发布重叠

一只特立独行的兔先生

TKE 上给节点做维护,有业务 Pod 时不要直接移出:先封锁,再驱逐,确认迁走后再移出。副本数够、驱逐却不结束,通常是 PodDisruptionBudget...

14610

一次外网解析打出多次查询:TKE 上 ndots 与本地 DNS 缓存

一只特立独行的兔先生

业务调 api.example.com 变慢,应用 QPS 往往没同比例涨,CoreDNS 的查询量和 CPU 先满。Pod 的 /etc/resolv.con...

15510

HPA 不扩容先看分母:占节点、占 Request 还是占 Limit

一只特立独行的兔先生

接口已经变慢,监控上 Pod 的 CPU 使用量不低,HPA 副本数却停在最小值。伸缩策略写的是 CPU 利用率 60%。TKE 控制台里这条「利用率」有三条:...

12310

会话级连接池减不了并发连接:事务级复用的边界

一只特立独行的兔先生

短连接服务接到云数据库 MySQL 的数据库代理上之后,常见动作是把连接池打开,指望实例的 Threads_connected 掉下来。会话级连接池做不到。它留...

14010

CKafka 堆积时加消费者无效:分区上限与重均衡暂停

一只特立独行的兔先生

订单 Topic 只有 6 个分区,消费组已经扩到 20 个实例,堆积还在涨。同一个消费组里,一个分区同一时刻只分给一个消费者,多出来的实例空转。先分清是分区卡...

16410

集群内访问内网 CLB 回环:VIP 路径、短路转发与 SNAT 取舍

一只特立独行的兔先生

集群里的订单服务要调库存服务,地址配的是内网 CLB 的 VIP,和集群外调用方用的是同一个。有的 Pod 马上通,有的要等数秒,有的直接超时。换成 Servi...

14710

只读延迟剔除不是读一致性:最少保留、权重置零与写后读

一只特立独行的兔先生

只读组开了延迟剔除,订单详情仍会读到刚写进去的旧状态。云数据库 MySQL 的只读实例靠 binlog 回放追主库,剔除策略保的是组里还有实例接流量,不是这次提...

17410

TKE 直连滚动更新丢请求:权重置零、preStop 与优雅期限

一只特立独行的兔先生

滚动更新时客户端收到连接重置或 502,旧 Pod 的 STATUS 仍是 Terminating,不说明业务函数没返回。删除一开始,CLB 摘流、Endpoi...

12410

多层重试的放大效应:重试预算、退避抖动与截止时间传递

一只特立独行的兔先生

一条调用链上,网关、业务服务、数据访问层各自配了「失败重试 2 次」,单独看每一层都很合理。下游数据库抖动几十秒,监控却显示数据库收到的请求量翻了十几倍,抖动变...

15510

密码设备高可用与异地容灾的工程拆解:从双机热备的健康检查判据与密钥同步三条路径,到切换瞬间的会话句柄失效与 RTO 实测口径

安当加密-焱垚

密码设备高可用与异地容灾的工程拆解:从双机热备的健康检查判据与密钥同步三条路径,到切换瞬间的会话句柄失效与 RTO 实测口径 摘要:密码设备高可用的难点不在网...

10610

云托管容器部署踩坑实录:从冷启动超时到长请求被掐断

耀垚智能-李永才

我的项目结构是一个 monorepo:前端 + Node.js 服务端,服务端部署在云托管容器平台(按量计费、默认缩容到 0 的那类)。开发过程中我用 Work...

15810

剧院票务系统容灾备份与数据恢复的实践方案

千里达票务系统

剧院票务系统的特点是"场次固定、开场时间刚性"。一场演出的开演时间是写死的,票卖不出去损失的是一场票房,系统在开演前出故障,损失的则是全场观众的入场秩序和口碑。...

11010

高可用异地组网架构设计:双链路冗余与故障自动切换实践

用户1239466

高可用异地组网的关键,不在“拉两条线”,而在探测、判定、切换、回切、防脑裂五个机制是否可验证、可度量。很多企业已经把专线加宽带、双运营商接入铺到了每个分支,但主...

19510

什么是云数据库 MySQL,和自己装 MySQL 有什么区别-UserStory

gavin1024

摘要: 云数据库 MySQL(腾讯云 TencentDB for MySQL)是腾讯云提供的托管式 MySQL 服务,100% 兼容 MySQL 协议,把部署、...

18110
领券