前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >apisix-2:etcd的cpu usage和load很高的问题解决

apisix-2:etcd的cpu usage和load很高的问题解决

作者头像
千里行走
发布2022-04-06 11:19:17
2.5K0
发布2022-04-06 11:19:17
举报
文章被收录于专栏:千里行走

目录:

(1).版本信息

(2).问题陈述

(3).其他信息

(4).解决方式

(1).版本信息

apisix version:2.8

etcd version:3.5.0

OS:aws linux ami 2

OpenResty / Nginx version:openresty/1.19.9.1

apisix-dashboard version:有两个 , 一个是2.8, 另一个是 2.9.0

(2).问题陈述

问题1:

etcd集群有3个节点,其中两台的cpu load和使用率很高,但是第三台确很低,非常困惑。

node1 and node2:high load and high cpu usage,实际会更高。

node3:load and cpu usage is low

问题2: "put /data_plane/server_info" 有非常多的 "apply request took too long" 错误,一直打。怀疑这个是etcd的load和cpu很高的原因。

这也是很简单的操作啊:

(3).其他信息

etcd cluster 是3个node:etcd cluster is ok. 这个etcd cluster 支持两个 apisix cluster(version: 2.8.0).

(4).解决方式

解决方式也很简单:

disable pulgin "server-info".

然后etcd 的cpu usage 和 load变正常了。我想这是apisix的一个bug,至少是对etcd的不当使用。

所以,会在之后的时间里进行升级到最新版本。apisix的版本升级也是一个麻烦,因为太活跃了,本身也很新,稳定性是一个大问题,而且这个组件极其重要,所以升级方式很讲究也更麻烦,一定要稳妥,后续另开。

PS:

这个问题前前后后我搞了一周才最终确认和解决,因为刚开始不信,怎么可能是这种原因,结果还就是。

提交的github issue地址:

https://github.com/apache/apisix/issues/5692

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2022-02-16,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 千里行走 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档