首页
学习
活动
专区
工具
TVP
发布
您找到你想要的搜索结果了吗?
是的
没有找到

RocketMQ集群CPU毛刺问题复盘【实战笔记】

二、集群情况 RocketMQ版本使用4.5.2,4主4从模式 集群tps在8000左右 单节点配置32C/128G/1.7T 其中2从部署在阿里云ECS上,即一个集群6台ECS 内核版本:Linux...failure. order:0, mode:0x20 2020-03-16T17:56:07.505719+08:00 VECS0xxxx kernel: Pid: 12845, comm: java Not tainted...blocked for more than 120 seconds. 1657 2020-04-01T17:19:52.464266+08:00 VECS0xxx kernel: Not tainted...杜恒大佬有提Linux内核2.6的操作系统有bug会导致类似情况。回想一下原东家的RocketMQ集群运行以来从未出现过如此诡异现象,虽让好友将内核版本发与我,内核版本为3.10。...Linux version 3.10.0-1062.4.1.el7.x86_64 (mockbuild@kbuilder.bsys.centos.org) (gcc version 4.8.5 20150623

1.2K10

记录一次java应用突然挂掉的问题定位

问题背景:一次启动本地应用,两分钟过后自动退出,通过日志并未发现任何异常状况,莫名其妙的应用就自动被杀掉了; 1、linux通过top查看java应用内存和cpu都不高,只是过一会突然就没了; 2、通过应用日志并未查到有任何异样...73a35980233979bb67f20700c76d77805de6ced7cfd18de836238a7bdae7c1dd mems_allowed=0 [16949523.942918] CPU: 4 PID: 310033 Comm: java Tainted...Killed process 182650 (java) total-vm:16705124kB, anon-rss:2079844kB, file-rss:22020kB 以上信息可以看到内存溢出被linux...flags 发现java应用的启动预申请内存达到了10G; 5、通过free或者vmstat查看剩余内存大小只有10G了,内核检测到系统内存不足、挑选并杀掉某个进程的过程可以参考内核源代码 linux

98430

记录一次应用被突然kill掉的问题定位经历

问题背景:一次启动本地应用,两分钟过后自动退出,通过日志并未发现任何异常状况,莫名其妙的应用就自动被杀掉了; 解决思路: 1、linux通过top查看java应用内存和cpu都不高,只是过一会突然就没了...73a35980233979bb67f20700c76d77805de6ced7cfd18de836238a7bdae7c1dd mems_allowed=0 [16949523.942918] CPU: 4 PID: 310033 Comm: java Tainted...Killed process 182650 (java) total-vm:16705124kB, anon-rss:2079844kB, file-rss:22020kB 以上信息可以看到内存溢出被linux...发现java应用的启动预申请内存达到了10G; image.png 5、通过free或者vmstat查看剩余内存大小只有10G了,内核检测到系统内存不足、挑选并杀掉某个进程的过程可以参考内核源代码 linux...points 越小越不容易被杀) 7、oom_score_adj设置值范围-1000 到 1000范围区间,设置举例:当某一个应用内存申请占用1G时,设置oom_score_adj=-500时,实际linux

2.2K70
领券