侧边栏壁纸
博主头像
恪晨的小站 博主等级

行动起来,活在当下

  • 累计撰写 153 篇文章
  • 累计创建 43 个标签
  • 累计收到 29 条评论

目 录CONTENT

文章目录

记使用hertzbeat监控导致主机CPU直接被拉爆

恪晨
2025-04-29 / 0 评论 / 0 点赞 / 11 阅读 / 0 字 / 正在检测是否收录...
温馨提示:
部分素材来自网络,若不小心影响到您的利益,请联系我们删除。

前言

昨天的时候在公众号看到了hertzbeat监控,感觉里面监控指标与可监控的内容还挺多的,看着方便实用,于是就在Nas上部署了一个,用来监控Nas上的服务和服务器上的一些服务,结果今天早上来发现,主机CPU直奔100%,一晚上一直在告警;

image.png

排查

登陆到监控点去查看,发现是kdevtmpfsi这个进程一直占用较多,于是在网上一搜,哦吼,起初以为是病毒,但是因为我同时在Nas上也配置了告警,Nas的CPU占用也是异常的高,并且之前主机从来没有发生过这样的问题,所以就在想是不是因为昨天安装的监控的问题

image-v0yc.png

image-9kns.png

进程

登陆到主机查看进程,发现这两个异常进程产生的都是docker容器里面的,并且只是kill进程一直kill不了,于是去排查docker中这个容器到底是怎么回事

image-antz.png

image-dvdh.png

容器

然后就发现,原来hertzbeat安装监控的时候直接启动了一个容器,并且实用了ubuntu的镜像,然后CPU直接100%,内存也是异常的高

image-dunt.png

image-p4mf.png

image-royk.png

并且在hertzbeat中停止监控以后,这些容器还不会停止仍然在运行,并且占用CPU占用一直高,这里看到都已经88%了。

处理

找到原因以后,那就是这个监控已经不能在用了,网上也没有找到相关的资料信息怎么去处理,只能先不用了

1、首先停掉hertzbeat中的监控
2、停掉运行的容器,删除容器
3、删除对应的ubuntu镜像
4、删除hertzbeat中配置的监控

CPU和内存的使用率立马就降下去了,也没有再起来了

image-fyo6.png

结语

不用了,已老实

0
  1. 支付宝打赏

    qrcode alipay
  2. 微信打赏

    qrcode weixin
广告 广告

评论区