解决Gitlab Prometheus导致的磁盘空间不足问题
2024-01-03 09:44:34
解决Gitlab Prometheus导致的磁盘空间不足问题
用docker搭建了一个gitlab服务,已经建立了多个项目上传,但是突然有一天就503了。
df -TH
查看系统盘,发现已经Used 100%爆满了。。。
💡Tips:
/dev/vda1
目录是系统盘目录。
去云服务器上面看,短短半个月就占满了整个系统盘。。。
然后,看了看gitlab容器卷挂载目录data中,有一个prometheus目录居然占了29G,百度了一下,原来这个是用来监控的。。。所以,内容一直堆积堆积,导致磁盘满了。。。
GitLab中的 Prometheus 解释如下:
GitLab中的Prometheus是一个用于监控和报警的开源系统,它能够收集并汇总时间序列数据,用于检测异常。同时,GitLab还提供了一些关于Prometheus的基础功能,包括数据聚合、存储时间等。这些功能可以帮助用户更好地了解其系统运行状况,并及时发现和解决潜在问题。
/var/opt/gitlab/prometheus/data
是 Prometheus 生成的监控数据文件,可参考文档 Monitoring GitLab with Prometheus。
解决办法:
- 先备份一下,云服务器购买个存储库,备份一下,临时的话可以用先
按需计费
省钱。 - 因为,我已经备份了,所以我就可以肆无忌惮的删一点。就把
gitlab/data/prometheus/data/wal
里面的一大文件删了一部分,保证gitlab的服务能启动起来。
💡Tips:可能因为系统盘已经爆满,项目启动不起来,可以手动删除wal目录下面的一些大文件,先让磁盘有些空余,保险起见还是要提前备份一下。
- 修改一下
gitlab/config/gitlab.rb
配置文件。
周期默认是15d是15天,意思是15天后重新记录。此处,我就改为了1d也就是1天。
也可以直接把prometheus禁用了。
prometheus['enable'] = false
- 再次,重启项目docker restart gitlab 就healthy启动了。
系统盘也释放了很多。
文章来源:https://blog.csdn.net/IT_Holmes/article/details/135354866
本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。 如若内容造成侵权/违法违规/事实不符,请联系我的编程经验分享网邮箱:veading@qq.com进行投诉反馈,一经查实,立即删除!
本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。 如若内容造成侵权/违法违规/事实不符,请联系我的编程经验分享网邮箱:veading@qq.com进行投诉反馈,一经查实,立即删除!