ICode9

精准搜索请尝试: 精确搜索
首页 > 系统相关> 文章详细

Linux Docker容器磁盘出现日志/var/lib/docker/overlay2占用100%

2021-02-01 13:01:11  阅读:63  来源: 互联网

标签:log lib max 100% json 占用 磁盘 docker overlay2


本文解决方案:

  1. 出现问题
  2. 找到问题
  3. 解决问题
  4. 防止以后问题复现

今天很纳闷,打算上去看一下自己的小破站,结果上不去了,吓得我赶快登上服务器看一下,结果是容器日志占用满了

 

起初我还被这个“/var/lib/docker/overlay2/”路径给迷糊住了,一度认为是“overlay2”文件夹内的日志把磁盘占用100%了,后来进去之后发现该文件夹占用也才5GB,遂开始了头疼掉头发

既然我已经知道是docker的问题了,这个时候就应该从docker目录开始查,在“/var/lib/docker”目录下使用命令“du -h --max-depth=1”,ps:--max-depth=1意思为检索文件的最大深度1,即只检索汇总计算当前目录下的文件

du -h --max-depth=1

 

从图中可以看出虽然提示的是“/var/lib/docker/containers”目录磁盘占用34G,而“overlay2”目录磁盘占用只有5G左右,所以小伙伴们不要被“/var/lib/docker/overlay2/”磁盘占用100%给骗了而 一时乱了手脚

这个时候我们进入“/var/lib/docker/containers”目录看看究竟是哪个容器沾满了咱们的磁盘,进入“containers”目录后我们继续使用“du -h --max-depth=1”命令查看哪个目录占用磁盘大,ps:docker ps命令中的容器ID是从“containers”目录中的文件夹名称头进行截取的,进行比对遂能查看出来是哪个容器占满了磁盘

du -h --max-depth=1

 

从这里咱们能够看出来占了咱们32G磁盘容量的就是redis容器了,这个时候咱们进去占用了32G磁盘的文件夹,ps:不是指redis容器里面的目录哦,而是还是在containers目录进行“cd”命令继续进入占用32G的文件夹内

进入文件夹之后使用“du -ah”命令查看当前文件夹中的文件磁盘占用大小,从图中咱们可以看出是redis的json日志文件磁盘占用太大,遂把文件进行清除处理先解决占用办法

du -ah


咱们使用“cat /dev/null > *-json.log”命令将这个json文件给清理掉,通过下图咱们就能看出来该文件已经清理掉

cat /dev/null > *-json.log

 

当然咯咱们清理了之后还是要重启容器服务哦,虽然这个时候容器还是显示运行,其实已经down了哦

以上咱们的问题解决了,但是这只是治本不治根,往下看解决根本的方法

 

如果说要从根本方法上解决docker容器日志文件磁盘满载的问题,有几种解决方法

方法一:不推荐,但是最快捷有效,把当前运行的容器直接给停止删掉

方法二:在docker运行的时候指定日志的最大磁盘容量

docker run ...... --log-opt max-size=10m --log-opt max-file=1

 方法三:在docker的配置文件中进行全局修改:新建或修改/etc/docker/daemon.json,添加log-dirver和log-opts参数(daemon.json):

{
  "log-driver": "json-file",
  "log-opts": {
    "max-size": "10m",
    "max-file": "3",
    "labels": "production_status",
    "env": "os,customer"
  }
}

方法四:该方法针对docker-compose的童鞋们,在docker-compose文件中配置日志

logging:
  options:
    max-size: '12m'
    max-file: '5'
  driver: json-file

 

参考资料:

https://www.cnblogs.com/sheseido/p/13039793.html

https://blog.csdn.net/isea533/article/details/95197468

标签:log,lib,max,100%,json,占用,磁盘,docker,overlay2
来源: https://blog.csdn.net/yhk19970220/article/details/113504458

专注分享技术,共同学习,共同进步。侵权联系[admin#icode9.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有