Docker容器日志占用空間過大問題

問題

docker容器日志導(dǎo)致主機(jī)磁盤空間滿了。

docker logs -f container_name噼里啪啦一大堆，很占用空間，不用的日志可以清理掉了。

解決方法

找出Docker容器日志

在linux上，容器日志一般存放在/var/lib/docker/containers/container_id/下面，查看各個(gè)日志文件大小的腳本docker_log_size.sh，內(nèi)容如下：

#!/bin/sh?
echo "======== docker containers logs file size ========" ?
logs=$(find /var/lib/docker/containers/ -name *-json.log) ?
for log in $logs ?
? ? ? ? do ?
? ? ? ? ? ? ?ls -lh $log ??
? ? ? ? done

# chmod +x docker_log_size.sh
# ./docker_log_size.sh

清理Docker容器日志（治標(biāo)）

如果docker容器正在運(yùn)行，那么使用rm -rf方式刪除日志后，通過df -h會(huì)發(fā)現(xiàn)磁盤空間并沒有釋放。

原因是在Linux或者Unix系統(tǒng)中，通過rm -rf或者文件管理器刪除文件，將會(huì)從文件系統(tǒng)的目錄結(jié)構(gòu)上解除鏈接（unlink）。

如果文件是被打開的（有一個(gè)進(jìn)程正在使用），那么進(jìn)程將仍然可以讀取該文件，磁盤空間也一直被占用。正確姿勢(shì)是cat /dev/null > *-json.log，當(dāng)然你也可以通過rm -rf刪除后重啟docker。

接下來，提供一個(gè)日志清理腳本clean_docker_log.sh，內(nèi)容如下：

#!/bin/sh?
echo "======== start clean docker containers logs ========" ?
logs=$(find /var/lib/docker/containers/ -name *-json.log) ?
for log in $logs ?
? ? ? ? do ?
? ? ? ? ? ? ? ? echo "clean logs : $log" ?
? ? ? ? ? ? ? ? cat /dev/null > $log ?
? ? ? ? done ?
echo "======== end clean docker containers logs ========"
# chmod +x clean_docker_log.sh
# ./clean_docker_log.sh

但是，這樣清理之后，隨著時(shí)間的推移，容器日志會(huì)像雜草一樣，卷土重來。

設(shè)置Docker容器日志大小（治本）

設(shè)置一個(gè)容器服務(wù)的日志大小上限

上述方法，日志文件遲早又會(huì)漲回來。

要從根本上解決問題，需要限制容器服務(wù)的日志大小上限。

這個(gè)通過配置容器docker-compose的max-size選項(xiàng)來實(shí)現(xiàn)

nginx:?
? image: nginx:1.12.1?
? restart: always?
? logging:?
? ? driver: “json-file”?
? ? options:?
? ? ? max-size: “5g”?

重啟nginx容器之后，其日志文件的大小就被限制在5GB，再也不用擔(dān)心了。

全局設(shè)置

新建/etc/docker/daemon.json，若有就不用新建了。添加log-dirver和log-opts參數(shù)，樣例如下：

# vim /etc/docker/daemon.json
{
? "log-driver":"json-file",
? "log-opts": {"max-size":"500m", "max-file":"3"}
}

• max-size=500m，意味著一個(gè)容器日志大小上限是500M，
• max-file=3，意味著一個(gè)容器有三個(gè)日志，分別是id+.json、id+1.json、id+2.json。

// 重啟docker守護(hù)進(jìn)程
# systemctl daemon-reload
# systemctl restart docker

注意：設(shè)置的日志大小，只對(duì)新建的容器有效。

Docker容器日志清理

問題：

docker容器長(zhǎng)時(shí)間運(yùn)行，若程序有大量的打印，日志會(huì)不斷增大，導(dǎo)致主機(jī)磁盤空間滿。

根治docker容器的方法：限制容器日志文件的大小，文件的數(shù)量。

通過配置max-log限制日志文件的大小，max-file參數(shù)限制日志文件的數(shù)量

使用docker-compose.yml文件部署，針對(duì)單一容器進(jìn)行限制

docker-rate:
? ? image: python:3.9.5
? ? container_name:docker-rate
? ? restart: always
? ? logging:
? ? ? options:
? ? ? ? max-size: "5g"
? ? ? ? max-file: "1"
? ? volumes:
? ? ?- /var/share:/share
? ? command: bash -c "python /share/run.py"
? ? environment:
? ? ? VERSION: 1

修改docker配置文件，全局生效

vim /etc/docker/daemon.json
{
? "log-opts": {"max-size": "500m", "max-file": "3"}
}

總結(jié)

以上為個(gè)人經(jīng)驗(yàn)，希望能給大家一個(gè)參考，也希望大家多多支持腳本之家。