为什么docker镜像会占用Docker未使用的磁盘空间

Question

我已经设置了docker，我使用了完全不同的块设备来存储docker的系统数据：

[root@blink1 /]# cat /etc/sysconfig/docker
# /etc/sysconfig/docker

other_args="-H tcp://0.0.0.0:9367 -H unix:///var/run/docker.sock -g /disk1/docker"

请注意，/disk/1使用完全不同的硬盘驱动器/dev/xvdi

Filesystem      Size  Used Avail Use% Mounted on
/dev/xvda1      7.8G  5.1G  2.6G  67% /
devtmpfs        1.9G  108K  1.9G   1% /dev
tmpfs           1.9G     0  1.9G   0% /dev/shm
/dev/xvdi        20G  5.3G   15G  27% /disk1
/dev/dm-1       9.8G  1.7G  7.6G  18% /disk1/docker/devicemapper/mnt/bb6c540bae25aaf01aedf56ff61ffed8c6ae41aa9bd06122d440c6053e3486bf
/dev/dm-2       9.8G  1.7G  7.7G  18% /disk1/docker/devicemapper/mnt/c85f756c59a5e1d260c3cdb473f3f4d9e55ac568967abe190eeaf9c4087afeac

问题是，当我继续下载docker镜像并运行docker容器时，似乎其他硬盘驱动器/dev/xvda1也用完了。

我可以通过删除一些docker镜像来验证此问题。在我删除了一些docker图像后，/dev/xvda1现在有了更多的空间。

我错过了什么吗？

我的码头版：

[root@blink1 /]# docker info
Containers: 2
Images: 42
Storage Driver: devicemapper
 Pool Name: docker-202:1-275421-pool
 Pool Blocksize: 64 Kb
 Data file: /disk1/docker/devicemapper/devicemapper/data
 Metadata file: /disk1/docker/devicemapper/devicemapper/metadata
 Data Space Used: 3054.4 Mb
 Data Space Total: 102400.0 Mb
 Metadata Space Used: 4.7 Mb
 Metadata Space Total: 2048.0 Mb
Execution Driver: native-0.2
Kernel Version: 3.14.20-20.44.amzn1.x86_64
Operating System: Amazon Linux AMI 2014.09

Answer 1

这是devicemapper的核心问题，它会影响RedHat系列的操作系统（RedHat，Fedora，CentOS和Amazon Linux）。已删除的容器不会释放映射的磁盘空间。这意味着在受影响的操作系统上，当您启动并重新启动容器时，您将慢慢耗尽空间。

Docker项目意识到这一点，并且内核应该在上游修复（https://github.com/docker/docker/issues/3182）。

各种解决方法是给Docker自己的卷写入（"When Docker eats up you disk space"）。这实际上并没有阻止它占用空间，只是在它之后取下系统的其他部分。

我的解决方案是卸载docker，然后删除所有文件，然后重新安装：

sudo yum remove docker
sudo rm -rf /var/lib/docker
sudo yum install docker

这让我的空间恢复了，但与启动替换实例没什么不同。我还没有找到更好的解决方案。

Answer 2

删除我的整个/ var / lib / docker对我来说不合适。这些是更安全的方式：

解决方案1：

该问题的以下命令为我清理空间，它比删除/ var / lib / docker或Windows更安全，检查磁盘映像位置here。

之前：

docker info

示例输出：

Metadata file: 
Data Space Used: 53.38 GB
Data Space Total: 53.39 GB
Data Space Available: 8.389 MB
Metadata Space Used: 6.234 MB
Metadata Space Total: 54.53 MB
Metadata Space Available: 48.29 MB

在较新版本的Docker中命令，例如17.x +

docker system prune -a

它会向您显示一条警告，它将删除所有已停止的容器，网络，图像和构建缓存。一般来说，删除它是安全的。 （下次运行容器时，它可能会从Docker注册表中提取）

示例输出：

Total reclaimed space: 1.243GB

然后，您可以再次运行泊坞窗信息以查看已清理的内容

docker info

解决方案2：

除此之外，请确保docker容器中的程序不会将许多/大文件写入文件系统。

检查正在运行的docker进程的空间使用大小

docker ps -s #may take minutes to return

或所有容器，甚至退出

docker ps -as #may take minutes to return

然后，您可以删除有问题的容器

docker rm <CONTAINER ID>

找出可能使用空间演出的罪魁祸首

docker exec -it <CONTAINER ID> "/bin/sh"
du -h

在我的情况下，程序正在编写临时文件的演出。

（Nathaniel Waisbrot在接受的答案中提到这个issue，我从这个问题得到了一些信息）

---

要么

旧版本Docker中的命令，例如1.13.x（以root身份运行而不是sudo）：

# Delete 'exited' containers
docker rm -v $(docker ps -a -q -f status=exited)

# Delete 'dangling' images (If there are no images you will get a docker: "rmi" requires a minimum of 1 argument)
docker rmi $(docker images -f "dangling=true" -q)

# Delete 'dangling' volumes (If there are no images you will get a docker: "volume rm" requires a minimum of 1 argument)
docker volume rm $(docker volume ls -qf dangling=true)

之后：

> docker info
Metadata file: 
Data Space Used: 1.43 GB
Data Space Total: 53.39 GB
Data Space Available: 51.96 GB
Metadata Space Used: 577.5 kB
Metadata Space Total: 54.53 MB
Metadata Space Available: 53.95 MB

Answer 3

我遇到了类似的问题，我认为当磁盘上没有足够的空间用于所有docker镜像时会发生这种情况。我为docker图像预留了6GB，但在我的情况下，这并不足够。无论如何，我已经删除了每个图像和容器，但仍然看起来已经满了。 / var / lib / docker / devicemapper和/ var / lib / docker / tmp正在使用大部分空间。

这个命令对我不起作用：

# docker ps -qa | xargs docker inspect --format='{{ .State.Pid }}' | xargs -IZ fstrim /proc/Z/root/

首先，我停止了docker服务：

sudo service docker stop

然后我删除了/ var / lib / docker：

然后我做了有人在https://github.com/docker/docker/issues/18867#issuecomment-232301073建议的事情

• 删除docker metadata rm -rf / var / lib / docker的现有实例 sudo rm -rf / var / lib / docker
• 将以下选项传递给docker守护程序：-s devicemapper --storage-opt dm.fs = xfs --storage-opt dm.mountopt = discard
• 启动docker守护程序。

最后两步，我运行：

sudo dockerd -s devicemapper --storage-opt dm.fs=xfs --storage-opt dm.mountopt=discard

Answer 4

正如Github.com的问题#18867 - Delete data in a container devicemapper can not free used space所述

尝试运行以下命令：

# docker ps -qa | xargs docker inspect --format='{{ .State.Pid }}' | xargs -IZ fstrim /proc/Z/root/

它使用fstrim工具修剪devicemapper精简配置磁盘。

Answer 5

移动/var/lib/docker目录。

假设/data目录有足够的空间，如果没有，替代那个，

sudo systemctl stop docker

sudo mv /var/lib/docker /data


sudo ln -s /data/docker /var/lib/docker

sudo systemctl start docker

这样，您就不必重新配置docker。

Answer 6

默认情况下Docker修剪不会删除卷，

你可以试试像

docker system prune --volume

Answer 7

是的，Docker使用/ var / lib / docker文件夹来存储图层。有办法回收空间并将存储移动到其他目录。

您可以安装更大的磁盘空间并将/ var / lib / docker的内容移动到新的安装位置并创建sym链接。

有关如何完成上述任务的详细说明。

http://www.scmtechblog.net/2016/06/clean-up-docker-images-from-local-to.html

您也可以删除中间层。

https://github.com/vishalvsh1/docker-image-cleanup

Answer 8

也许你可以尝试docker system prune删除所有不重要的图像