长期运行 Docker 时,系统中有很多镜像。如何一次安全地删除所有未使用的 Docker 映像以释放存储空间?
此外,我还想删除几个月前提取的图像,这些图像具有正确的TAG
.
所以,我不是要求只删除未标记的图像。我正在寻找一种方法来删除一般未使用的图像,其中包括未标记的图像和其他图像,例如几个月前用正确的TAG
.
长期运行 Docker 时,系统中有很多镜像。如何一次安全地删除所有未使用的 Docker 映像以释放存储空间?
此外,我还想删除几个月前提取的图像,这些图像具有正确的TAG
.
所以,我不是要求只删除未标记的图像。我正在寻找一种方法来删除一般未使用的图像,其中包括未标记的图像和其他图像,例如几个月前用正确的TAG
.
2016 年 9 月更新:Docker 1.13:PR 26108和提交 86de7c0引入了一些新命令,以帮助可视化 docker 守护程序数据在磁盘上占用的空间,并允许轻松清理“不需要”的多余空间。
docker system prune
将删除所有悬空数据(即按顺序:容器停止,没有容器的卷和没有容器的图像)。即使是未使用的数据,也可以-a
选择。
你还有:
对于未使用的图像,请使用docker image prune -a
(用于删除悬空和未使用的图像)。
警告:“未使用”表示“任何容器未引用的图像”:使用前要小心-a
。
如AL的回答所示,docker system prune --all
将删除所有未使用的图像,而不仅仅是悬挂的图像......这可能有点太多了。
结合docker xxx prune
该--filter
选项可能是限制修剪的好方法(至少 docker SDK API 1.28,所以 docker 17.04+)
当前支持的过滤器有:
until (<timestamp>)
- 仅删除在给定时间戳之前创建的容器、图像和网络label
( label=<key>
, label=<key>=<value>
, label!=<key>
, or ) - 仅删除带有(或不带,如果使用)指定标签的label!=<key>=<value>
容器、图像、网络和卷。label!=...
有关示例,请参见“修剪图像”。
我通常这样做:
docker rmi $(docker images --filter "dangling=true" -q --no-trunc)
过滤器找到未使用的
dangling=true
图像
这样,任何不再被标记图像引用的中间图像都会被删除。
我首先对退出的进程(容器)做同样的事情
alias drmae='docker rm $(docker ps -qa --no-trunc --filter "status=exited")'
从技术上讲,你应该在清理镜像之前先清理容器,因为这会捕获更多的悬空镜像和更少的错误。
Jess Frazelle (jfrazelle)具有bashrc 功能:
dcleanup(){
docker rm -v $(docker ps --filter status=exited -q 2>/dev/null) 2>/dev/null
docker rmi $(docker images --filter dangling=true -q 2>/dev/null) 2>/dev/null
}
要删除旧图像,而不仅仅是“未引用的悬空”图像,您可以考虑docker-gc
:
一个简单的 Docker 容器和镜像垃圾回收脚本。
- 一个多小时前退出的容器将被删除。
- 之后不属于任何剩余容器的图像将被删除。
(再次)参考 VonC,使用更新的system prune
. 不耐烦的人可以通过以下-f, --force
选项跳过提示:
docker system prune -f
不耐烦和鲁莽的人还可以通过以下选项删除“未使用的图像,而不仅仅是悬空的图像” -a, --all
:
docker system prune -af
https://docs.docker.com/engine/reference/commandline/system_prune/
请参阅使用最近添加的命令的VonC 的答案。prune
这是相应的shell别名方便:
alias docker-clean=' \
docker container prune -f ; \
docker image prune -f ; \
docker network prune -f ; \
docker volume prune -f '
删除已停止(退出)的容器:
$ docker ps --no-trunc -aqf "status=exited" | xargs docker rm
删除未使用的(悬空)图像:
$ docker images --no-trunc -aqf "dangling=true" | xargs docker rmi
如果您对不可撤销的数据丢失非常谨慎,那么您可以删除未使用的(悬空)卷(v1.9 及更高版本):
$ docker volume ls -qf "dangling=true" | xargs docker volume rm
在这里,它们位于一个方便的 shell 别名中:
alias docker-clean=' \
docker ps --no-trunc -aqf "status=exited" | xargs docker rm ; \
docker images --no-trunc -aqf "dangling=true" | xargs docker rmi ; \
docker volume ls -qf "dangling=true" | xargs docker volume rm'
其他答案很好,特别是:
docker system prune # doesn't clean out old images
docker system prune --all # cleans out too much
但是我需要两个命令中间的东西,所以这个filter
选项就是我需要的:
docker image prune --all --filter "until=4320h" # delete images older than 6 months ago; 4320h = 24 hour/day * 30 days/month * 6 months
希望有帮助:)
要删除超过一个月的旧标记图像:
$ docker images --no-trunc --format '{{.ID}} {{.CreatedSince}}' \
| grep ' months' | awk '{ print $1 }' \
| xargs --no-run-if-empty docker rmi
请注意,它将无法删除容器使用的图像,在存储库中引用,具有依赖的子图像......这可能是你想要的。否则只需添加-f
标志。
/etc/cron.daily/docker-gc
脚本示例:
#!/bin/sh -e
# Delete all stopped containers (including data-only containers).
docker ps -a -q --no-trunc --filter "status=exited" | xargs --no-run-if-empty docker rm -v
# Delete all tagged images more than a month old
# (will fail to remove images still used).
docker images --no-trunc --format '{{.ID}} {{.CreatedSince}}' | grep ' months' | awk '{ print $1 }' | xargs --no-run-if-empty docker rmi || true
# Delete all 'untagged/dangling' (<none>) images
# Those are used for Docker caching mechanism.
docker images -q --no-trunc --filter dangling=true | xargs --no-run-if-empty docker rmi
# Delete all dangling volumes.
docker volume ls -qf dangling=true | xargs --no-run-if-empty docker volume rm
根据doc,以下命令将删除超过 48 小时的图像。
$ docker image prune --all --filter until=48h
假设你有Docker 1.13或更高版本,你可以使用 prune 命令。对于您专门针对删除旧图像的问题,您需要第一个。
# Remove unused images
docker image prune
# Remove stopped containers.
docker container prune
# Remove unused volumes
docker volume prune
# Remove unused networks
docker network prune
# Command to run all prunes:
docker system prune
我建议不要习惯使用该docker system prune
命令。我认为用户会不小心删除他们无意删除的内容。就个人而言,我将主要使用docker image prune
anddocker container prune
命令。
到目前为止(Docker 版本 1.12),我们使用以下命令删除所有正在运行的容器。此外,如果我们想删除卷,我们可以在以下命令中使用其各自的标签 -v 手动执行此操作。
删除所有退出的容器
docker rm $(docker ps -q -f status=exited)
删除所有停止的容器
docker rm $(docker ps -a -q)
删除所有正在运行和停止的容器
docker stop $(docker ps -a -q)
docker rm $(docker ps -a -q)
删除所有容器,没有任何标准
docker container rm $(docker container ps -aq)
但是,在 1.13 及以上版本中,为了完整的系统和清理,我们可以直接使用以下命令:
docker system prune
所有未使用的容器、图像、网络和卷都将被删除。我们也可以使用以下清理各个组件的命令来执行此操作:
docker container prune
docker image prune
docker network prune
docker volume prune
这对我有用:
docker rmi $(docker images | grep "^<none>" | awk "{print $3}")
我最近在我的一台服务器上编写了一个脚本来解决这个问题:
#!/bin/bash
# Remove all the dangling images
DANGLING_IMAGES=$(docker images -qf "dangling=true")
if [[ -n $DANGLING_IMAGES ]]; then
docker rmi "$DANGLING_IMAGES"
fi
# Get all the images currently in use
USED_IMAGES=($( \
docker ps -a --format '{{.Image}}' | \
sort -u | \
uniq | \
awk -F ':' '$2{print $1":"$2}!$2{print $1":latest"}' \
))
# Get all the images currently available
ALL_IMAGES=($( \
docker images --format '{{.Repository}}:{{.Tag}}' | \
sort -u \
))
# Remove the unused images
for i in "${ALL_IMAGES[@]}"; do
UNUSED=true
for j in "${USED_IMAGES[@]}"; do
if [[ "$i" == "$j" ]]; then
UNUSED=false
fi
done
if [[ "$UNUSED" == true ]]; then
docker rmi "$i"
fi
done
这是清理 Docker 映像并回收空间的脚本。
#!/bin/bash -x
## Removing stopped container
docker ps -a | grep Exited | awk '{print $1}' | xargs docker rm
## If you do not want to remove all container you can have filter for days and weeks old like below
#docker ps -a | grep Exited | grep "days ago" | awk '{print $1}' | xargs docker rm
#docker ps -a | grep Exited | grep "weeks ago" | awk '{print $1}' | xargs docker rm
## Removing Dangling images
## There are the layers images which are being created during building a Docker image. This is a great way to recover the spaces used by old and unused layers.
docker rmi $(docker images -f "dangling=true" -q)
## Removing images of perticular pattern For example
## Here I am removing images which has a SNAPSHOT with it.
docker rmi $(docker images | grep SNAPSHOT | awk '{print $3}')
## Removing weeks old images
docker images | grep "weeks ago" | awk '{print $3}' | xargs docker rmi
## Similarly you can remove days, months old images too.
原始脚本
https://github.com/vishalvsh1/docker-image-cleanup
通常 Docker 将所有与镜像构建和层相关的临时文件保存在
/var/lib/docker
此路径是系统本地的,通常位于根分区"/"。
您可以挂载更大的磁盘空间并将内容移动/var/lib/docker
到新的挂载位置并建立符号链接。
这样,即使 Docker 镜像占用空间,它也不会影响您的系统,因为它将使用其他挂载位置。
我正在使用这个命令:
export BEFORE_DATETIME=$(date --date='10 weeks ago' +"%Y-%m-%dT%H:%M:%S.%NZ")
docker images -q | while read IMAGE_ID; do
export IMAGE_CTIME=$(docker inspect --format='{{.Created}}' --type=image ${IMAGE_ID})
if [[ "${BEFORE_DATETIME}" > "${IMAGE_CTIME}" ]]; then
echo "Removing ${IMAGE_ID}, ${BEFORE_DATETIME} is earlier then ${IMAGE_CTIME}"
docker rmi -f ${IMAGE_ID};
fi;
done
这将删除创建时间大于 10 周前的所有图像。
如果您想删除X个月前提取的图像,您可以尝试以下示例,该示例删除三个月前创建的图像:
three_months_old_images=`docker images | grep -vi "<none>" | tr -s ' ' | cut -d" " -f3,4,5,6 | grep "3 months ago" | cut -d" " -f1`
docker rmi $three_months_old_images
修剪所有图像和卷
docker system prune -af --volumes
@VonC 已经给出了一个非常好的答案,但为了完整起见,这里有一个我一直在使用的小脚本——如果你有一些差事 Docker 进程,它也会破坏:
#!/bin/bash
imgs=$(docker images | awk '/<none>/ { print $3 }')
if [ "${imgs}" != "" ]; then
echo docker rmi ${imgs}
docker rmi ${imgs}
else
echo "No images to remove"
fi
procs=$(docker ps -a -q --no-trunc)
if [ "${procs}" != "" ]; then
echo docker rm ${procs}
docker rm ${procs}
else
echo "No processes to purge"
fi
docker system prune -a
(系统会要求您确认命令。-f
如果您知道自己在做什么,请使用强制运行。)
有时我会遇到 Docker 分配并继续使用磁盘空间的问题,即使空间没有分配给任何特定的图像或现有容器。我意外产生此问题的最新方法是在 RHEL 7.1 中使用“docker-engine”centos build 而不是“docker”。有时似乎发生的情况是容器清理未成功完成,然后空间从未被重用。当我分配的 80GB 驱动器/
被文件填满时,/var/lib/docker
我不得不想出一个创造性的方法来解决这个问题。
这是我想出的。首先解决磁盘已满错误:
停止码头工人:systemctl stop docker
分配了一个新的驱动器安装如说/mnt/docker
。
将所有文件/var/lib/docker
移至/mnt/docker
. 我使用了命令:
rsync -aPHSx --remove-source-files /var/lib/docker/ /mnt/docker/
将新驱动器安装到/var/lib/docker
.
此时我不再遇到磁盘已满错误,但我仍在浪费大量空间。接下来的步骤是解决这个问题。
启动 Docker:systemctl start docker
保存所有图像:
docker save $(docker images |sed -e '/^<none>/d' -e '/^REPOSITORY/d' -e 's,[ ][ ]*,:,' -e 's,[ ].*,,') > /root/docker.img
卸载泊坞窗。
擦除所有内容/var/lib/docker
:
rm -rf /var/lib/docker/[cdintv]*
重新安装泊坞窗
启用泊坞窗:systemctl enable docker
启动泊坞窗:systemctl start docker
恢复图像:
docker load < /root/docker.img
启动您需要运行的任何持久性容器。
这将我的磁盘使用量从 docker 的 67 GB 降低到了 docker 的 6 GB。
我不建议将其用于日常使用。但是当看起来 docker 丢失了对软件错误或意外重启的已用磁盘空间的跟踪时,运行它很有用。
docker rm $(docker ps -faq)
docker rmi $(docker ps -faq)
-f 强制
-全部
-q 在模式下
要删除没有容器运行的标记图像,您必须使用一个小脚本:
#!/bin/bash
# remove not running containers
docker rm $(docker ps -f "status=exited" -q)
declare -A used_images
# collect images which has running container
for image in $(docker ps | awk 'NR>1 {print $2;}'); do
id=$(docker inspect --format="{{.Id}}" $image);
used_images[$id]=$image;
done
# loop over images, delete those without a container
for id in $(docker images --no-trunc -q); do
if [ -z ${used_images[$id]} ]; then
echo "images is NOT in use: $id"
docker rmi $id
else
echo "images is in use: ${used_images[$id]}"
fi
done
如何删除标记的图像
docker rmi 先贴标签
docker rmi 镜像。
# 这可以在一个 docker rmi 调用中完成,例如:# docker rmi <repo:tag> <imageid>
(这适用于 2016 年 11 月,Docker 版本 1.12.2)
例如
$ docker images
REPOSITORY TAG IMAGE ID CREATED SIZE
usrxx/the-application 16112805 011fd5bf45a2 12 hours ago 5.753 GB
usryy/the-application vx.xx.xx 5af809583b9c 3 days ago 5.743 GB
usrzz/the-application vx.xx.xx eef00ce9b81f 10 days ago 5.747 GB
usrAA/the-application vx.xx.xx 422ba91c71bb 3 weeks ago 5.722 GB
usrBB/the-application v1.00.18 a877aec95006 3 months ago 5.589 GB
$ docker rmi usrxx/the-application:16112805 && docker rmi 011fd5bf45a2
$ docker rmi usryy/the-application:vx.xx.xx && docker rmi 5af809583b9c
$ docker rmi usrzz/the-application:vx.xx.xx eef00ce9b81f
$ docker rmi usrAA/the-application:vx.xx.xx 422ba91c71bb
$ docker rmi usrBB/the-application:v1.00.18 a877aec95006
例如,脚本删除任何超过 2 周的内容。
IMAGESINFO=$(docker images --no-trunc --format '{{.ID}} {{.Repository}} {{.Tag}} {{.CreatedSince}}' |grep -E " (weeks|months|years)")
TAGS=$(echo "$IMAGESINFO" | awk '{ print $2 ":" $3 }' )
IDS=$(echo "$IMAGESINFO" | awk '{ print $1 }' )
echo remove old images TAGS=$TAGS IDS=$IDS
for t in $TAGS; do docker rmi $t; done
for i in $IDS; do docker rmi $i; done
几周前移除旧容器。
docker rm $(docker ps -a | grep "weeks" | awk '{ print $1; }')
删除几周前的旧图像。当心。这将删除几周前创建但您的新图像可能正在使用的基本图像。
docker rmi $(docker images | grep 'weeks' | awk '{ print $3; }')
首先,运行docker images
查看图像列表并将 IMAGE HASH ID 复制到剪贴板。
跑docker rmi -f <Image>
记住选项-f
是强制删除。
如果您希望自动/定期清理退出的容器并删除正在运行的容器未使用的镜像和卷,您可以下载镜像meltwater/docker-cleanup
。
赶紧跑:
docker run -d -v /var/run/docker.sock:/var/run/docker.sock:rw -v /var/lib/docker:/var/lib/docker:rw --restart=unless-stopped meltwater/docker-cleanup:latest
默认情况下每 30 分钟运行一次。但是,您可以使用此标志以秒为单位设置延迟时间(DELAY_TIME=1800 选项)。
更多细节:https ://github.com/meltwater/docker-cleanup/blob/master/README.md
如果您自己构建这些修剪过的镜像(来自其他一些较旧的基础镜像),请注意上面基于 的已接受解决方案docker image prune
,因为该命令很生硬,并且还会尝试删除最新镜像所需的所有依赖项(该命令应该是可能重命名为docker image*s* prune
)。
我为我的 docker 映像构建管道(其中有每日构建和标签=日期YYYYMMDD
格式)提出的解决方案是这样的:
# carefully narrow down the image to be deleted (to avoid removing useful static stuff like base images)
my_deleted_image=mirekphd/ml-cpu-py37-vsc-cust
# define the monitored image (tested for obsolescence), which will be usually the same as deleted one, unless deleting some very infrequently built image which requires a separate "clock"
monitored_image=mirekphd/ml-cache
# calculate the oldest acceptable tag (date)
date_week_ago=$(date -d "last week" '+%Y%m%d')
# get the IDs of obsolete tags of our deleted image
# note we use monitored_image to test for obsolescence
my_deleted_image_obsolete_tag_ids=$(docker images --filter="before=$monitored_image:$date_week_ago" | grep $my_deleted_image | awk '{print $3}')
# remove the obsolete tags of the deleted image
# (note it typically has to be forced using -f switch)
docker rmi -f $my_deleted_image_obsolete_tag_ids
docker rm `docker ps -aq`
或者
docker rm $(docker ps -q -f status=exited)
如果你有很多,删除它们可能真的很乏味,但幸运的是,Docker 有一些命令可以帮助我们消除悬空图像。在旧版本的 Docker 中(今天仍然有效),您可以通过运行docker rmi -f $(docker images -f "dangling=true" -q)
.
sparrow 插件docker-remove-dangling-images可用于清理停止的容器和未使用的(悬空)图像:
$ sparrow plg run docker-remove-dangling-images
它适用于 Linux 和 Windows 操作系统。
我通常这样做docker rm -f $(docker ps -a -q)
并docker system prune
清除所有悬挂的容器。