14

我正在使用 consul 的健康检查功能，并且不断得到这些“死”容器：

CONTAINER ID  IMAGE                   COMMAND              CREATED         STATUS              PORTS                                                                                                                                                                    NAMES
20fd397ba638  progrium/consul:latest  "\"/bin/bash -c 'cur 15 minutes ago  Dead

究竟什么是“死”容器？停止的容器何时变为“死亡”？

作为记录，我运行 progrium/consul + gliderlabs/registrator images + SERVICE_XXXX_CHECK 环境变量来进行健康检查。它运行一个运行状况检查脚本，每 X 秒运行一次图像，例如docker run --rm my/img healthcheck.sh

我一般对“死亡”的含义以及如何防止它发生感兴趣。另一个奇怪的事情是我的死容器没有名字。

这是来自容器检查的一些信息：

  "State": {
        "Dead": true,
        "Error": "",
        "ExitCode": 1,
        "FinishedAt": "2015-05-30T19:00:01.814291614Z",
        "OOMKilled": false,
        "Paused": false,
        "Pid": 0,
        "Restarting": false,
        "Running": false,
        "StartedAt": "2015-05-30T18:59:51.739464262Z"
    },

奇怪的是，只有偶尔一个容器会死掉并且不会被移除。

谢谢

编辑：查看日志，我发现是什么导致容器停止失败：

  Handler for DELETE /containers/{name:.*} returned error: Cannot destroy container 003876e41429013e46187ebcf6acce1486bc5011435c610bd163b159ba550fbc: 
Driver aufs failed to remove root filesystem 003876e41429013e46187ebcf6acce1486bc5011435c610bd163b159ba550fbc: 
rename /var/lib/docker/aufs/diff/003876e41429013e46187ebcf6acce1486bc5011435c610bd163b159ba550fbc 
/var/lib/docker/aufs/ diff/003876e41429013e46187ebcf6acce1486bc5011435c610bd163b159ba550fbc-removing: 
device or resource busy

为什么会这样？

编辑2：发现这个：https ://github.com/docker/docker/issues/9665

4

2 回答 2

14

2016 年 3 月更新：问题 9665刚刚被PR 21107关闭（可能适用于 docker 1.11）
这应该有助于避免“驱动程序 aufs 无法删除根文件系统”、“设备或资源繁忙”问题。

原始答案 2015 年 5 月

如果容器状态，则Dead 是一个，由Container.Start()

if container.removalInProgress || container.Dead {
        return fmt.Errorf("Container is marked for removal and cannot be started.")
}

停止失败时设置为 Dead，以防止该容器重新启动。

在可能的失败原因中，请参阅container.Kill()。
这意味着kill -15并且kill -9都失败了。

// 1. Send a SIGTERM
if err := container.killPossiblyDeadProcess(15); err != nil {
    logrus.Infof("Failed to send SIGTERM to the process, force killing")
    if err := container.killPossiblyDeadProcess(9); err != nil {

正如 OP 所提到的，这通常意味着繁忙的设备或资源，防止进程被杀死。

于 2015-05-31T07:40:54.747 回答
1

有很多由 引起的错误EBUSY，尤其是在devicemapper使用时。

EBUSY所有相关问题都有一个跟踪器错误。见https://github.com/docker/docker/issues/5684#issuecomment-69052334

于 2015-06-30T15:58:42.170 回答