10

我在 CircleCI 上运行docker,但无法缓存 COPY 命令。

Circle CI 文档提到了已知的缓存问题,并建议使用这个 perl 脚本来设置复制的文件的时间戳以保留缓存。

Docker 最佳实践文档状态:

在 ADD 和 COPY 指令的情况下,检查被放入图像的文件的内容。具体来说,对文件进行校验和,然后在缓存查找期间使用该校验和。

根据 CircleCi 的建议,我将缓存保存到磁盘,然后在下一次测试运行时再次加载。这似乎在正确复制缓存之前作为命令工作。

为了调试,我正在输出我试图在本地复制的文件的 md5 校验和,然后从 docker 容器中输出,它匹配正确。因此,理论上缓存应该加载。我不确定 Docker 使用 md5 作为校验和。

这是我当前的 circle.yml:

机器:服务: - 码头工人

dependencies:
  cache_directories:
    - "~/docker"
  pre:
    - mkdir -p ~/docker
  override:
    - docker info
    - if [[ -e ~/docker/image.tar ]]; then docker load -i ~/docker/image.tar; fi
    - docker images
    - docker build -t circles .

checkout:
  post:
    - ls -l
    - ./timestamp-set-to-git.pl
    - ls -l

test:
  override:
    - md5sum .bowerrc
    - docker run circles md5sum .bowerrc
    - docker save circles > ~/docker/image.tar

这是校验和步骤的构建输出:

$md5sum .bowerrc
8d1a712721d735bd41bf738cae3226a2 .bowerrc

$docker run circles md5sum .bowerrc
8d1a712721d735bd41bf738cae3226a2 .bowerrc

docker build报告是这样的:

Step 6 : RUN sudo npm install -g phantomjs gulp
 ---> Using cache
 ---> a7bbf2b17977
Step 7 : COPY .bowerrc /var/work/.bowerrc
 ---> 7ad82336de64

有谁知道为什么 COPY 不缓存?

4

2 回答 2

5

Docker 使用 TARSUM 来决定是否使用缓存,这包括文件元数据。修改时间最重要...运行 git clone 将迫使它从头开始重建。

为了解决这个问题,我使用具有以下目标的 Makefile...

build: hack-touch
    docker build -t MYTAG .
hack-touch:
    @echo "Reset timestamps on git working directory files..."
    find conf | xargs touch -t 200001010000.00
    touch -t 200001010000.00 Gruntfile.js bower.json package.json .bowerrc

(就我而言,除了第二行的 Gruntfile 内容之外,我想要缓存的所有内容(如 requirements.txt 文件)都在 conf 中。我不想缓存任何实际源代码)

于 2015-06-29T01:51:54.237 回答
2

我使用drone.io(另一个CI工具)遇到了同样的问题。

发生这种情况的原因是“git clone”将(覆盖)所有本地文件,然后也将获得该克隆时间的时间戳。由于 Docker 获取在 COPY 或 ADD 命令中添加的所有文件的哈希值,因此这个哈希值现在与以前不同。然后,Docker 使该缓存无效并重做该步骤和之后的步骤。

于 2015-06-29T01:40:04.847 回答