node.js - node_modules 上的 docker-compose 卷但为空

Question

我对 Docker 很陌生，我想在我的计算机上映射 node_modules 文件夹（用于调试目的）。

这是我的 docker-compose.yml

web:
  build: .
  ports:
    - "3000:3000"
  links:
    - db
  environment:
    PORT: 3000
  volumes:
    - .:/usr/src/app
    - /usr/src/app/node_modules
db:
  image: mongo:3.3
  ports:
    - "27017:27017"
  command: "--smallfiles --logpath=/dev/null"

我使用 Docker for Mac。当我运行docker-compose up -d一切正常时，它会在我的计算机上创建一个 node_modules 文件夹，但它是空的。我进入容器的 bash 和 ls node_modules，所有的包都在那里。

我如何才能在我的计算机上获取容器上的内容？

谢谢

score 26 · Accepted Answer

TL;DR 工作示例，克隆并尝试： https ://github.com/xbx/base-server

您首先需要在您的计算机（外部图像）中有一个 node_modules 用于调试目的（在运行容器之前）。

如果您只想调试 node_modules：

volumes:
    - /path/to/node_modules:/usr/src/app/node_modules

如果要调试代码和 node_modules：

volumes:
    - .:/usr/src/app/

请记住，您npm install至少需要在容器外运行一次（或复制docker build生成的 node_modules 目录）。如果您需要更多详细信息，请立即告诉我。

编辑. 因此，在 OSX 中不需要 npm，您可以：

docker build然后docker cp <container-id>:/path/to/node-modules ./local-node-modules/。然后在你的 docker-compose.yml 中挂载这些文件并解决你想要的任何问题。
或者，docker build那里（Dockerfile）npm install在另一个目录中执行。cp然后在您的命令（CMD 或docker -compose 命令）中将副本（

编辑 2.（选项 2）工作示例，克隆并尝试： https ://github.com/xbx/base-server 我在这个 repo 中自动完成了这一切，这一切都来自你的。

Dockerfile

FROM node:6.3

# Install app dependencies
RUN mkdir /build-dir
WORKDIR /build-dir
COPY package.json /build-dir
RUN npm install -g babel babel-runtime babel-register mocha nodemon
RUN npm install

# Create app directory
RUN mkdir -p /usr/src/app
WORKDIR /usr/src/app
RUN ln -s /build-dir/node_modules node_modules

# Bundle app source
COPY . /usr/src/app

EXPOSE 1234
CMD [ "npm", "start" ]

码头工人-compose.yml

web:
  build: .
  ports:
    - "1234:1234"
  links:
    - db # liaison avec la DB
  environment:
    PORT: 1234
  command: /command.sh
  volumes:
    - ./src/:/usr/src/app/src/
    - ./node_modules:/usr/src/app/node_modules
    - ./command.sh:/command.sh
db:
  image: mongo:3.3
  ports:
    - "27017:27017"
  command: "--smallfiles --logpath=/dev/null"

命令.sh

#!/bin/bash

cp -r /build-dir/node_modules/ /usr/src/app/

exec npm start

请克隆我的仓库并执行docker-compose up. 它做你想做的事。PS：可以改进以更好的方式做同样的事情（即最佳实践等）

我在 OSX 中，它对我有用。

score 26 · Accepted Answer

首先，有一个操作顺序。构建映像时，不会挂载卷，它们仅在您运行容器时才会挂载。因此，当您完成构建时，所有更改将仅存在于映像中，而不存在于任何卷中。如果您在目录上安装卷，它会覆盖该位置图像中的任何内容，从而隐藏这些内容（有一个初始化例外，见下文）。

接下来是卷语法：

  volumes:
    - .:/usr/src/app
    - /usr/src/app/node_modules

告诉 docker-compose 从当前目录到/usr/src/app容器内部创建一个主机卷，然后映射/usr/src/app/node_modules到 docker 维护的匿名卷。后者将显示为一个卷中，docker volume ls带有一个相对无用的长 uuid 字符串。

要映射/usr/src/app/node_modules到主机上的文件夹，您需要在前面包含文件夹名称和冒号，就像上面一行一样。例如/host/dir/node_modules:/usr/src/app/node_modules。

命名卷与主机卷有点不同，因为 docker 使用您可以在docker volume ls. 您仅使用名称而不是路径来引用这些卷。因此node_modules:/usr/src/app/node_modules将创建一个名为的卷node_modules，您可以将其安装在仅具有该名称的容器中。

我分开来描述命名卷，因为它们带有一个功能，它变成了带有主机卷的陷阱。Docker 通过使用该位置的映像内容初始化命名卷来帮助您处理命名卷。所以在上面的例子中，如果命名卷node_modules是空的（或新的），它会首先将 /usr/src/app/node_modules 中的镜像内容复制到这个卷，然后将它挂载到你的容器中。

使用主机卷，您将永远不会看到任何初始化，无论该位置的任何内容，甚至是空目录，都是您在容器中看到的所有内容。无法从该目录位置的映像中获取内容以首先复制到该位置的主机卷。这也意味着容器内所需的目录权限不会自动继承，您需要手动设置在容器内工作的主机目录的权限。

最后，还有一个适用于 windows 和 mac 的 docker 的小问题，它们在 VM 内运行，并且您的主机卷已安装到 VM。要将卷挂载到主机上，您必须配置应用程序以将主机中的文件夹共享给 VM，然后将 VM 中的卷挂载到容器中。默认情况下，在 Mac 上，包含 /Users 文件夹，但如果您使用其他目录，例如 /Projects 目录，甚至是小写的 /users（unix 和 bsd 区分大小写），您将看不到来自容器内的 Mac。

有了这些基础知识，一种可能的解决方案是重新设计您的工作流程，以将目录内容从复制到主机的图像中获取。首先，您需要将文件复制到图像中的不同位置。然后，您需要在容器启动时将文件从该保存的映像位置复制到卷安装位置。当您执行后者时，您应该注意您违背了拥有卷（持久性）的目的，并且可能需要考虑添加一些逻辑以便在运行副本时更具选择性。首先，将 entrypoint.sh 添加到您的构建中，如下所示：

#!/bin/sh
# copy from the image backup location to the volume mount
cp -a /usr/src/app_backup/node_modules/* /usr/src/app/node_modules/
# this next line runs the docker command
exec "$@"

然后更新 Dockerfile 以包含入口点和备份命令：

FROM node:6.3

# Create app directory
RUN mkdir -p /usr/src/app
WORKDIR /usr/src/app

# Install app dependencies
COPY package.json /usr/src/app/
RUN npm install -g babel babel-runtime babel-register mocha nodemon
RUN npm install

# Bundle app source
COPY . /usr/src/app
RUN cp -a /usr/src/app/. /usr/src/app_backup

EXPOSE 1234
ENTRYPOINT [ "/usr/src/app/entrypoint.sh" ]
CMD [ "npm", "start" ]

然后从 docker-compose.yml 中删除额外的卷：

  volumes:
    - .:/usr/src/app

score 2 · Accepted Answer

最简单的解决方案

使用 Docker Compose 和带有Bind Mount的本地卷驱动程序将 node_modules 卷配置为使用本地 node_modules 目录作为其存储位置。

首先，确保您有一个本地 node_modules 目录，或者创建它，然后在 docker-compose 文件的命名卷部分为它创建一个 Docker 卷：

volumes:
  node_modules:
    driver: local
    driver_opts:
      type: none
      o: bind
      device: ./local/relative/path/to/node_modules

然后，将您的 node_modules 卷添加到您的服务中：

ui:
  volumes:
    - node_modules:/container/path/to/node_modules

只需确保您始终在 Docker 容器内进行 node_module 更改（使用 docker -compose exec），它将完美同步并在主机上用于 IDE、代码完成、调试等。

score 1 · Accepted Answer

我补充了@Robert的回答，因为有几件事没有考虑在内；即：

cp耗时太长，用户无法查看进度。
node_modules如果它是通过主机安装的，我想被覆盖。
如果有任何更改，我希望能够git pull在容器运行和不运行时进行相应的更新。node_modules
我只希望在开发环境中出现这种行为。

为了解决第一个问题，我rsync在我的图像上安装了，以及pv（因为我想在删除的同时查看进度）。由于我使用的是 alpine，因此我使用apk add了Dockerfile：

# Install rsync and pv to view progress of moving and deletion of node_modules onto host volume.
RUN apk add rsync && apk add pv

然后我将更改entrypoint.sh为如下所示（您可以替换yarn.lock为package-lock.json）：

#!/bin/ash

# Declaring variables.
buildDir=/home/node/build-dir
workDir=/home/node/work-dir
package=package.json
lock=yarn.lock
nm=node_modules

#########################
# Begin Functions
#########################

copy_modules () { # Copy all files of build directory to that of the working directory.
  echo "Calculating build folder size..."
  buildFolderSize=$( du -a $buildDir/$nm | wc -l )
  echo "Copying files from build directory to working directory..."
  rsync -avI $buildDir/$nm/. $workDir/$nm/ | pv -lfpes "$buildFolderSize" > /dev/null
  echo "Creating flag to indicate $nm is in sync..."
  touch $workDir/$nm/.docked # Docked file is a flag that tells the files were copied already from the build directory.
}

delete_modules () { # Delete old module files.
    echo "Calculating incompatible $1 direcotry $nm folder size..."
    folderSize=$( du -a $2/$nm | wc -l )
    echo "Deleting incompatible $1 directory $nm folder..."
    rm -rfv $2/$nm/* | pv -lfpes "$folderSize" > /dev/null # Delete all files in node_modules.
    rm -rf $2/$nm/.* 2> /dev/null # Delete all hidden files in node_modules.node_modules.
}

#########################
# End Functions
# Begin Script
#########################

if cmp -s $buildDir/$lock $workDir/$lock >/dev/null 2>&1 # Compare lock files.
  then
    # Delete old modules.
    delete_modules "build" "$buildDir"
    # Remove old build package.
    rm -rf $buildDir/$package 2> /dev/null
    rm -rf $buildDir/$lock 2> /dev/null
    # Copy package.json from working directory to build directory.
    rsync --info=progress2 $workDir/$package $buildDir/$package
    rsync --info=progress2 $workDir/$lock $buildDir/$lock
    cd $buildDir/ || return
    yarn
    delete_modules "working" "$workDir"
    copy_modules

# Check if the directory is empty, as it is when it is mounted for the first time.
elif [ -z "$(ls -A $workDir/$nm)" ]
  then
    copy_modules
elif [ ! -f "$workDir/$nm/.docked" ] # Check if modules were copied from build directory.
  then
    # Delete old modules.
    delete_modules "working" "$workDir"
    # Copy modules from build directory to working directory.
    copy_modules
else
    echo "The node_modules folder is good to go; skipping copying."
fi

#########################
# End Script
#########################

if [ "$1" != "git" ] # Check if script was not run by git-merge hook.
  then
    # Change to working directory.
    cd $workDir/ || return
    # Run yarn start command to start development.
    exec yarn start:debug
fi

我补充说pv，至少，向用户展示正在发生的事情的进展。此外，我添加了一个标志，表明它node_modules是通过容器安装的。

每当安装一个包时，我使用文件的postinstallandpostuninstall挂钩将and文件从工作目录package.json复制到构建目录，以保持它们是最新的。我还安装了软件包以确保钩子正常工作。package.jsonyarn.lockpostinstall-postinstallpostuninstall

"postinstall"  : "if test $DOCKER_FLAG = 1; then rsync -I --info=progress2 /home/node/work-dir/package.json /home/node/build-dir/package.json && rsync -I --info=progress2 /home/node/work-dir/yarn.lock /home/node/build-dir/yarn.lock && echo 'Build directory files updated.' && touch /home/node/work-dir/node_modules/.docked; else rm -rf ./node_modules/.docked && echo 'Warning: files installed outside container; deleting docker flag file.'; fi",
"postuninstall": "if test $DOCKER_FLAG = 1; then rsync -I --info=progress2 /home/node/work-dir/package.json /home/node/build-dir/package.json && rsync -I --info=progress2 /home/node/work-dir/yarn.lock /home/node/build-dir/yarn.lock && echo 'Build directory files updated.' && touch /home/node/work-dir/node_modules/.docked; else rm -rf ./node_modules/.docked && echo 'Warning: files installed outside container; deleting docker flag file.'; fi",

我使用了一个名为的环境变量DOCKER_FLAG并将其设置1在docker-compose.yml文件中。这样，当有人在容器外安装时，它就不会运行。此外，我确保删除.docked标志文件，以便脚本知道它已使用主机命令安装。

至于node_modules每次拉取时同步的问题，我用了一个git hook；即合并后的钩子。每次我拉时，entrypoint.sh如果容器正在运行，它将尝试运行脚本。它还将为脚本提供一个参数，git脚本检查为 not run exec yarn:debug，因为容器已经在运行。这是我的脚本.git/hooks/post-merge：

#!/bin/bash

if [ -x "$(command -v docker)" ] && [ "$(docker ps -a | grep <container_name>)" ]
then
  exec docker exec <container_name> sh -c "/home/node/build-dir/entrypoint.sh git"
  exit 1
fi

如果容器没有运行，并且我获取了更改，那么entrypoint.sh脚本将首先检查锁定文件之间是否有任何差异，如果有，它将重新安装在构建目录中，并执行镜像时所做的操作首次创建并运行容器。本教程可以用来与队友分享钩子。

注意：请务必使用docker-compose run...，因为docker-compose up...不会出现进度指示器。

score 0 · Accepted Answer

改变：

  volumes:
    - .:/usr/src/app
    - /usr/src/app/node_modules

至：

  volumes:
    - .:/usr/src/app

它会将 node_modules 放在您的本地映射卷中。您拥有它的方式/usr/src/app/node_modules将存储在您需要docker inspect {container-name}查找位置的不同卷中。如果您确实想指定位置，请按如下方式指定：

- /path/to/my_node_modules:/usr/src/app/node_modules

node.js - node_modules 上的 docker-compose 卷但为空

5 回答 5

最简单的解决方案

Related

Reference