1

ModuleNotFound尝试导入本地模块时，工作程序 Pod 出现错误。我可以在主节点上毫无问题地导入。主人和工人使用完全相同的图像。

图像上的工作目录组织如下：

WorkDIR/
       TheNotebook.ipynb
       MyModule/
                __init__.py
                myModule.py

笔记本类似于

from MyModule import workerFunc

fut = daskClient.submit(workerFunc,*workerArgs);
fut.result()

产生：

/usr/local/lib/python3.6/site-packages/distributed/client.py in result(self, timeout)
    222         if self.status == "error":
    223             typ, exc, tb = result
--> 224             raise exc.with_traceback(tb)
    225         elif self.status == "cancelled":
    226             raise result

/usr/local/lib/python3.6/site-packages/distributed/protocol/pickle.py in loads()
     57 def loads(x):
     58     try:
---> 59         return pickle.loads(x)
     60     except Exception:
     61         logger.info("Failed to deserialize %s", x[:10000], exc_info=True)

ModuleNotFoundError: No module named MyModule

我没有在 docker 映像中“安装”模块，我只是假设 worker pod 上的工作目录与 docker 映像上的 WORKDIR 相同。这是不正确的吗？我需要创建setup.py并安装MyModule吗？

谢谢！

4

2 回答 2

1

听起来您PYTHONPATH的工作人员中没有设置当前目录。

你需要在你的Dockerfile：

ENV PYTHONPATH ".:${PYTHONPATH}"

这将在检查路径中的其他模块之前检查当前目录中的模块。因此它也可以用来覆盖已安装的库。

有关更多信息，请参阅如何在 Dockerfile 中添加 PYTHONPATH 的路径。

于 2020-01-17T11:13:58.263 回答
1

雅各布引导我找到答案。'./' 目录没有被添加到 worker 的路径中。为了解决这个问题，我只是在我的 Dockerfile 中添加了以下行。

ENV PYTHONPATH "${PYTHONPATH}:./"
于 2020-01-16T18:34:58.833 回答