我在我们启动 dask-scheduler 的区域 us-east1 中有一个 kubernetes 集群,我想在我们想运行 dask-workers 的区域 us-west1 启动另一个集群。据我了解调度程序和工作人员之间的连接是双向的,所以我不能使用外部 IP 公开调度程序,我也必须公开工作人员。也许有一些方法可以避免这个问题并且不暴露每个工作人员或者以某种方式可以为不同区域的两个集群配置网络并能够在它们之间进行通信
问问题
52 次
1 回答
1
我建议在同一区域运行 dask 工作程序和调度程序,并且理想情况下在网络中彼此相当接近。
如果您必须有一个远程连接,那么执行此操作的地方是在客户端和调度程序之间。这篇博文可能会有所帮助:https ://words.yuvi.in/post/dask-local-kubernetes/
于 2020-06-27T16:32:04.050 回答