google-compute-engine - 无法删除 Cloud TPU

Question

我有一个 TPU 节点名称“demo-tpu”，我尝试使用以下命令删除它gcloud beta compute tpus delete demo-tpu

这会导致以下错误消息：

ERROR: (gcloud.beta.compute.tpus.delete) ABORTED: The resource is already in the process of being deleted

但是，当我使用 command 时gcloud beta compute tpus describe demo-tpu，它说 TPU 正在重新启动。

我也尝试在 GCP 控制台中使用删除选项，但它似乎也不起作用。任何的意见都将会有帮助。

Answer 1

更新：该节点确实被删除了，但在大约 40 分钟后，而不是通常的 2 分钟。仍然不知道是什么导致了问题。

Answer 2

此后，Google Cloud 团队推出了ctpu工具。它使用ctpu up和ctpu delete包装启动和删除操作。但正如您可能已经观察到的那样，第一次启动 TPU 并删除 VM 和/或 TPU 需要时间。

您可能还需要仔细检查 GCE 控制台中的“VM 实例”和“TPU”选项卡，以确保资源确实已被删除。

仅供参考，您可以在本地安装ctpu，到目前为止效果很好。