我有一个非常复杂的管道,可以对给定数据执行多种机器学习算法。其中一种算法使用 GPU 进行处理。我想以某种方式将集群的几个节点与可用的 GPU 单元区分开来,这样算法就只能在这些分区上运行。Spark可以吗?
我知道在一般计算环境中拥有特定资源或多或少是不常见的,但是这个算法偶尔会运行一次,并且在其他时间保持静止 - 我也想使用这些节点。
我有一个非常复杂的管道,可以对给定数据执行多种机器学习算法。其中一种算法使用 GPU 进行处理。我想以某种方式将集群的几个节点与可用的 GPU 单元区分开来,这样算法就只能在这些分区上运行。Spark可以吗?
我知道在一般计算环境中拥有特定资源或多或少是不常见的,但是这个算法偶尔会运行一次,并且在其他时间保持静止 - 我也想使用这些节点。