1

Is it possible to have processIsolation enabled in cluster policy on terraform for Databricks only if serverless is selected ?

如果选择了 singleNode,我不想使用这个 spark_conf。从我的角度来看,如果没有手动交互(删除 conf 中的行)或创建两种不同的集群策略,我们无法做到这一点:一种用于单节点,另一种用于高并发。

主要目标是为单节点和无服务器提供相同的集群策略。

4

1 回答 1

0

不,这是不可能的——你需要有两个不同的集群策略。集群策略会根据您配置的设置进行检查,集群类型的下拉列表只是填写正确的 Spark conf 设置。

如果您想拥有通用的集群策略,只需按照文档中的示例进行操作,其中您有默认策略,然后通过与覆盖合并来添加更多设置。

于 2021-11-21T10:11:46.993 回答