我想分享我关于 dataprep 产品限制的发现之一。
我是在构建流程中,我需要在进一步处理之前组合一些 json 文件。然后通过最后的参考数据集组合流。
经过一番努力,我注意到当用作输入的 json 文件总数低于 15 个左右时,可以启动数据流作业。
但是,超过此限制将导致失败,无需任何解释。
如果有人可以更深入地了解这个问题,那就太好了: * 为什么会有这样的限制?* 是否是另一个可能让我认为存在限制的问题?* 有没有一种快速的方法来识别 dataprep 中这些类型的问题/错误的来源?* 有没有办法增加输入文件的数量?
干杯,布拉姆