hadoop - 简单的基于 deeplearning4J Java 的 Spark 示例？

Question

我需要在 hadoop 集群中运行一个简单的基于 Java 的 deeplearning4j 示例，我在这里找到了一个。我需要从命令行指定输入（应该是 HDFS 上的路径），输出应该转到 HDFS，以便稍后查看

但是，在示例中没有提及，它是硬编码来自本地文件系统的输入，输出到本地文件系统。

有人能帮我一下吗？

Answer 1

也许我们的示例中最近的拉取请求的某种组合： https ://github.com/deeplearning4j/dl4j-examples/pull/384

Spring-hadoop 可以帮助你吗？ http://projects.spring.io/spring-hadoop/

我的意思是从概念上讲，您要做的就是更改文件系统类型。

hadoop 中的 FileSystem api 可以指向本地或 hdfs url，因此应该没有太大变化。