问题标签 [caffe-on-spark]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票
1 回答
168 浏览

apache-spark - Yahoo - 对 Spark 库依赖的 caffe?

雅虎昨天刚刚发布了一个使用最新版本 Apache-Spark 的 caffe 版本,git repo 还没有很好的文档记录:git link

有一个 scala 测试文件,假设运行一个示例:Scala Example

但它需要依赖 com.yahoo.ml.caffe.{Config, CaffeOnSpark, DataSource} 我假设它基本上包含数据、配置和 API。这已经被做成图书馆了吗?我如何使用 sbt 构建它?

0 投票
3 回答
2105 浏览

java - 'src/main/java/caffe/Caffe.java 需要 CaffeonSpark 构建错误 caffe.proto

我正在尝试让 CaffeOnSpark 在本地运行,我在 CaffeOnSpark wiki 上遵循此过程:https ://github.com/yahoo/CaffeOnSpark/wiki/GetStarted_local

前 4 项对我有好处。但是,当我在第 5 步中进行 Make 构建时。我在 protoc 上收到此错误:

整个错误堆栈:

似乎 protoc 找不到它的规则。你有没有遇到过这个问题?请帮帮我!

我的协议版本是 2.5.0。

0 投票
1 回答
141 浏览

caffe-on-spark - 运行 CaffeOnSpark 示例时找不到文件“lenet_memory_train_test.prototxt”

我正在尝试在此链接之后运行 caffeonspark 示例: https ://github.com/yahoo/CaffeOnSpark/wiki/GetStarted_local 我可以一直运行到 python 部分(此链接中的第 9 步)。但是,在以下链接中运行示例步骤时:https ://github.com/yahoo/CaffeOnSpark/wiki/GetStarted_python会导致以下给定错误...

当前目录({SPARK_HOME}/data)的内容如下:

如果有人尝试过并且知道它,请告诉我为什么它给我错误。

0 投票
2 回答
157 浏览

caffe - CaffeonSpark 构建错误

我正在尝试让 CaffeOnSpark 在本地运行,并且我已经成功编译并运行了 caffe,我还安装了 opencv,但编译 CaffeOnSpark 失败。

我进行构建时的整个错误堆栈是:

0 投票
0 回答
400 浏览

caffe-on-spark - CaffeOnSpark/Scala--错误 yarn.ApplicationMaster:用户类抛出异常:java.lang.NullPointerException

当我使用带有以太网连接的 2 个 Spark 执行器的 CaffeOnSpark 训练 DNN 网络时,出现错误。我以https://github.com/yahoo/CaffeOnSpark/wiki/GetStarted_yarn上的示例运行该作业

这是我得到的错误。

当我看到数据节点的日志时,错误如下。 数据节点日志

非常感谢您的回答。