0

我正在尝试将我的代码编译成一个 JAR 文件，以便与 Hadoop 的 MapReduce 一起使用。我的主类是 VectorMaker.java，director 结构如下。

RandomForestVectors
 /bin
 /lib
   /hadoop-core-1.2.0.jar
   /mahout-core-0.7.jar
   /mahout-math-0.7.jar
   /opencsv-2.3.jar
 /VectorMaker.java

这些是我用来制作 JAR 文件的命令。

   javac -classpath "./lib/*" -d ./bin ./VectorMaker.java
   jar cf VectorMaker.jar -C "./bin/" . &

这是我用来尝试将我的 JAR 文件作为 Hadoop MapReduce 程序运行的命令。

hadoop jar VectorMaker.jar VectorMaker user/starmine/AlphaDefault/mahout/random_forest/prevectors  /user/starmine/AlphaDefault/mahout/random_forest/test1


Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/mahout/math/VectorWritable
    at VectorMaker.main(VectorMaker.java:67)
    at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
    at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:39)
    at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:25)
    at java.lang.reflect.Method.invoke(Method.java:597)
    at org.apache.hadoop.util.RunJar.main(RunJar.java:208)
Caused by: java.lang.ClassNotFoundException: org.apache.mahout.math.VectorWritable
    at java.net.URLClassLoader$1.run(URLClassLoader.java:202)
    at java.security.AccessController.doPrivileged(Native Method)
    at java.net.URLClassLoader.findClass(URLClassLoader.java:190)
    at java.lang.ClassLoader.loadClass(ClassLoader.java:306)
    at java.lang.ClassLoader.loadClass(ClassLoader.java:247)

我知道我需要以某种方式使我的 JAR 文件包含我所有的依赖项，但我不确定如何。

4

1 回答 1

0

Make sure you have all your dependencies in your classpath, including all the Mahout libraries. Alternatively you can specify the path through -classpath while compiling you program.

javac -classpath -classpath $MAHOUT_HOME/lib/*

于 2013-09-18T19:12:46.043 回答