我是 Hadoop 新手,正在阅读“权威指南”一书。
在 ch02 中有一个简单的 hadoop 示例,它有一个映射器、一个 reducer 和一个具有 main 函数的类。
正如书中所说,我必须使用
% export HADOOP_CLASSPATH=hadoop-examples.jar
% hadoop MaxTemperature input/ncdc/sample.txt output
运行代码。MaxTemperature 是具有 main 方法的类,后跟输入和输出路径。
当我运行上面的命令时,我得到了异常:
Exception in thread "main" java.lang.NoClassDefFoundError: MaxTemperature
Caused by: java.lang.ClassNotFoundException: MaxTemperature
at java.net.URLClassLoader$1.run(URLClassLoader.java:217)
at java.security.AccessController.doPrivileged(Native Method)
at java.net.URLClassLoader.findClass(URLClassLoader.java:205)
at java.lang.ClassLoader.loadClass(ClassLoader.java:321)
at sun.misc.Launcher$AppClassLoader.loadClass(Launcher.java:294)
at java.lang.ClassLoader.loadClass(ClassLoader.java:266)
Could not find the main class: MaxTemperature. Program will exit.
我发现我没有 .class 文件,所以我尝试使用 javac 来编译 java 文件。然后它给了我错误,说无法找到来自 Hadoop 的所有类。
我转向eclipse,用hadoop构建路径创建了一个项目。显然它工作得很好,我在 eclipse 项目的 bin 文件夹中找到了 .class 文件。到了这个时候,因为我得到了那些 .class 文件,我可以使用:
% hadoop MaxTemperature input/ncdc/sample.txt output
我的问题是:
如何正确使用配置 hadoop 类路径以使用 javac 编译 java 文件并获取 .class 文件?
(我使用hadoop classpath
并发现 hadoop_classpath 太长了。我必须将类路径设置那么长吗?)
谢谢 :)