-1

我刚刚安装了在 virtualbox 中运行的 mapr 沙盒虚拟机。VM 使用“NAT”网络模式设置,端口转发到我的 Mac (OSX 10.10)。由于端口被转发,我猜我应该能够访问“localhost”上的 hdfs。

现在我正在尝试列出 vm 上 hdfs 的内容:

unknown60F81DAE9820:loganalytics linseb$ hadoop fs -fs maprfs://localhost -ls /
15/03/25 15:16:11 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where    applicable
2015-03-25 15:16:11,6646 ERROR Cidcache fs/client/fileclient/cc/cidcache.cc:1586 Thread: 4548153344 MoveToNextCldb: No CLDB entries, cannot run, sleeping 5 seconds!
2015-03-25 15:16:16,6683 ERROR Client fs/client/fileclient/cc/client.cc:813 Thread: 4548153344 Failed to initialize client for cluster localhost:7222, error Connection refused(61)
ls: Could not create FileClient

我还尝试了 127.0.0.1、sudo 和端口:5660,但没有成功。

有任何想法吗?

4

2 回答 2

0

从 NAT 网络模式更改为主机仅解决了该问题。然后,当然我必须使用 VM 的 IP 来访问 maprfs。

于 2015-04-17T08:12:54.370 回答
-1

如果您只是在本地/单节点上运行普通 Spark,那么您不需要 HDFS,您可以只提及要从本地文件系统加载的输入和输出文件,如下所示:

file:///pathtoinput
file:///pathtooutput
于 2017-02-28T14:56:36.753 回答