r - 无法将 R rhdfs API 与运行在不同 IP 地址上的 Hadoop 集群连接

Question

添加 Hadoop 主页

Sys.setenv("HADOOP_HOME"="ssh://root@192.168.10.70/home/easy/hadoop")

设置 HADOOP CMD 路径

Sys.setenv("HADOOP_CMD"="ssh://root@192.168.10.70/home/easy/hadoop/bin/hadoop")

Sys.setenv("JAVA_HOME"="/usr/java/jdk1.7.0_67-cloudera")

Sys.setenv("HADOOP_STREAMING"="ssh://root@192.168.10.70/home/easy/hadoop/share/hadoop/tools/lib/hadoop-streaming-2.6.0.jar")

Sys.setenv("HADOOP_LIB"="ssh://root@192.168.10.70/home/easy/hadoop/lib")

加载库 rhdfs

library(rhdfs)

初始化hdfs

hdfs.init()