2

R 未检测到为使用 sparklyr 包而安装的最新 Java 版本 (1.8)。

config <- spark_config()
config$sparklyr.gateway.port = 10000
config$sparklyr.gateway.connect.timeout = 1  
config$sparklyr.gateway.start.wait = 1000
library(sparklyr)
library(dplyr) 
library(DBI)
sc <- spark_connect(master="yarn-client", method = c("shell"),config=config, app_name = "sparklyr",version="2.0.0", extensions = sparklyr::registered_extensions())

Error in validate_java_version(spark_home) : 
Java version1.6.0.65 detected but 1.7+ is required. Please download and 
install Java from https://www.java.com/en/

我更新了 Java 版本并在 Mac 终端中确认。然后我重新启动了 Rsession：

/Library/Internet\ Plug-Ins/JavaAppletPlugin.plugin/Contents/Home/bin/java -
version 
java version "1.8.0_121"
Java(TM) SE Runtime Environment (build 1.8.0_121-b13)
Java HotSpot(TM) 64-Bit Server VM (build 25.121-b13, mixed mode)

但我仍然收到同样的错误过时的 Java 版本：

Error in validate_java_version(spark_home) : 
Java version1.6.0.65 detected but 1.7+ is required. Please download and 
install Java from https://www.java.com/en/

知道如何解决这个问题吗？

4

2 回答 2

4

目前（2019 年开始，版本 0.9.4）sparklyr需要 java v1.7-1.8，macOSX 上安装的默认版本通常为 1.6。

您可以在终端中检查您的版本

java -version

如果你得到类似的东西

java version "1.6.0_65"
Java(TM) SE Runtime Environment (build 1.6.0_65-b14-468-11M4833)
Java HotSpot(TM) 64-Bit Server VM (build 20.65-b04-468, mixed mode)

你需要更新它。如果您已brew安装，只需执行以下操作：

brew tap caskroom/versions
brew cask install java8

完成后，您可以使用以下命令检查本地计算机上的安装

ls -1 /Library/Java/JavaVirtualMachines/

通常，重新启动 R 会话后，sparklyr应该识别正确的版本（1.8）。如果不是这种情况，您可以使用以下命令设置JAVA_HOME环境变量R：

Sys.setenv(JAVA_HOME = "/Library/Java/JavaVirtualMachines/jdk1.8.0_172.jdk/Contents/Home")

当使用RStudio 推荐的local模式连接指南时，这对我有用。

我有另一个java版本，我该怎么办？

java8调用时键入很重要，brew cask install否则将安装最新版本的 java。我犯了这个错误并安装了openjdk version "11.0.2" 2019-01-15.

如果您有类似的情况，请brew cask remove java卸载 java 并获取所需的正确版本。

此信息来自sparklyr GitHub Repo 上的一个问题和另一个stackOverflow 问题。

于 2019-02-17T21:42:50.333 回答
0

我可以通过从以下网站安装最新的 JAVA 版本来解决此问题：

http://www.oracle.com/technetwork/java/javase/downloads/index.html

您可以通过在 mac 终端上运行以下命令进一步检查版本是否更新成功：

java -version

现在我可以使用 sparklyr 包了。

于 2017-04-02T01:05:37.670 回答