apache-spark - 无法从 spark shell 连接到 thrift 服务器

Question

我正在尝试使用以下命令通过 spark shell 连接到 spark thrift 服务器：

val df = spark
    .read
    .option("url", "jdbc:hive2://localhost:10000")
    .option("dbtable", "people")
    .format("jdbc")
    .load

错误：未找到：值火花

可能是什么原因？

Answer 1

当你在 shell 中输入 spark 时，你会得到什么信息？确保您有一个有效的火花会话。

res1: org.apache.spark.sql.SparkSession = org.apache.spark.sql.SparkSession@2bc0b8c8

是你应该看到的，如果你在 spark-shell 中没有看到，那么你可能没有正确启动 shell。