0

我的 spark 程序在远程 ubuntu 系统中。现在我想使用 paramiko（用于 SSH2 连接的 python 包）从 Windows 系统执行它。

windows中远程执行spark程序的程序

问题是我可以在远程ubuntu系统中执行python程序，但不能执行spark程序。有谁知道为什么？

4

1 回答 1

0

很可能您应该设置 spark 环境变量。在要启动 spark 应用程序的远程实例上，在 .bashrc 文件中为 spark 输入一个条目

SPARK_HOME=*<path to your spark folder>*

export PATH=$SPARK_HOME/bin:$PATH

然后通过命令获取更改后的 .bashrc 文件

source  ~/.bashrc
于 2017-07-20T06:38:17.697 回答