主要是Eclipse下需要多一步配置,就是需要加上SPARK_HOME的系统变量。

首先,在Windows的环境变量中加入SPARK_HOME

Eclipse下使用PySpark报Could not find valid SPARK_HOME while searching-LMLPHP

然后,在Eclipse的配置中加入这个环境变量:

Window=>Preferences=>  剩下的见下图

Eclipse下使用PySpark报Could not find valid SPARK_HOME while searching-LMLPHP

05-23 10:28