由于document提到了如何在不使用无密码访问权限设置ssh的情况下设置Spark集群:
我想知道如何使用SPARK_SSH_FOREGROUND变量？
最佳答案
可以将环境变量SPARK_SSH_FOREGROUND设置为yes或y之类的内容，以在前台执行ssh
如您在源代码中看到的:
https://github.com/apache/spark/pull/2444/commits/1bba8a959ea9ecf21eb0783d3ce302065bf1a154
if [ "${SPARK_SSH_FOREGROUND}" = "y" ] || [ "${SPARK_SSH_FOREGROUND}" = "yes" ]; then
ssh $SPARK_SSH_OPTS "$slave" $"${@// /\\ }" \
关于ssh - 创建无需ssh无需密码即可访问的spark集群，我们在Stack Overflow上找到一个类似的问题：https://stackoverflow.com/questions/37246119/