java - 为什么在设置spark上下文时出现此错误？

我正在尝试如下设置spark上下文。

import org.apache.spark.SparkConf;
public class Main {
    public static void main(String []args){
        SparkConf conf = new SparkConf();
        SparkConf sparkConf = conf.setAppName("test");

    }
}

但是，intelliJ抛出错误，指示我无法在access the scala.Clonable行中使用SparkConf sparkConf = conf.setAppName("test");。

我正确地创建了gradle文档，以便将我需要的所有库都下载到我的存储库中，如下所示。

apply plugin: 'scala'

buildscript {
    repositories {
        mavenCentral()
    }
}

repositories {
    mavenLocal()
    mavenCentral()
}

dependencies{
    compile "org.apache.spark:spark-core_2.10:1.6.1"
}

我期待你的回复。

谢谢。

最佳答案

在我看来，您使用的Scala版本不正确。

尝试将scala库显式添加到依赖项

dependencies {
    compile 'org.scala-lang:scala-library:2.10.5'
}

这应该触发使用正确的scala编译器

关于java - 为什么在设置spark上下文时出现此错误？，我们在Stack Overflow上找到一个类似的问题：https://stackoverflow.com/questions/61318480/