-2

Я пытаюсь использовать последнюю Spark api с SparkSession.объект SparkSession не входит в пакет org.apache.spark.sql

Пока я импортирую пакет, мое затмение показывает сообщение об ошибке в приложении.

Я использую 2.10.6 компилятор scala.

Пожалуйста, помогите мне решить эту проблему.

pom code

+2

вы ** искрового SQL ** и ** искрового ядро ​​** версии несовместимы. попробуйте использовать либо cdh, либо apache. – mrsrinivas

+2

@mrsrinivas и - они оба очень старые и поэтому не содержат нового 'SparkSeesion' - используйте 2.0.0 или новее –

ответ

2

Ваша версия указана в Maven слишком стар. SparkSession представлен в Spark 2.0. Вам необходимо использовать Spark 2.0.0 или новее, чтобы импортировать его. Ответы вопроса ниже, могут помочь вам настроить детали:

What is version library spark supported SparkSession

Смежные вопросы