Compile Spark для Scala 2.11

Question

При компиляции Spark с Scala 2.11 мы получаем ошибки, связанные с spark-sql.

build/mvn -Dscala-2.11 -DskipTests clean package 

В искрообразование документы говорят: Спарк еще не поддерживает его JDBC компонент для Scala 2.11.

Должен быть способ скомпилировать без этого.

Как скомпилировать Spark для Scala 2.11?

Answer 1

Перед сборкой перспективы:

./dev/change-scala-version.sh 2.11 

изменить версию Scala. Как ни странно, это не упоминается в документах.

Кроме того, ошибка, вероятно, не связана непосредственно с spark-sql, а скорее с зависимостью, которая была скомпилирована с помощью Scala 2.10.