Запуск программы Spark SQL (v2.1.0_2.11) в Java немедленно завершается с последующим исключением, как только первое действие вызывается в кадре данных:
java.lang.ClassNotFoundException: org.codehaus.commons.compiler.UncheckedCompileException
Я запустил его в Eclipse вне среды spark-submit
. Я использую следующую зависимость Spark SQL Maven:
<dependency>
<groupId>org.apache.spark</groupId>
<artifactId>spark-sql_2.11</artifactId>
<version>2.1.0</version>
<scope>provided</scope>
</dependency>