- В чем разница между
SparkContext,
JavaSparkContext,
SQLContext
иSparkSession
? - Есть ли способ конвертировать или создавать контекст, используя
SparkSession
? - Могу ли я полностью заменить все контексты, используя одну запись
SparkSession
? - Все ли функции в
SQLContext
,SparkContext
иJavaSparkContext
также вSparkSession
? - Некоторые функции, такие как
parallelize
, имеют различное поведение вSparkContext
иJavaSparkContext
. Как они ведут себя вSparkSession
? Как я могу создать следующее, используя
SparkSession
?RDD
JavaRDD
JavaPairRDD
Dataset
Есть ли способ превратить JavaPairRDD
в Dataset
или Dataset
в JavaPairRDD
?