Невозможно запустить SparkR в Rstudio

Question

Я не могу использовать sparkR в Rstudio, потому что им получить некоторые ошибки: Ошибка в sparkR.sparkContext (мастер, APPNAME, sparkHome, sparkConfigMap,:

JVM is not ready after 10 seconds

Я пытался искать для решение, но не могу найти один Вот как я попытался настройки sparkR:.

Sys.setenv(SPARK_HOME="C/Users/alibaba555/Downloads/spark") # The path to your spark installation 

.libPaths(c(file.path(Sys.getenv("SPARK_HOME"), "R", "lib"), .libPaths())) 

library("SparkR", lib.loc="C/Users/alibaba555/Downloads/spark/R") # The path to the lib folder in the spark location 

library(SparkR) 

sparkR.session(master="local[*]",sparkConfig=list(spark.driver.memory="2g")* 

Теперь исполнения starst с сообщением:

Launching java with spark-submit command C/Users/alibaba555/Downloads/spark/bin/spark-submit2.cmd
sparkr-shell C:\Users\ALIBAB~1\AppData\Local\Temp\Rtmp00FFkx\backend_port1b90491e4622

И, наконец, через несколько минут он возвращается сообщение об ошибке:

Error in sparkR.sparkContext(master, appName, sparkHome, sparkConfigMap, : JVM is not ready after 10 seconds

Спасибо!

Answer 1

Похоже, что путь к вашей библиотеке искры неверен. Это должно быть примерно так: library("SparkR", lib.loc="C/Users/alibaba555/Downloads/spark/R/lib")

Я не уверен, что это исправит вашу проблему, но это может помочь. Кроме того, какие версии Spark/SparkR и Scala вы используете? Вы строили из источника?