Загрузка com.databricks.spark.csv через RStudio
Я установил Spark-1.4.0. Я также установил его R-пакет SparkR и могу использовать его через Spark-shell и через RStudio, однако есть одно отличие, которое я не могу решить.
При запуске SparkR-оболочки
./bin/sparkR --master local[7] --packages com.databricks:spark-csv_2.10:1.0.3
Я могу прочитать .csv-файл следующим образом
flights <- read.df(sqlContext, "data/nycflights13.csv", "com.databricks.spark.csv", header="true")
К сожалению, когда я запускаю SparkR через RStudio (правильно настраивая SPARK_HOME), я получаю следующее сообщение об ошибке:
15/06/16 16:18:58 ERROR RBackendHandler: load on 1 failed
Caused by: java.lang.RuntimeException: Failed to load class for data source: com.databricks.spark.csv
Я знаю, что должен загрузить com.databricks: spark-csv_2.10: 1.0.3, но я не знаю, как это сделать. Может ли кто-нибудь помочь мне?