Разница между работой на R, непосредственно работающей под install.packages ("sparklyr")

Question

Я только что читал статью https://spark.rstudio.com/ Но я не уверен, в чем разница между работой над R, работающей напрямую под install.packages("sparklyr") пакетами

Не могли бы вы дать мне знать, я запутался

Answer 1

Пакет sparklyr дает вам очень похожую на env среду, которую tidy и dplyr предоставляет вам в R. Но вы напрямую работаете с spark, тогда вам придется использовать контекст spark для запуска ваших команд. Ниже приведена документация:

https://spark.apache.org/docs/latest/sparkr.html