Alguém tem uma visão geral em relação às vantagens / desvantagens do SparkR vs sparklyr? O Google não produz resultados satisfatórios e ambos parecem bastante semelhantes. Tentando as duas coisas, o SparkR parece muito mais complicado, enquanto o sparklyr é bastante direto (tanto para instalar quanto para usar, especialmente com as entradas dplyr). O sparklyr pode ser usado apenas para executar funções dplyr em paralelo ou também código R "normal"?

Melhor