Resultados da pesquisa a pedido "apache-spark-standalone"
instalação de janelas de faísca winutils
Estou tentando instalar o Spark 1.6.1 no Windows 10 e até agora fiz o seguinte ... Download do spark 1.6.1, descompactado em algum diretório e defina SPARK_HOMEDownload do scala 2.11.8, descompactado em algum diretório e defina SCALA_HOMEDefina ...
Apache Spark: diferenças entre os modos de implantação do cliente e do cluster
TL; DR:Em um cluster Independente do Spark, quais são as diferenças entre os modos de implantação do cliente e do cluster? Como definir em qual modo meu aplicativo será executado? Temos um cluster autônomo do Spark com três máquinas, todas elas ...
INFO continuamente JobScheduler: 59 - Trabalhos adicionados por tempo *** ms no meu cluster independente Spark
Estamos trabalhando com o Spark Standalone Cluster com 8 núcleos e 32 GB de RAM, com cluster de 3 nós com a mesma configuração. Algumas vezes, o lote de streaming é concluído em menos de 1 segundo. algumas vezes, leva mais de 10 segundos e o log ...
Driver de conexão independente Spark para trabalhador
Estou tentando hospedar localmente um cluster autônomo de faísca. Eu tenho duas máquinas heterogêneas conectadas em uma LAN. Cada parte da arquitetura listada abaixo está sendo executada no docker. Eu tenho a seguinte configuração mestre na ...