O que o Spark recupera os dados de um nó com falha?

Suponha que tenhamos um RDD, que está sendo usado várias vezes. Portanto, para salvar os cálculos repetidamente, persistimos esse RDD usando o método rdd.persist ().

Portanto, quando persistimos esse RDD, os nós que computam o RDD armazenam suas partições.

Então agora suponha que o nó que contém esta partição persistente de RDD falha, o que acontecerá? Como o spark recuperará os dados perdidos? Existe algum mecanismo de replicação? Ou algum outro mecanismo?

questionAnswers(2)

yourAnswerToTheQuestion