http://spark.apache.org/docs/latest/rdd-programming-guide.html#rdd-persistence

оложим, у нас есть СДР, который используется несколько раз. Поэтому, чтобы снова и снова сохранять вычисления, мы сохранили этот RDD, используя метод rdd.persist ().

Поэтому, когда мы сохраняем этот RDD, узлы, вычисляющие RDD, будут хранить свои разделы.

Итак, предположим, что узел, содержащий этот постоянный раздел RDD, дает сбой, тогда что произойдет? Как искра восстановит потерянные данные? Есть ли механизм репликации? Или какой-то другой механизм?

Ответы на вопрос(2)

Ваш ответ на вопрос