Какие файлы генерируются Spark при использовании «saveAsTextFile»?
Когда я запускаю задание Spark и сохраняю вывод в виде текстового файла, используя метод «saveAsTextFile», как указано вhttps://spark.apache.org/docs/0.9.1/api/core/index.html#org.apache.spark.rdd.RDD :
вот файлы, которые создаются:
Является ли файл .crc файлом проверки на циклическую избыточность? и так используется для проверки правильности содержимого каждого сгенерированного файла?
Файл _SUCCESS всегда пуст, что это значит?
Файлы, которые не имеют расширения на приведенном выше снимке экрана, содержат фактические данные из СДР, но почему создается много файлов вместо одного?