União de faísca de vários RDDs
No meu código de porco, faço o seguinte:
all_combined = Union relation1, relation2,
relation3, relation4, relation5, relation 6.
Eu quero fazer o mesmo com faísca. No entanto, infelizmente, vejo que tenho que continuar fazendo isso aos pares:
first = rdd1.union(rdd2)
second = first.union(rdd3)
third = second.union(rdd4)
# .... and so on
Existe um operador sindical que me permita operar em vários rdds por vez:
por exemplo.union(rdd1, rdd2,rdd3, rdd4, rdd5, rdd6)
É uma questão de conveniência.