Como converter uma tabela SQL de 500GB para Apache Parquet?

Talvez isso esteja bem documentado, mas estou ficando muito confuso sobre como fazer isso (existem muitas ferramentas Apache).

Quando crio uma tabela SQL, crio a tabela usando os seguintes comandos:

CREATE TABLE table_name(
   column1 datatype,
   column2 datatype,
   column3 datatype,
   .....
   columnN datatype,
   PRIMARY KEY( one or more columns )
);

Como alguém converte essa tabela existente em Parquet? Este arquivo está gravado no disco? Se os dados originais tiverem vários GB, quanto tempo é preciso esperar?

Em vez disso, eu poderia formatar os dados brutos originais no formato Parquet?

questionAnswers(2)

yourAnswerToTheQuestion