¿Hay alguna forma de enviar un archivo completo a un asignador sin dividirlo?

he leídoesta pero me pregunto si hay otra forma de hacer lo mismo sin tener que generar un archivo intermedio. Idealmente, me gustaría una opción existente en la línea de comandos para Hadoop.

Estoy usando elstreaming Instalación con scripts de Python en Amazon EMR.