Resultados da pesquisa a pedido "elastic-map-reduce"

7 a resposta

Programando um trabalho no AWS EC2

Tenho um site em execução no AWS EC2. Preciso criar um trabalho noturno que gere um arquivo de sitemap e faça o upload dos arquivos para os vários navegadores. Estou procurando um utilitário na AWS que permita essa funcionalidade. Eu considerei ...

2 a resposta

hadoop convertendo \ r \ n para \ n e quebrando o formato ARC

Estou tentando analisar dados do commoncrawl.org usando o hadoop streaming. Eu configurei um hadoop local para testar meu código e tenho um mapeador Ruby simples que usa um leitor ARCfile de streaming. Quando invoco meu código como cat ...

4 a resposta

Como especificar configurações mapred e opções de java com jar personalizado na CLI usando o EMR da Amazo

Gostaria de saber como especificar configurações de mapreduce como mapred.task.timeout, mapred.min.split.size etc., ao executar um trabalho de streaming usando jar personalizad Podemos usar a seguinte maneira de especificar essas ...

6 a resposta

Exportar a tabela do Hive para um bucket S3

Criei uma tabela do Hive por meio de uma sessão interativa do Elastic MapReduce e a preenchi em um arquivo CSV como este: CREATE TABLE csvimport(id BIGINT, time STRING, log STRING) ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t'; LOAD DATA LOCAL ...