Resultados da pesquisa a pedido "gzip"

3 a resposta

Lidando com um grande arquivo compactado com gzip no Spark

Tenho um arquivo gzip grande (com cerca de 85 GB compactado) da s3 que estou tentando processar com o Spark no AWS EMR (agora com uma instância principal m4.xlarge e duas instâncias principais m4.10xlarge, cada uma com um volume EBS de 100 GB) . ...

2 a resposta

Como posso criar uma instância GzipFile a partir do "objeto semelhante a arquivo" que urllib.urlopen () retorna?

Estou brincando com a API Stack Overflow usando Python. Estou tentando decodificar as respostas compactadas que a API fornece. import urllib, gzip url ...

2 a resposta

saveRDS inflando o tamanho do objeto

Este é um caso complicado, pois não posso fornecer um exemplo reproduzível, mas espero que outros possam ter tido experiência em lidar com isso. Essencialmente, tenho uma função que extrai uma grande quantidade de dados de um banco de dados, ...

1 a resposta

Python3: sem gzip ou zlib?

este módulo está nomeado outra coisa agora? Não consigo encontrar nenhuma informação dizendo que este módulo foi descontinuado ou descartado completamente. (o que me confundiria ainda mais) Alguém sabe onde isso foi? Python 3.1.2 (r312:79147, ...

12 a resposta

Formatos de compressão com bom suporte para acesso aleatório dentro de arquivos?

Isso é semelhante a umpergunta anterior [https://stackoverflow.com/questions/236414/], mas as respostas não satisfazem minhas necessidades e minha pergunta é um pouco diferente: Atualmente, uso a compactação gzip para arquivos muito grandes que ...

3 a resposta

A página exibe símbolos aleatórios em vez de uma mensagem de erro no Firefox

Aleatoriamente, em alguns projetos, algumas páginas exibem símbolos aleatórios em vez de uma mensagem de erro. Como este : I�%&/m�{J�J��t��$ @ iG #) * eVe] f @ 흼 { { ; N; ; |? " Ey ') = y6 h i 7i ޴ i L , 4 ̧i Ͼ | uz : } ...

1 a resposta

O arquivo Parquet com gzip pode ser dividido no HDFS for Spark?

Recebo mensagens confusas ao pesquisar e ler respostas na Internet sobre esse assunto. Alguém pode compartilhar sua experiência? Eu sei que csv compactado com gzip não é, mas talvez as estruturas internas de arquivo do Parquet sejam de tal ordem ...

6 a resposta

Como habilitar o gzip?

Encontrei alguns tutoriais sobre como habilitar o gzip, mas nada parece estar funcionando para mim, então minha pergunta é como habilito o gzip. Estou em um servidor de hospedagem compartilhado Dreamhost, está executando o PHP versão 5.2 e ...

10 a resposta

Como verificar se o InputStream está compactado com Gzip?

Existe alguma maneira de verificar se o InputStream foi compactado? Aqui está o código: public static InputStream decompressStream(InputStream input) { try { GZIPInputStream gs = new GZIPInputStream(input); return gs; } catch (IOException e) { ...

4 a resposta

Descompactando um arquivo .gz via PHP

Eu preciso ser capaz de descomprimir através do PHP alguns dados que eu tenho em uma string que usa ogzip formato. Eu preciso fazer isso via PHP, não chamando - atravéssystem por exemplo - um programa externo. Eu vou para a documentação e ...