Resultados da pesquisa a pedido "large-data"
Como posso analisar ~ 13GB de dados?
Eu tenho ~ 300 arquivos de texto que contêm dados sobre rastreadores, torrents e peers. Cada arquivo é organizado assim:tracker.txt
PHP e o bebê de milhões de matriz
Imagine que você tenha a seguinte matriz de inteiros:
erro de estouro de pilha de proteção de contato
Eu estou usando fread no data.table (1.8.8, R 3.0.1) em uma tentativa de ler arquivos muito grandes.O arquivo em questão tem 313 linhas e ~ 6,6 milhões de co...
Como gravar com eficiência arquivos grandes em disco no thread de segundo plano (Swift)
Atualizar Resolvi e removi o erro de distração. Leia o post inteiro e fique à vontade para deixar comentários se houver alguma dúvida. fundo Estou tentando gravar arquivos relativamente grandes (vídeo) em disco no iOS usando o Swift 2.0, o GCD ...
Computações de log em Python
Estou procurando calcular algo como: Ondef(i) é uma função que retorna um número real em[-1,1] para qualqueri no{1,2,...,5000}. Obviamente, o resultado da soma está em algum lugar[-1,1], mas quando não consigo computar em Python usando ...
possível salvar apenas metade de uma matriz simétrica para economizar memóri
Existe uma matriz grande usada emAx=b tipo de problema.A é simétrico. Existe algum algoritmo que nos permita salvar apenas metade da matriz e fazer operações comox=A\b nele
Todos os k vizinhos mais próximos em 2D, C ++
Eu preciso encontrar para cada ponto do conjunto de dados todos os seus vizinhos mais próximos. O conjunto de dados contém aprox. 10 milhões de pontos 2D. Os dados estão próximos da grade, mas não formam uma grade precisa ... Esta opção exclui ...
Melhor das estruturas de dados de indexação de raças para séries temporais extremamente grandes
Gostaria de pedir a seus colegas SO'ers suas opiniões sobre as melhores estruturas de dados de raça para serem usadas na indexação de séries temporais (também conhecido como dados em colunas, também conhecido como linear xistem dois tipos ...
MATLAB permutando aleatoriamente colunas de maneira diferente
Eu tenho uma matriz muito grande A com N linhas e M colunas. Eu quero basicamente fazer a seguinte operação for k = 1:N A(k,:) = A(k,randperm(M)); endmas rápido e eficiente. (M e N são muito grandes, e esse é apenas um loop interno em um loop ...
MemoryError - como baixar arquivos grandes via SDK do Google Drive usando Python
Estou ficando sem memória ao baixar um arquivo grande do meu Google Drive. Eu assumo issotmp = content.read(1024) não funciona, mas como corrigi-lo? Obrigado. def download_file(service, file_id): drive_file ...