* dicionário python * grande com armazenamento de persistência para pesquisas rápidas
Tenho 400 milhões de linhas de informações exclusivas de valor-chave que gostaria de disponibilizar para pesquisas rápidas em um script. Eu estou querendo saber o que seria uma maneira esperta de fazer isso. Eu considerei o seguinte, mas não tenho certeza se há uma maneira de mapear o dicionário em disco e sem usar muita memória, exceto durante a criação do dicionário.
objeto de dicionário em conserva: não tenho certeza se esta é uma solução ideal para o meu problemaDbases do tipo NoSQL: idealmente, queremos que algo que tenha dependência mínima de material de terceiros, além do valor-chave, seja simplesmente um número. Se você acha que esta ainda é a melhor opção, eu gostaria de ouvir isso também. Pode ser que isso me convença.Por favor, deixe-me saber se alguma coisa não está clara.
Obrigado! -Abhi