Resultados da pesquisa a pedido "tensorflow-datasets"

1 a resposta

Insira vários arquivos no conjunto de dados do Tensorflow

Eu tenho o seguinte input_fn. def input_fn(filenames, batch_size): # Create a dataset containing the text lines. dataset = tf.data.TextLineDataset(filenames).skip(1) # Parse each line. dataset = dataset.map(_parse_line) # Shuffle, repeat, and ...

5 a resposta

Significado de buffer_size em Dataset.map, Dataset.prefetch e Dataset.shuffle

Conforme TensorFlowdocumentação [https://www.te,nsorflow.org/versions/master/api_docs/python/tf/contrib/data/TFRecordDataset#prefetch] , aprefetch emap métodos detf.contrib.data.Dataset classe, ambos têm um parâmetro ...

3 a resposta

paralelizando tf.data.Dataset.from_generator

Eu tenho um pipeline de entrada não trivial quefrom_generator é perfeito para ... dataset = tf.data.Dataset.from_generator(complex_img_label_generator, (tf.int32, tf.string)) dataset = dataset.batch(64) iter = ...

2 a resposta

Na API do conjunto de dados do Tensorflow, como você mapeia um elemento em vários elementos?

No fluxo tensorDataset pipeline Gostaria de definir uma função de mapa personalizada que utiliza um único elemento de entrada (amostra de dados) e retorna vários elementos (amostras de dados). O código abaixo é minha tentativa, junto com os ...

1 a resposta

Numpy para TFrecords: Existe uma maneira mais simples de lidar com entradas em lote de tfrecords?

Minha pergunta é sobre como obter entradas em lote de vários tfrecords (ou sharded). Eu li o ...

1 a resposta

API do conjunto de dados Tensorflow: dataset.batch (n) .prefetch (m) pré-busca m lotes ou amostras?

Se eu usar dataset.batch(n).prefetch(m),m lotes ou m amostras serão pré-buscados?

2 a resposta

Como criar lotes acolchoados no Tensorflow para dados tf.train.SequenceExample usando a API DataSet?

Para treinar umModelo LSTMnoTensorflow, Estruturei meus dados em um tf.train.SequenceExampleformato e armazenado em umArquivo TFRecord. Gostaria agora de usar a nova API DataSet paragerar lotes acolchoados para treinamento. Noa documentação ...

1 a resposta

TensorFlow: “Não é possível capturar um nó com estado por valor” na API tf.contrib.data

Para o aprendizado de transferência, geralmente é usada uma rede como extrator de recursos para criar um conjunto de dados de recursos, nos quais outro classificador é treinado (por exemplo, um SVM). Quero implementar isso usando a API do ...

1 a resposta

Como alternar entre o conjunto de dados de treinamento e validação com tf.MonitoredTrainingSession?

Eu quero usarfeedable design do iterador na API do conjunto de dados tensorflow, para que eu possa alternar para dados de validação após algumas etapas de treinamento. Mas se eu mudar para os dados de validação, ele encerrará a sessão inteira. O ...

2 a resposta

O paralelismo não está reduzindo o tempo no mapa do conjunto de dados

A função TF Map suporta chamadas paralelas [https://www.tensorflow.org/versions/r1.4/api_docs/python/tf/data/Dataset#map]. Não vejo melhorias passandonum_parallel_calls mapear. Comnum_parallel_calls=1 enum_parallel_calls=10, não há melhoria no ...