Вопросы по теме 'tensorflow-datasets'
Tensorflow: несовместимые типы для dataset.map() в tf.contrib.data
При использовании поиска хеш-таблицы с tf.contrib.Dataset.map() происходит сбой со следующей ошибкой:
TypeError: In op 'hash_table_Lookup', input types ([tf.string, tf.string, tf.int32]) are not compatible with expected types ([tf.string_ref,...
452 просмотров
schedule
04.08.2022
Как использовать инициализируемые итераторы tf.data в input_fn tf.estimator?
Я хотел бы управлять своим обучением с помощью tf.estimator.Estimator , но возникли проблемы с его использованием вместе с API tf.data .
У меня есть что-то вроде этого:
def model_fn(features, labels, params, mode):
# Defines model's...
4529 просмотров
schedule
05.07.2022
Numpy to TFrecords: есть ли более простой способ обработки пакетного ввода из tfrecords?
Мой вопрос о том, как получить пакетные данные из нескольких (или сегментированных) tfrecords. Я прочитал пример https://github.com/tensorflow/models/blob/master/inception/inception/image_processing.py#L410 . Базовый конвейер: возьмите обучающий...
8650 просмотров
schedule
23.03.2022
Как использовать подаваемый итератор из API набора данных Tensorflow вместе с MonitoredTrainingSession?
Руководство программиста Tensorflow рекомендует использовать итератор с возможностью передачи для переключения между набором данных для обучения и проверки без повторной инициализации итератора. . В основном требуется кормить ручку, чтобы выбрать...
3473 просмотров
schedule
08.10.2023
как перебирать данные, подаваемые с заполнителем в тензорном потоке, только один раз, используя новый API набора данных
Я начинаю использовать новый API набора данных, и одна вещь, которую я хочу сделать, не описана в документе ( https://www.tensorflow.org/programmers_guide/datasets#training_workflows )
Мои данные помещаются в память, поэтому я хочу загрузить их в...
4125 просмотров
schedule
17.10.2022
В оценщике Tensorflow, как это работает, когда model_fn вызывается несколько раз?
def model_fn(features, labels, mode, params):
"""Model function for Estimator."""
# Connect the first hidden layer to input layer
# (features["x"]) with relu activation
first_hidden_layer = tf.layers.dense(features["x"], 10,...
1028 просмотров
schedule
29.06.2022
Как выполнить итерацию набора данных несколько раз с помощью API набора данных TensorFlow?
Как вывести значение в наборе данных несколько раз? (набор данных создается Dataset API TensorFlow)
import tensorflow as tf
dataset = tf.contrib.data.Dataset.range(100)
iterator = dataset.make_one_shot_iterator()
next_element =...
20994 просмотров
schedule
07.06.2023
генерация на лету с набором данных api tensorflow
У меня есть функция, которая создает функции и целевые тензоры. Например.
x,t = myfunc() ##x,t tensors
Как я могу интегрировать это с API набора данных TensorFlow для непрерывного обучения? В идеале я хотел бы использовать набор данных для...
985 просмотров
schedule
07.06.2023
Как использовать итератор API набора данных tensorflow в качестве входных данных (рекуррентной) нейронной сети?
При использовании итератора Dataset API Iterator tensorflow моей целью является определение RNN, которая работает с тензорами get_next() итератора в качестве входных данных (см. (1) в коде).
Однако простое определение dynamic_rnn с...
3908 просмотров
schedule
19.12.2022
Как использовать собственные изображения в TensorFlow?
Я знаю, что этот вопрос задавался раньше, но я не смог найти ответ, с которым я мог бы работать. Я новичок в Python и Tensorflow, но мне удалось повысить точность до +-99,3% с помощью набора изображений MNIST. Теперь я хотел бы попробовать...
1349 просмотров
schedule
26.10.2022
Использует ли Tensorflow только одну горячую кодировку для хранения этикеток?
Я только начал работать с Tensorflow, с Caffe было очень практично читать данные эффективным способом, но с Tensorflow я вижу, что мне нужно самому писать процесс загрузки данных, создавать TFRecords, пакетирование, множественные угрозы, обрабатывать...
470 просмотров
schedule
01.03.2023
Tensorflow CNN с пользовательскими изображениями со значениями RGB
Я следил за учебными пособиями по созданию CNN с набором данных MNIST и понимаю большую часть этого. Затем я попытался преобразовать его в свои собственные изображения со значениями RGB. Но есть проблемы в некоторых частях кода, так как я не до...
701 просмотров
schedule
01.10.2022
TensorFlow: `tf.data.Dataset.from_generator()` не работает со строками в Python 3.x
Мне нужно перебрать большое количество файлов изображений и передать данные в тензорный поток. Я создал Dataset обратно с помощью функции генератора, которая создает имена путей к файлам в виде строк, а затем преобразует путь строки в данные...
2179 просмотров
schedule
08.08.2022
тензорный поток как изменить набор данных
У меня есть ключ API набора данных, который является частью моего графа тензорного потока. Как поменять местами, если я хочу использовать другие данные?
dataset = tf.data.Dataset.range(3)
iterator = dataset.make_one_shot_iterator()
next_element =...
2307 просмотров
schedule
12.07.2023
Прогнозы модели нейронного машинного перевода не совпадают
Сводка проблемы
В следующем примере моя модель NMT имеет высокие потери, потому что она правильно предсказывает target_input вместо target_output .
Targetin : 1 3 3 3 3 6 6 6 9 7 7 7 4 4 4 4 4 9 9 10 10 10 3 3 10 10 3...
366 просмотров
schedule
11.06.2023
Преобразование скользящего окна Tensorflow для больших данных
Я хотел бы накормить свою модель окнами с шагом 1 из очень длинной последовательности данных (десятки миллионов записей). Это похоже на цель, представленную в этой ветке, только моя последовательность данных может содержать несколько функций. для...
846 просмотров
schedule
02.01.2023
Как дополнить фиксированный BATCH_SIZE в tf.data.Dataset?
У меня есть набор данных с 11 образцами. И когда я выберу BATCH_SIZE равным 2, в следующем коде будут ошибки:
dataset = tf.contrib.data.TFRecordDataset(filenames)
dataset = dataset.map(parser)
if shuffle:
dataset =...
2215 просмотров
schedule
08.06.2024
Как увеличить данные в tenorflow tfrecords?
Я храню свои данные с помощью tfrecords и читаю их как тензоры с помощью Dataset API, а затем использую Estimator API для обучения. Теперь я хочу сделать онлайн-увеличение данных по каждому элементу в наборе данных, но после некоторых попыток я...
4160 просмотров
schedule
10.08.2022
Как использовать итератор make_initializable_iterator тензорного потока внутри input_fn?
Я хочу обучить свой режим с помощью tf.estimator.Estimator и загрузить свои данные с помощью Dataset API. Поскольку мои данные, например 'mnist', представляют собой массив (тензор), я пытаюсь загрузить его с помощью 'tf.data....
2913 просмотров
schedule
10.12.2022
Узкое место производительности TensorFlow на IteratorGetNext
Возясь с TensorFlow, я заметил, что относительно простая задача (пакетирование некоторых данных нашего 3D-акселерометра и получение суммы каждой эпохи) имеет относительно низкую производительность. Вот суть того, что у меня было, когда я получил...
2668 просмотров
schedule
03.08.2023
