Вопросы по теме 'tensorflow-datasets'
Как использовать функцию group_by_window в TensorFlow
В новом наборе функций входного конвейера TensorFlow есть возможность группировать наборы записей вместе с помощью функции «group_by_window». Это описано в документации здесь:...
3914 просмотров
schedule
07.12.2023
tf.contrib.data.DataSet размер пакета может быть установлен только на 1
Я преобразовал набор данных pascal voice в tfrecords с помощью кода create_pascal_tf_record. а>. Я использовал tf.contrib.data.Dataset для чтения данных. Я использовал следующий код:
import tensorflow as tf
from tensorflow.contrib.data...
2708 просмотров
schedule
22.02.2022
Tensorflow: как получить точность/прогноз для всего набора тестовых данных? не для каждой партии
Я пытаюсь использовать Tensorboard для визуализации моей процедуры тестирования. Моя цель состоит в том, чтобы по завершении каждой эпохи я хотел бы проверить точность сети, используя весь тестовый набор данных, и сохранить этот результат точности в...
611 просмотров
schedule
03.08.2023
TypeError: объект «Тензор» не является итерируемой ошибкой с оценщиком тензорного потока
У меня есть процедурно сгенерированный (бесконечный) источник данных, и я пытаюсь использовать его в качестве входных данных для высокоуровневого Tensorflow Estimator для обучения детектора 3D-объектов на основе изображений.
Я настроил набор...
16552 просмотров
schedule
14.02.2024
Как расширить tf.data.Dataset дополнительными примерами преобразований в Tensorflow
Я хотел бы удвоить размер существующего набора данных, который я использую для обучения нейронной сети тензорному потоку на лету, добавив к нему случайный шум. Поэтому, когда я закончу, у меня будут все существующие примеры, а также все примеры с...
2053 просмотров
schedule
06.02.2023
Пользовательский оценщик TensorFlow - восстановление модели после небольших изменений в model_fn
Я использую tf.estimator.Estimator для разработки своей модели,
Я написал model_fn и обучил 50 000 итераций, теперь я хочу внести небольшие изменения в свой model_fn , например добавить новый слой.
Я не хочу начинать обучение с нуля, я хочу...
2179 просмотров
schedule
03.10.2022
Как я могу отфильтровать tf.data.Dataset по определенным значениям?
Я создаю набор данных, читая TFRecords, я сопоставляю значения и хочу отфильтровать набор данных по определенным значениям, но, поскольку результатом является dict с тензорами, я не могу получить фактическое значение тензора или проверить его с...
8790 просмотров
schedule
08.12.2022
оптимизация input_fn для tf.estimator.train_and_evaluate
Я создаю оценщик TensorFlow, который хочу обучить и оценить с помощью функции tf.estimator.train_and_evaluate() . doc для этой функции дает следующий совет:
Также рекомендуется обучить модель немного дольше, скажем, несколько эпох, прежде...
981 просмотров
schedule
22.09.2022
Как использовать py_func с функцией, возвращающей dict
Я пишу конвейер ввода, используя tf.data.Dataset . Я хотел бы использовать код Python для загрузки и преобразования своих образцов, код возвращает словарь тензоров. К сожалению, я не понимаю, как я могу определить это как тип вывода, который...
2047 просмотров
schedule
23.02.2022
Tensorflow: логиты и метки должны иметь одно и то же первое измерение
Я новичок в tensoflow и хочу адаптировать учебник MNIST https://www.tensorflow.org/tutorials/layers с моими данными (изображения 40х40). Это моя модельная функция:
def cnn_model_fn(features, labels, mode):
# Input Layer...
47278 просмотров
schedule
19.11.2023
В чем разница между Dataset.from_tensors и Dataset.from_tensor_slices?
У меня есть набор данных, представленный в виде матрицы NumPy формы (num_features, num_examples) , и я хочу преобразовать его в тип TensorFlow tf.Dataset .
Я изо всех сил пытаюсь понять разницу между этими двумя методами: Dataset.from_tensors и...
24777 просмотров
schedule
16.02.2022
Увеличение данных с использованием функции python с API tf.Dataset
Я ищу динамически читаемые изображения и применяю увеличение данных для моей проблемы сегментации изображений. Из того, что я видел до сих пор, лучшим способом был бы tf.Dataset API с функцией .map .
Однако из примеров, которые я видел, я...
625 просмотров
schedule
15.12.2022
Ошибка в фиде dict TensorFlow с вводом с плавающей запятой
Вот кусок кода
def train(x):
prediction = cnn(x)
cost = tf.reduce_mean(tf.nn.softmax_cross_entropy_with_logits_v2(logits=prediction, labels=y))
optimizer = tf.train.AdadeltaOptimizer().minimize(cost)
with tf.Session() as sess:...
624 просмотров
schedule
06.05.2023
Можно ли добавить данные из другого источника в набор данных Tensorflow?
Можно ли объединить данные из другого источника в набор данных Tensorflow. Допустим, у меня есть следующие данные в наборе данных:
customer_id age name friend_id
0 25 Max 1
1 39 Moritz 1
2 21 Lilli...
25 просмотров
schedule
29.10.2022
Как максимизировать использование ЦП при обучении графического процессора тензорного потока с помощью Dataset API?
Я использую новый api набора данных для обучения простой модели DL с прямой связью. Я заинтересован в максимальной скорости обучения. Поскольку размер моей сети невелик, как и ожидалось, я вижу низкое использование графического процессора. Это...
2634 просмотров
schedule
15.05.2022
Использование оценщика TF с генератором TFRecord
Я пытаюсь создать простой NN, который читает в папке tfrecords. Каждая запись имеет вектор 'mean_rgb' с 1024 значениями и метку категории. Я пытаюсь создать простую сеть с прямой связью, которая изучает категории на основе этого вектора функций....
482 просмотров
schedule
09.06.2023
TensorFlow DataSet `from_generator` с переменным размером пакета
Я пытаюсь использовать TensorFlow Dataset API для чтения файла HDF5, используя метод from_generator . Все работает нормально, если размер пакета не делится равномерно на количество событий. Я не совсем понимаю, как сделать гибкий пакет с помощью...
5885 просмотров
schedule
02.02.2022
Конструкция конвейера tf.data для оптимизации производительности
Я новичок в TensorFlow и хотел бы знать, есть ли какой-то конкретный порядок для установки набора данных с использованием tfdata. Например:
data_files = tf.gfile.Glob("%s%s%s" % ("./data/cifar-100-binary/", self.data_key, ".bin"))
data =...
385 просмотров
schedule
11.08.2023
tf.data OutOfRangeError (обратную трассировку см. выше): конец последовательности
При попытке сгенерировать тестовые данные с помощью генератора у меня возникла странная проблема. Это мой код:
from __future__ import absolute_import, division, print_function
import tensorflow as tf
import os
# tf.enable_eager_execution()
def...
4890 просмотров
schedule
28.02.2023
Как создать набор изображений из папки
У меня есть набор данных из 35 000+ изображений из этого набора данных в папке. . Как я могу превратить эти изображения в массив в python train_images , который я могу передать в модель глубокого обучения тензорного потока?
7120 просмотров
schedule
11.07.2023
