Вопросы по теме 'tfrecord'
Как проверить файл Tensorflow .tfrecord?
У меня есть .tfrecord , но я не знаю, как он устроен. Как мне проверить схему, чтобы понять, что содержит .tfrecord файл?
Все ответы или документация Stackoverflow, похоже, предполагают, что я знаю структуру файла.
reader =...
41596 просмотров
schedule
24.12.2022
как хранить массивы numpy как tfrecord?
Я пытаюсь создать набор данных в формате tfrecord из массивов numpy. Я пытаюсь сохранить 2d и 3d координаты.
2d-координаты представляют собой пустой массив формы (2,10) типа float64 3d-координаты представляют собой пустой массив формы (3,10) типа...
11635 просмотров
schedule
02.08.2023
tfrecord VarLenFeature ошибка чтения
Я тестировал запись динамических чисел переменных в tfrecord. Но VarLenFeature не может их правильно прочитать.
Мои коды записи
def test_write():
writer = tf.python_io.TFRecordWriter('test.tfrecord')
for i in range(3):
val_list = []...
847 просмотров
schedule
13.08.2022
Ошибка формы при чтении tfrecords с помощью tf.data.TFRecordDataset?
Я создал файл tfrecords со своими собственными изображениями, и когда я пытаюсь прочитать его с помощью tf.data.TFRecordDataset, возникает ошибка формы: Я создал tfrecords с кодами:
def _int64_feature(value):
return...
133 просмотров
schedule
15.05.2023
Как получить входные данные поезда для обучения API обнаружения объектов Tensorflow?
При моделировании поездов Fast_rcnn_resnet101 потери отображаются на терминале на каждом шаге.
Я хочу знать, какие данные вводятся на каждом этапе. когда убыток увеличивается, я не знаю, почему он увеличивается.
Есть ли кто-нибудь, кто знает,...
175 просмотров
schedule
03.02.2023
как преобразовать файл csv в tfrecord
На самом деле я работаю с miniconda и tensorflow и пытаюсь обучить модель для обнаружения объектов, и у меня возникает проблема при запуске generate_ tfrecord.py для преобразования csv в tfrecord ошибка:
"generate_tfrecord.py", line 90, in...
446 просмотров
schedule
03.03.2023
Как использовать проанализированные данные TFRecords?
Я нахожусь в процессе сериализации большого набора изображений с разными разрешениями. Когда я создаю TFRecords, я также сохраняю форму сериализованного изображения следующим образом:
def convert(folder_dirs, tfrecords_filename = '.tfrecords'):...
491 просмотров
schedule
09.11.2022
Загрузите файлы png из папки с помощью tensorflow и напечатайте имя каждого изображения перед декодированием
У меня есть папка изображений (png). Я пытаюсь загрузить их с помощью tensforlow и декодировать изображения.
import tensorflow as tf
filename_queue = tf.train.string_input_producer(
tf.train.match_filenames_once("/Users/cf/*.png"))...
44 просмотров
schedule
27.01.2024
Как преобразовать чтение объектов SequenceExample из tf.python_io.tf_record_iterator в tf.data.TFRecordDataset
Итак, у меня есть набор данных в формате TFRecords, и я пытаюсь преобразовать чтение набора данных с помощью tf.python_io.tf_record_iterator в tf.data.TFRecordDataset.
Помимо того, что tf.python_io.tf_record_iterator устарел, основная причина для...
611 просмотров
schedule
08.03.2024
Разделить файл .tfrecords на несколько файлов .tfrecords вопросы
Я столкнулся с проблемой при реализации решения из Разбить файл .tfrecords на множество .tfrecords файлы .
Код:
import tensorflow as tf
def split_tfrecord(tfrecord_path, split_size):
with tf.Graph().as_default(), tf.Session() as sess:...
37 просмотров
schedule
26.10.2022
Tensorflow — редактировать TFRecord
Вопрос: есть ли способ добавить существующий TFRecord?
Примечание. .TFRecord создается моим собственным скриптом (а не .tfrecord, который я нашел в Интернете), поэтому я полностью контролирую его содержимое.
831 просмотров
schedule
01.11.2022
as_list() не определен для неизвестного TensorShape
**Обновление После реализации ответа @jdehesa: мой код выглядит так:
from __future__ import absolute_import, division, print_function, unicode_literals
import tensorflow as tf
import numpy as np
import matplotlib.pyplot as plt
import os
import...
5896 просмотров
schedule
22.06.2022
Tensorflow 2.0: как преобразовать MapDataset (после чтения из TFRecord) в некоторую структуру, которую можно ввести в model.fit
Я сохранил свои данные обучения и проверки в двух отдельных файлах TFRecord, в которых я храню 4 значения: сигнал A (форма float32 (150)), сигнал B (форма float32 (150)), метка (скаляр int64), идентификатор (строка). Моя функция разбора для чтения:...
3927 просмотров
schedule
30.07.2023
Размытые / бежевые изображения в Tensorboard с использованием Google Colab
Я тестирую эту реализацию обнаружения объектов на небольшое подмножество набора данных DOTA с использованием Google Colab. Обучение проходит нормально, но изображения в Tensorboard размытые и бежевые. Может быть проблема с изображениями при...
43 просмотров
schedule
11.04.2022
При чтении файлов tfrecord данные не загружаются
Я пытаюсь обучить модель, определенную здесь , с помощью функции train определен в том же скрипте. Я попытался использовать файл записи tf, предоставленный авторами в по этой ссылке (для этого я внес только изменения, изменив init_path=None и...
104 просмотров
schedule
27.07.2022
Azure Databricks, работающая с подключенными большими двоичными объектами в Python
Я подключил контейнер (содержащий tfrecords) к своей записной книжке Azure Databricks с подписью общего доступа. Пока вроде все в порядке, так как я могу видеть свои капли, если запускаю dbutils.fs.ls("dbfs:/mnt/testmount") .
Однако мне,...
21 просмотров
schedule
17.03.2022
Чтение файла TFRecord, в котором неизвестны функции, которые использовались для кодирования
Я очень новичок в TensorFlow, и это может быть очень начинающий вопрос. Я видел примеры, когда пользовательские наборы данных преобразуются в файлы TFRecord, используя знания о функциях, которые вы хотите использовать (например, «изображение»,...
760 просмотров
schedule
07.06.2022
AttributeError: объект «NoneType» не имеет атрибута «SerializeToString»
Я хочу преобразовать кадр данных в набор данных тензорного потока с форматом TFRecordf. Вот что я написал:
import pandas as pd
import tensorflow as tf
from pandas_tfrecords import pd2tf, tf2pd
import pandas_tfrecords
df = pd.read_csv('data.csv')...
297 просмотров
schedule
25.10.2023
Как преобразовать элемент TFRecordDataset в изображение?
У меня проблема с преобразованием tfrecords обратно в изображения:
def _parse_test_image_function(img):
image_feature_description = {
'image/file_name': tf.io.FixedLenFeature([], tf.string),
'image/encoded_image':...
30 просмотров
schedule
10.05.2023
как конвертировать tfrecords в numpy?
Я нашел похожую вещь в этой записи: Как преобразовать TFRecords в numpy массивы? . но это упоминается в контексте, когда мы используем изображения в качестве данных, а не данных, которые очень похожи на матрицу RNAseq, в которой имена столбцов (из...
26 просмотров
schedule
20.08.2022
