Tensorflow: невозможно извлечь имя файла из tfrecord - PullRequest
0 голосов
/ 06 июня 2018

Я записал изображение, метку и имя файла в файл tfrecords.Когда я пытаюсь декодировать файл, я не могу преобразовать имя файла в строку из tf.string.

Код, который я написал для преобразования его в файл tfrecords:

num_batches = 6
batch_size = math.ceil(X_training.shape[0] / num_batches)

for i in range(num_batches):
    train_path = os.path.join("data","batch_" + str(i) + '.tfrecords')
    writer = tf.python_io.TFRecordWriter(train_path)
    start_row = i * batch_size
    end_row = start_row + batch_size - 1

    for idx in range(start_row, end_row):
        try:
            label = y_tr[idx]
            filename = train_filenames[idx].tostring()
            image = X_tr[idx]
            image_raw = image.tostring()
        except:
            continue

        example = tf.train.Example(
            features=tf.train.Features(
              feature={
                'label': _int64_feature(label),
                'filename': _bytes_feature(filename),
                'image': _bytes_feature(image_raw),
              }))

        serialized = example.SerializeToString()
        writer.write(serialized)

Для чтенияи декодировать файл tfrecords У меня есть функция:

def read_and_decode_single_example(filenames):
    filename_queue = tf.train.string_input_producer(filenames)

    reader = tf.TFRecordReader()

    _, serialized_example = reader.read(filename_queue)
    features = tf.parse_single_example(
        serialized_example,
        features={
            'label': tf.FixedLenFeature([], tf.int64),
            'filename': tf.FixedLenFeature([], tf.string),
            'image': tf.FixedLenFeature([], tf.string)
        })


    label = features['label']
    image = tf.decode_raw(features['image'], tf.uint8)
    image = tf.reshape(image, [499, 499, 1])
    filename = features['filename']

    return label, image, filename

Когда я декодирую разные партии, возвращаемое имя файла выглядит так:

b'P \ x00 \ x00\ x00_ \ x00 \ x00 \ X000 \ x00 \ x00 \ X000 \ x00 \ x00 \ X001 \ x00 \ x00 \ X004 \ x00 \ x00 \ X008 \ x00 \ x00 \ x00_ \ x00 \ x00 \ x00R \ x00 \ x00 \ x00I\ x00 \ x00 \ x00G \ x00 \ x00 \ x00H \ x00 \ x00 \ x00T \ x00 \ x00 \ x00_ \ x00 \ x00 \ x00M \ x00 \ x00 \ x00L \ x00 \ x00 \ x00O \ x00 \ x00 \ x00. \x00 \ x00 \ x00j \ x00 \ x00 \ x00p \ x00 \ x00 \ x00g \ x00 \ x00 \ x00 '

Что я делаю не так при декодировании из строки tf.string?

1 Ответ

0 голосов
/ 06 июня 2018

При вызове .decode().replace('\x00', '') для вашей строки байтов выдается 'P_00148_RIGHT_MLO.jpg'.

Добавление декодирования и замены в возврате функции должно решить вашу проблему.

...