Ошибка формы при подгонке данных к VGG16 cnn - Керас - PullRequest
Новая
       67

Ошибка формы при подгонке данных к VGG16 cnn - Керас

0 голосов
/ 07 мая 2020

Я хочу классифицировать породу собак с использованием увеличения данных и передачи обучения с использованием VGG16 в качестве cnn.

Сначала я выполняю некоторое увеличение данных с помощью ImageDataGenerator из keras 

train_datagen = ImageDataGenerator(rotation_range = 30,
                               width_shift_range = 0.2,
                               height_shift_range = 0.2,
                               rescale = 1./255,
                               shear_range = 0.2,
                               zoom_range = 0.2,
                               horizontal_flip = True,
                               fill_mode = 'nearest')

train_generator = train_datagen.flow_from_directory('../data/train/',
                                                target_size = (224, 224),
                                                batch_size = batch_size,
                                                class_mode = 'categorical')

The flow_from_directory метод возвращает DirectoryIterator, дающий кортежи (x, y), где x - это массив numpy, содержащий пакет изображений с формой (batch_size, * target_size, channels), а y - массив numpy соответствующих меток. Поскольку здесь class_mode является категоричным, он должен возвращать 2D-метки с горячим кодированием для y.

Затем я передаю обучение, удаляя только последний слой, заменяя его плотным слоем с активацией softmax. 

model = VGG16(weights="imagenet", include_top=False, input_shape=(224, 224, 3))

for layer in model.layers:
    layer.trainable = False

x = model.output

predictions = Dense(120, activation='softmax')(x)

new_model = Model(inputs=model.input, outputs=predictions)

Затем я подгоняю свои данные к модели: 

new_model.fit_generator(train_generator,
                        steps_per_epoch = 6680 // batch_size,
                        epochs = 50,
                        validation_data = validation_generator,
                        validation_steps = 835 // batch_size,
                        verbose=2)

И я получаю сообщение об ошибке: ValueError: Ошибка при проверке цели: ожидалось, что плотный_3 будет иметь 4 измерения, но получил массив с формой (16, 120)

Понятия не имею, откуда взялась проблема: (

Спасибо за вашу помощь!

1 Ответ

1 голос
/ 07 мая 2020

Сводка VGG16 дает: 

Layer (type)                 Output Shape              Param #   
=================================================================
input_1 (InputLayer)         [(None, 224, 224, 3)]     0         
_________________________________________________________________
block1_conv1 (Conv2D)        (None, 224, 224, 64)      1792      
_________________________________________________________________
block1_conv2 (Conv2D)        (None, 224, 224, 64)      36928     
_________________________________________________________________
block1_pool (MaxPooling2D)   (None, 112, 112, 64)      0         
_________________________________________________________________
block2_conv1 (Conv2D)        (None, 112, 112, 128)     73856     
_________________________________________________________________
block2_conv2 (Conv2D)        (None, 112, 112, 128)     147584    
_________________________________________________________________
block2_pool (MaxPooling2D)   (None, 56, 56, 128)       0         
_________________________________________________________________
block3_conv1 (Conv2D)        (None, 56, 56, 256)       295168    
_________________________________________________________________
block3_conv2 (Conv2D)        (None, 56, 56, 256)       590080    
_________________________________________________________________
block3_conv3 (Conv2D)        (None, 56, 56, 256)       590080    
_________________________________________________________________
block3_pool (MaxPooling2D)   (None, 28, 28, 256)       0         
_________________________________________________________________
block4_conv1 (Conv2D)        (None, 28, 28, 512)       1180160   
_________________________________________________________________
block4_conv2 (Conv2D)        (None, 28, 28, 512)       2359808   
_________________________________________________________________
block4_conv3 (Conv2D)        (None, 28, 28, 512)       2359808   
_________________________________________________________________
block4_pool (MaxPooling2D)   (None, 14, 14, 512)       0         
_________________________________________________________________
block5_conv1 (Conv2D)        (None, 14, 14, 512)       2359808   
_________________________________________________________________
block5_conv2 (Conv2D)        (None, 14, 14, 512)       2359808   
_________________________________________________________________
block5_conv3 (Conv2D)        (None, 14, 14, 512)       2359808   
_________________________________________________________________
block5_pool (MaxPooling2D)   (None, 7, 7, 512)         0         
=================================================================
Total params: 14,714,688
Trainable params: 14,714,688
Non-trainable params: 0
_________________________________________________________________

Последний слой имеет трехмерные элементы, вам нужно сгладить его перед применением Dense и softmax.

Добавьте Flatten() перед последний плотный слой. 

x = model.output

x = Flatten()(x) # add this line

predictions = Dense(120, activation='softmax')(x)
...