Classfying изображение с мультистандарт

Question

Я не уверен, правильно ли это называть «мультистандартным», но моя проблема в этом.

Я фотографирую модные товары, и я хочу, чтобы это было классифицировано как:

id, brand, product_kind, sex
1, gucci, wallet, woman
2, H&M, backpack, unisex
3, zara, coat, man

после поиска я думаю, что это похоже на классификацию с несколькими метками, но, насколько я понимаю, мульти-метка больше похожа на:

id, gucci, H&M, zara, wallet, backpack, coat, woman, unisex, man
1, 1, 0, 0, 1, 0, 0, 1, 0, 0
2, 0, 1, 0, 0, 1, 0, 0, 1, 0
3, 0, 0, 1, 0, 0, 1, 0, 0, 1

Моя цель - предсказать одно из бренда, одно из рода, одно из пола. Может ли кто-нибудь порекомендовать мне какую-либо статью или учебник по этой проблеме?

Answer 1

Ваша проблема состоит в основном из 3 разных классификаторов, поэтому «проще всего» будет обучить трех независимых.

Вы также можете иметь 3 независимых выходных слоя (возможно, с дополнительными скрытыми слоями для каждого из них), каждый из которых имеет традиционные выходы softmax, и ваша функция стоимости представляет собой сумму потерь для каждого из этих 3 слоев. Таким образом, три классификатора совместно используют извлечение признаков и часть логики.

Что-то вроде:

Features
   |
Hidden layer 1
   |
Hidden layer 2
   |-----------------------|--------------------|
Hidden layer 3-1      Hidden layer 3-2      Hidden layer 3-3
   |                       |                    |
Hidden layer 4-1      Hidden layer 4-2      Hidden layer 4-3
   |                       |                    |
softmax 1              softmax 2              softmax 3