Использование изображений листьев и стеблей для выявления болезней растений с использованием сверточной нейронной сети?

Question

Я провожу исследование по выявлению болезней растений с использованием методов глубокого обучения.Метод, который я буду использовать, называется CNN (Convolution Neural Network).Симптомом заболевания является окраска листьев растений и стебля.Когда я рассматриваю ранее проведенные исследования, почти все они использовали изображения только листьев или стеблей растения, но не обоих.Как я могу использовать как стволовые, так и листовые изображения в наборе данных для обучения моей модели.

Answer 1

Один из способов, который я могу придумать, - это иметь двухпотоковую сеть:

1. Одна сеть занимает только лист.Другой получает соответствующий ствол.
2. Эти две сети затем соединяются вместе на каком-то более высоком уровне и оттуда достигают выходного уровня.

Идея состоит в том, что каждая сеть ниже выполняетПреобразование признаков соответствующего изображения самостоятельно для получения полезных функций, а затем эти два набора функций объединяются на более высоких уровнях перед использованием еще более высокими уровнями для создания прогноза.

    output
  /\/\/\/\/\
  _________
 |         |
 |_________|
 / \ / \ / \
 ____    ____
|cnn1|  |cnn2|
|____|  |____|
  ^       ^
 Leaf    Stem