Если вы знаете, как это сделать для обычных изображений, поместите цикл while, извлеките кадры из видео и выполните одну и ту же операцию сегментации для каждого кадра.
Ниже приведены две ссылки для определения желтого цвета в режиме реального времени.
Ссылка 1 , Ссылка 2
(Коды написаны на Python, и это сделано для ПК, а не для платформы Android. Но у вас не будет проблем с пониманием идеи).