Вы пытались заглянуть в [OpenCV 1 , библиотеку компьютерного зрения?
* Имеет поддержку многих видеоформатов , таких как mp4.
Функциональность гистограммы звучит очень близко к тому, что вы хотите.
Я не уверен, что вы подразумеваете под самым светлым цветом (это означает низкую насыщенность в цветовом пространстве HSV?) И т. Д.Существует множество возможностей преобразования цветового пространства и других функций, которые вы можете изучить в OpenCV.