Почему я чувствую AWS SageMaker GPU не быстрее?

Question

Я потратил 5 дней на настройку AWS SageMaker. (обращение за повышением предельной стоимости ноутбука с графическим процессором 2 дня, загрузка и распаковка всех данных за 2 дня, обходные пути, такие как загрузка данных в S3, стоит 1 день).

Когда я наконец смогу запустить код на экземпляре ноутбука SageMaker GPU Я обнаружил, что скорость не выше, чем у моего локального процессора P C.

Я использовал следующий код для проверки графического процессора. Не уверен, что происходит не так. Это случается с вами, приятели? И у моих кредитов осталось только 200 долларов (Оригинальные 750 долларов).

Answer 1

Проблема должна l ie в загрузке видео. Когда я тренирую модель Re snet на наборе данных изображений, скорость довольно быстрая !! Спасибо AWS !!

Что касается стратегии загрузки видео, я сделал это ядро ​​для сравнения различных методов.

https://www.kaggle.com/muerbingsha/deepfake-face-detector-evaluate

Оказывается imageio_ffmpeg самый быстрый способ.