Библиотека на Python для добавления RTSP-клиента и использования потокового видео и потоков данных из Tobii Pro Glasses 2? - PullRequest
0 голосов
/ 06 ноября 2018

Я работаю с Tobii Glasses Pro 2, чтобы создать приложение, которое накладывает видео и данные взгляда, и мне было интересно, есть ли в Python библиотека, похожая на live555, которая помогла бы сделать это.

Мне удалось получить доступ к RTSP-клиенту с помощью библиотеки C7 net7mma, но я бы предпочел получить доступ к клиенту в Python для доступа к данным взгляда, поскольку я уже смог получить доступ к видеоданным с помощью OpenCV.

Ответы [ 2 ]

0 голосов
/ 02 апреля 2019

В настоящее время, для проекта BreastScreening , мы обеспокоены пониманием того, как радиологи ведут себя в отношении диагностики поражений раком молочной железы. Некоторое поведение можно измерить, применяя несколько методов отслеживания зрения в оценках и анализе разработанных систем. В этом проекте мы разработали два хранилища. Первый репозиторий, названный eye-tracker-setup, был первой попыткой извлечь информацию благодаря устройству Tobbi Eye Tracker 4C . Однако мы не достигли такого успеха, поэтому мы создали еще одно хранилище под названием eye-tracker-naive.

Также может быть интересно ответить на вопрос относительно альтернатив устройства вашему решению. Другая тема заключается в том, чтобы рассказать о Tobii Pro SDK , подходящем для этого ответа. Наконец, если вы хотите получить ответы о зрачковом центре [3] в режиме реального времени для методов отслеживания зрения [1, 2], это также охватывалось здесь .

Ссылки

[1] Morimoto, C.H. и Mimica, M.R., 2005. Методы отслеживания взгляда для интерактивных приложений. Компьютерное зрение и понимание изображений, 98 (1), с.4-24.

[2] Jian-nan, C., Peng-yi, Z., Si-yi, Z., Chuang, Z. and Ying, H., 2009, май. Основные методы отслеживания взгляда на основе отражения роговицы зрачка. В 2009 году WRI Глобальный конгресс по интеллектуальным системам (Том 2, с. 133-138). IEEE.

[3] Моримото, С.Х., Кунс, Д., Амир, А. и Фликнер, М., 2000. Обнаружение и отслеживание учеников с использованием нескольких источников света. Вычислительные и зрительные вычисления, 18 (4), с.331-335.

0 голосов
/ 17 декабря 2018

Вы можете получить доступ к потоку данных, видеопотоку глаза и видеопотоку сцены в python2 через API Tobii Pro Glasses 2. Его можно скачать с здесь . Этот код содержит несколько полезных примеров кода. API также содержит документацию о том, как представлены все потоки.

Если вы предпочитаете python3, я написал простую реализацию, исходя из API Tobii Pro Glasses 2 выше. Вы можете проверить это здесь .

...