Android AR CORE на стати c изображении вместо камеры

Question

Представьте, что вы попробуете красоту с двумя основными вариантами использования:

1. Наложение макияжа на лицо в реальном времени с помощью AR
2. Сделайте фотографию и сделайте то же самое с ней

Поддерживает ли ARCore работу с фотографией stati c вместо подачи с камеры?

Я не нашел никакой информации о topi c.
Но, так как 2 из 3 основных функций - незаметность окружающей среды и оценка освещенности - работают без каких-либо дополнительных датчиков, я полагаю, что такая возможность может быть реализована.

Answer 1

Для изображения stati c Думаю, вы можете найти более точные результаты, используя специальную технологию распознавания изображений лица.

Дополненная реальность должна проделать немалую работу, чтобы вычислить где именно на экране разместить AR-узел, учитывая движение камеры и, возможно, предметов в реальном мире. В текущих выпусках устройств и фреймворков может быть небольшое количество «дрейфа» и c, которые вы увидите при обсуждении на таких форумах, как этот. Распознавание функций в целом, и вы сможете получить более точные результаты, используя технологию, сфокусированную на анализе и обработке изображений c.

Например, у Google есть несколько хороших ресурсов по распознаванию лиц на Android, включая :

• https://firebase.google.com/docs/ml-kit/android/detect-faces (последний рекомендуемый API распознавания лиц на момент написания - со временем он изменился)
• https://codelabs.developers.google.com/codelabs/face-detection/index.html?index=..%2F..index#0 . (пример кода локальной сети)

Они также могут работать в режиме реального времени, поэтому может оказаться, что для примера макияжа они предоставят вам альтернативу ARCore также для вашего варианта использования в реальном времени.

OpenCV, библиотека распознавания видео с открытым исходным кодом, также имеет функцию распознавания лиц. Вы должны знать, что использование OpenCV с Android Studio в настоящее время не очень хорошо документировано, поэтому вам, возможно, придется поискать форумы, такие как SO, чтобы начать:

• https://docs.opencv.org/2.4/modules/contrib/doc/facerec/facerec_tutorial.html

Answer 2

Я протестировал демонстрационное приложение для макияжа с реализацией ARCore Augmented Faces для изображения c, и оно работает нормально. Хотя основная проблема заключается в том, что дополненные лица работают только с фронтальной камерой на мобильном устройстве, поэтому этот опыт не является оптимальным.