Я очень новичок в AR, ARCore и ARKit. Проблема, которую я пытаюсь решить, - это измерение расстояния между визуальными элементами, которые определяются алгоритмами ИИ. Я хочу использовать AR для измерения.
Я подхожу к этой проблеме следующим образом:
- AR захватывает сцену с точками характеристик
- 2-е изображение извлекается для идентификации необходимых визуальных функций с помощью нейронной сети
- сопоставление 2-й точки с трехмерной координатой в той же сцене для создания якоря
- вычисление расстояния между якорями
Я очень смущен следующими вещами:
- Можем ли мы сохранить сеанс AR и получить изображение, которое можно использовать в качестве входных данных для нейронных сетей?
- Если да для 1, как передать 2d координаты, полученные после предсказания, из нейронная сеть в сеансе ARCore или ARKit для создания привязки, поскольку информации о глубине нет?
Каков наилучший подход к решению этой проблемы? Если есть какие-либо другие возможные решения этой проблемы, помощь приветствуется.