сделать приложение, которое отображает рабочий стол на iphone в VR на Unity

Question

Я хотел бы создать приложение AR iPhone в единстве, которое поместит объект в реальный мир, с которым вы сможете взаимодействовать с ним на вашем iPhone.как будто у вас есть полоса внизу экрана, и вы можете перетаскивать объекты в ар-мир и взаимодействовать с ними с возможностью отслеживания рук.Это будет работать подобно мета-интерфейсу https://www.youtube.com/watch?v=m7ZDaiDwnxY, который вы можете захватывать и перетаскивать.для этого используется отслеживание рук.

Я провел некоторые исследования по этому вопросу, но мне нужна помощь, потому что я не знаю, с чего начать и как выполнить то, что я пытаюсь сделать.

У меня нет кода.

Вы можете написать мне на jaredmiller219@gmail.com для любых комментариев и вопросов.Кроме того, вы можете написать мне, чтобы помочь мне с этим.Большое спасибо за вашу поддержку!

Answer 1

Чтобы начать работать с мобильным AR в Unity, я бы порекомендовал начать с ресурсов Unity:

https://unity.com/solutions/mobile-ar

Вот учебный ресурс для изучения ARKit:

https://unity3d.com/learn/learn-arkit

Что касается отслеживания рук, очевидно, что Meta 2 имеет специализированное аппаратное обеспечение для выполнения своих функций ... вы не должны ожидать, что получите тот же набор функций только с телефоном, управляющим вашим опытом.Leap Motion является наиболее распространенным ручным трекером, который я видел интегрированным в настройки VR и AR, и он работает хорошо, но если вам действительно нужно отслеживать руки с помощью всего лишь телефона, вы можете проверить ManoMotion, который стремится обеспечить отслеживание рук и распознавание жестов дляARKit, хотя я лично не работал с ним.