Я пытаюсь создать игру, в которой пользователь сканирует комнату с помощью RGBD-камеры и реконструирует 3D-сцену. Эта сцена будет интегрирована в физический движок после того, как алгоритм распознавания объекта скажет ему, какие объекты есть в сцене и какой формы и размера. Наконец, после визуализации в Physics Engine пользователь должен иметь возможность взаимодействовать со средой. Я знаю, как выполнять реконструкцию трехмерных сцен из изображений, я могу понять, как создавать объекты и взаимодействовать с ними в Physics Engine. Я знаю, как сделать распознавание объектов, формы и размера. Тем не менее, я не уверен, , как интегрировать выходные данные реконструкции 3D-сцены, распознавания объектов в качестве входных данных для физического механизма. Любые идеи будут полезны.