Я думаю, что вы имеете в виду дополненную реальность (или AR, я не знаю, есть ли более техническое слово для этого). Есть несколько библиотек, в основном FLARToolKit , плюс несколько его форков. Это в основном для распознавания маркеров или узоров на изображении (или видео).
Я знаю, что @inspirit делает действительно классные вещи в этой области и много публикует в своем блоге , но на самом деле он еще ничего не выпустил.