Что нужно сделать:
Захватить видеопоток браузером (или нативно) и отрисовать в фоне.
Преобразовать координаты POI + рельеф в локальную сцену Three.js/WebGL.
Отобразить на видео… …