Generating immersive trip photograph visualizations

Tento americký patent se zabývá prezentací sekvence fotografií novou, atraktivní a nekonvenční formou s využitím geo-referencovaných 3D modelů terénu. Fotografie dodané uživatelem jsou automaticky umístěny (registrovány) do 3D modelu terénu pro následnou prezentaci. Během prezentace je pak díky provedené registraci fotografií s modelem terénu možné zobrazit části, které nebyly na fotografiích zachyceny, uživatel má zážitek rozšířený o kontext, je možné zobrazit cestu, kterou fotograf absolvoval. Vizualizace může probíhat i formou virtuální a/nebo rozšířené reality.

Hlavní problém spočívá v odhadu pozice a orientace kamery pro každou fotografii v sekvenci. Za tímto účelem využíváme metody Structure from motion (SfM), pomocí které vytvoříme řídké 3D mračno bodů (point cloud) neznámého prostředí. Toto mračno bodů následně zarovnáme s 3D modelem terénu pomocí metody Iterative closest point (ICP). Během výpočtu využíváme veškeré dostupné informace, jsou-li k dispozici, tj. metadata z fotografií (GPS, časová razítka, apod.), sférická panoramata, údaje z magnetických kompasů, apod.