dizertační práce

Vizuální lokalizace v přírodě

Text práce 5.21 MB Teze 5.21 MB

Autor práce: Ing. Jan Brejcha, Ph.D.

Ak. rok: 2021/2022

Vedoucí: doc. Ing. Martin Čadík, Ph.D.

Oponenti: prof. Dr. Ing. Jiří Matas, Dr. Torsten Sattler

Abstrakt:

V této práci se zabýváme odhadem pozice a orientace kamery z dané fotografie. Tento problém nazýváme vizuální geo-lokalizace. Konkrétně se zabýváme fotografiemi pořízenými v přírodních horských prostředích. Představujeme podrobný průzkum aktuálního stavu poznání algoritmů, datových sad a přístupů k vyhodnocování problému vizuální geo-lokalizace. Náš průzkum odhalil, že vizuální geo-lokalizace v přírodních prostředích je často řešena pomocí vyhledávání podobností nebo korespondencí mezi vstupní fotografií a terénním modelem. Problém nacházení korespondencí mezi fotografií a terénním modelem nazýváme porovnávání napříč doménami (cross-domain matching). Na základě našeho průzkumu jsme stanovili tři hlavní cíle, jejichž dosažení nám umožňuje překonat aktuální stav poznání vizuální geo-lokalizace v horských prostředích s využitím porovnávání napříč doménami: (I) potřeba nových datových sad které umožní trénovat, vyhodnocovat a porovnávat algoritmy vizuální geo-lokalizace, (II) potřeba ověřit, zda využití různých příznaků - křivek horizontu, hranových map, sémantické segmentace a satelitních snímků pomůže vylepšit algoritmy pro porovnávání napříč doménami, (III) potřeba ilustrovat využitelnost metod vizuální geo-lokalizace pomocí vývoje jejich nových aplikací.

V této práci podrobně popisujeme naše výzkumné studie, které objasňují, jakým způsobem jsme postupovali ve výzkumu jednotlivých cílů. Představujeme několik nových datových sad pro účely vyhodnocování, porovnávání a trénování jednotlivých metod. S využitím těchto nových datových sad jsme vyvinuli novou metodu pro zarovnání fotografií s terénním modelem na základě sémantické segmentace kombinované s běžnými hranovými příznaky. Pomocí experimentálního vyhodnocení objasňujeme výhody našeho nového přístupu oproti aktuálnímu stavu poznání. Dále navrhujeme meta algoritmus umožňující automatickou kalibraci více kamer, který je založen na odhadu struktury z pohybu (Structure from Motion) napříč doménami. Tento nový přístup pro automatické zarovnávání fotografií s terénním modelem nám umožňuje natrénovat kompaktní deskriptor klíčových bodů pomocí hlubokého učení. V rámci našeho výzkumu ukazujeme funkčnost tohoto deskriptoru při odhadu externích parametrů kamery (pozice a orientace) pomocí porovnávání vstupní fotografie s terénním modelem. V závěru práce ukazujeme praktickou využitelnost našich metod pro automatickou kalibraci externích parametrů kamery. Navrhujeme nový přístup k prezentaci fotografií, který je vhodný jak pro prezentaci na monitoru či jiné projekční ploše, tak pro virtuální realitu. Pomocí experimentálního vyhodnocení ukazujeme, že naše nová metoda prezentace fotografií pomáhá uživatelům s orientací v neznámých komplexních přírodních scénách.

Klíčová slova:

Vizuální geo-lokalizace, lokalizace kamery, odhad rotace kamery, digitální elevační modely, renderování terénu, porovnávání napříč doménami, porovnávání deskriptorů, prezentace fotografií, virtuální realita, rozšířená realita

Termín obhajoby

30.09.2021

Výsledek obhajoby

obhájeno (práce byla úspěšně obhájena)

znamkaPznamka

Průběh obhajoby

Student přednesl cíle a výsledky, kterých v rámci řešení disertační práce dosáhl. V rozpravě student fundovaně odpověděl na otázky komise a oponentů. Komise se v závěru jednomyslně usnesla, že student splnil podmínky pro udělení akademického titulu doktor. Komise jednomyslně doporučuje, aby studentovi byla udělena cena za výjimečně kvalitní disertační práci. The student presented the goals and results, which he achieved within the solution of the dissertation. The student has competently answered the questions of the committee members and opponents. The committee has agreed unanimously that the student has fulfilled requirements for being awarded the academic title Ph.D. The committee recommends awarding the thesis the deans prize.

Jazyk práce

angličtina

Fakulta

Ústav

Studijní program

Výpočetní technika a informatika (VTI-DR-4)

Studijní obor

Výpočetní technika a informatika (DVI4)

Složení komise

prof. Ing. Lukáš Sekanina, Ph.D. (předseda)
dr. Vincent Lepetit (člen)
dr. Kevin Köser (člen)
prof. Dr. Ing. Jiří Matas (člen)
Dr. Torsten Sattler (člen)

Soubor vložený vedoucím Velikost
Hodnocení školitele [.pdf] 31,21 kB

Soubor vložený oponentem Velikost
Posudek oponenta [.pdf] 68,67 kB

Posudek oponenta
Dr. Torsten Sattler

Soubor vložený oponentem Velikost
Posudek oponenta [.pdf] 341,39 kB

Odpovědnost: Mgr. et Mgr. Hana Odstrčilová