20.500.12556/RUL-135481 Določanje osvetlitve scene v obogateni resničnosti Determining scene illumination in augmented reality Eden izmed glavnih načinov uporabe obogatene resničnosti je dodajanje objektov in označb v 3D prostor zajet s kamero mobilne naprave. Novi objekti v sceni morajo biti osvetljeni na način, ki odraža resnično osvetlitev, saj se na ta način zdijo bolj resnični in se zlijejo z okolico. V tem diplomskem delu smo razvili metodo za hitro in robustno določanje osvetlitve scene z uporabo konvolucijskih nevronskih mrež, ki bo lahko uporabljena v kontekstu obogatene resničnosti. Izdelali smo tudi zbirko sintetičnih podatkov, ki je bila uporabljena za učenje razvite mreže. Naučili smo več modelov z različnimi arhitekturami hrbtenice in primerjali njihovo natančnost ter hitrost na zbirki zajetih fotografij iz resničnega sveta. Rezultati eksperimentov kažejo uspešnost pri določanju smeri glavnega svetlobnega vira s pomočjo konvolucijskih nevronskih mrež tudi na podatkih, ki jih mreža med učenjem ni videla. Na koncu smo rezultate tudi vizualizirali na nekaterih izmed zajetih fotografij. One of the main use cases of augmented reality is to add objects and markings to a 3D space captured by a mobile device camera. New objects in a scene need proper lighting that reflects real lighting, as this way they appear more realistic and blend in better with the surroundings. In this dissertation, we developed a method for fast and robust detection of scene lighting using convolutional neural networks, which could be used in the context of augmented reality. We also created a dataset consisting of synthetic images used for training the convolutional neural network. We trained multiple models with different backbone architectures, and we compared their accuracy and speed on a dataset consisting of captured photos from the real world. The results of experiments demonstrate that convolutional neural networks can successfully determine the direction of the main light source on data not seen by the network during training. In the end, we visualized the results on some of the captured real world photos. računalniški vid obogatena resničnost osvetlitev konvolucijske nevronske mreže computer vision augmented reality lighting convolutional neural networks true false false Slovenski jezik Angleški jezik Diplomsko delo/naloga 2022-03-16 12:15:15 2022-03-16 12:15:23 2022-09-14 04:13:35 0000-00-00 00:00:00 2022 0 0 0000-00-00 NiDoloceno NiDoloceno NiDoloceno 0000-00-00 0000-00-00 0000-00-00 32341 101461251 Modic_Leon_-_Dolocanje_osvetlitve_scene_v_obogateni_resnicnosti.pdf Modic_Leon_-_Dolocanje_osvetlitve_scene_v_obogateni_resnicnosti.pdf 1 B6E258FAFAE5D5F3C0CB304F17564BC8 6039779a3f0e58a8781e8e97c710bb413ddb47c696268991725a560eb41a9dd4 5de8396c-a51a-11ec-8556-00155dcfd717 https://repozitorij.uni-lj.si/Dokument.php?lang=slv&id=154586 Fakulteta za računalništvo in informatiko 0 0 0