Izdelava in krmiljenje fotorealističnih avatarjev v realnem časuPetkovšek, Žan (Avtor) Pesek, Matevž (Mentor) fotorealistični avatar glave3D Gaussovo razprševanjemodel FLAMEsledenje obrazuanimacija v realnem časuenokamerni zajemIzdelava fotorealističnega in krmiljivega modela človeške glave je z ročnim modeliranjem zamudna, kakovostni obstoječi pristopi pa temeljijo na zajemu z več kamerami in so za običajnega uporabnika nedosegljivi. V diplomskem delu smo zgradili celovit cevovod, ki iz posnetka ene kamere izdela fotorealističen in krmiljiv avatar glave ter ga v živo krmili s kamero. Obrazu smo sledili z orodjem VHAP, ki oceni parametre modela FLAME, avatar pa smo zgradili s projektom GaussianAvatars, ki Gaussove primitive veže na trikotnike mreže. Pripravljalni in sprotni cevovod sta ločena in se srečata le pri parametrih modela FLAME, zato je vir teh parametrov zamenljiv brez ponovnega učenja avatarja. Na istem avatarju smo tako primerjali objavljeno preslikavo obraznih koeficientov ogrodja MediaPipe in lastni hibridni pristop z regresorjem SMIRK, ki mu oceno pogleda dodamo iz obraznih koeficientov. Izpeljali smo linearno pretvorbo med izraznima bazama različic modela FLAME, zapiranje vek pa prenesli z neposrednim premikom oglišč. Razvili smo tudi program za vodeni zajem, ki uporabnika usmerja k enakomerni pokritosti poz glave in sproti preverja ostrino. Hibridni pristop je dal opazno kakovostnejšo animacijo, razlika pa se pokaže prav pri deformacijah, ki jih izrazna baza modela FLAME ne zajame, predvsem pri zapiranju vek. Krmiljenje teče v realnem času na eni potrošniški grafični kartici. Pokazali smo tudi, da na kakovost zelo vplivata ostrina posnetka in enakomerna pokritost poz glave ter da privzete nastavitve zgoščevanja med daljšim učenjem močno povečajo število primitivov, ne da bi izboljšale kakovost. Uporaben obseg zornih kotov ustreza obsegu, zajetemu med snemanjem.20262026-09-01 13:20:08Diplomsko delo/naloga186429sl