20.500.12556/RUL-143452 Detekcija artefaktov generativnih nasprotniških mrež kot pomoč pri detekciji globokih ponaredkov Detection of generative adversarial network artefacts as an aid for detecting deepfakes V delu predstavimo nov pristop k detekciji globokih ponaredkov. Globoki ponaredek je tip medija, t.j. slika ali video posnetek, pri katerem je del slike, najpogosteje obraz ali telo digitalno modificirano. Velikokrat so uporabljeni za zle namene, kot je ˇsirjenje dezinformacij; najpogosteje so generirani s pomočjo globokih ali generativnih nasprotniških mrež. Digitalna modifikacija medija pogosto pusti t.i. digitalne artefakte v podatkovnem zapisu medija. Artefakte definiramo kot značilke v podatkih slikovnih elementov na digitalnem mediju, ki nastopijo kot nezaželena posledica modifikacije medija. V delu predstavimo pet metod detekcije globokih ponaredkov s pomočjo detekcije artefaktov generativnih nasprotniških mrež. Predstavljene metode evalviramo na sedmih različnih podatkovnih bazah globokih ponaredkov, ki jih dodatno razdelimo na take, ki so primarno generirane z generativno nasprotniško mrežo, in na te, ki niso. Pokažemo, da predstavljene metode dosegajo obetavne rezultate na pripravljenih podatkovnih bazah. We present a novelty approach to deepfake detection. Deepfake is a type of media, usually a picture or video, in which a part of the picture, most frequently face or body, has been digitally modified. Deepfakes are often used with ill intentions, such as spreading misinformation or opinion formulation. Modification of digital media usually leaves traces, a so-called digital artefacts. Artefacts can be defined as irregularities in digital media which are unwanted consequences of modification. We present five methods for detecting deepfakes by detecting artefacts of generative adversarial networks. We evaluate the presented methods on seven different deepfake databases which are further divided into those that are primarily generated by a generative adversarial network and those that are not. We show that the presented methods achieve promising results on the prepared databases. globoki ponaredki generativna nasprotniška mreža nevronska mreža artefakt slikovna biometrija deepfakes generative adversarial network neural network artefact image-based biometrics true false false Slovenski jezik Angleški jezik Magistrsko delo/naloga 2022-12-21 09:10:00 2022-12-21 09:10:04 2023-01-06 09:47:27 0000-00-00 00:00:00 2022 0 0 0000-00-00 NiDoloceno NiDoloceno NiDoloceno 0000-00-00 0000-00-00 0000-00-00 34521 136512515 Kriznar_Vid_-_Detekcija_artefaktov_generativnih_nasprotniskih_mrez_kot_pomoc_pri_detekciji_globo.pdf Kriznar_Vid_-_Detekcija_artefaktov_generativnih_nasprotniskih_mrez_kot_pomoc_pri_detekciji_globo.pdf 1 77B58E5DAB1C74A98E55347179BBC4B2 4600e60b638bb073a723bb662f22e4ee9d6a1ceb5e223fc8b26a5a365942c9e3 b13767da-8106-11ed-9c94-00155dcfd717 https://repozitorij.uni-lj.si/Dokument.php?lang=slv&id=165165 Fakulteta za računalništvo in informatiko 0 0 0