20.500.12556/RUL-165288 Ensuring Face Consistency and Image Naturalness in Multi-Person Image Generation with Diffusion Models Zagotavljanje doslednosti obrazov in naravnosti slik pri generiranju večih oseb z difuzijskimi modeli Diffusion models have been widely used for consistent subject generation, but current methods are mostly focused on consistency of a single subject in an image, while consistent multi-subject generation remains an unexplored problem. We propose a method that combines diffusion models with IP-Adapters for facial consistency, ControlNet for ensuring image variability, and facial inpainting for improved facial quality and consistency. We introduce our own module for facial matching, which improves prompt adherence in cases where the age of the subjects varies significantly or their gender is different. Our method produces images of great quality with facial consistency limited only by the underlying IP-Adapter methods. Difuzijski modeli se pogosto uporabljajo za dosledno generiranje subjektov, vendar so trenutne metode večinoma osredotočene na doslednost enega subjekta na sliki, medtem ko dosledno generiranje več subjektov ostaja neraziskan problem. Predlagamo metodo, ki združuje difuzijske modele z IP-Adapterji za doslednost obrazov, ControlNet-om za zagotavljanje variabilnosti slik ter Face Inpaint-om za izboljšanje kakovosti in doslednosti obraza. Uvedli smo tudi lasten modul za ujemanje obrazov, ki izboljša ujemanje slik in pripadajočega teksta v primerih, ko se starost referenčnih subjektov bistveno razlikuje ali je spol subjektov različen. Naša metoda generira slike visoke kakovosti, kjer je skladnost obrazov omejena zgolj z uporabljenimi metodami IP-Adapter. Diffusion models Image generation Facial consistency Difuzijski modeli Generiranje slik Doslednost obrazov true false false Angleški jezik Slovenski jezik Magistrsko delo/naloga 2024-11-29 10:40:01 2024-11-29 10:40:05 2024-12-09 06:16:50 0000-00-00 00:00:00 2024 0 0 0000-00-00 NiDoloceno NiDoloceno NiDoloceno 0000-00-00 0000-00-00 0000-00-00 37093 218108675 Zakelj_Mark_-_Zagotavljanje_doslednosti_obrazov_in_naravnosti_slik_pri_generiranju_vecih_oseb_z_.pdf Zakelj_Mark_-_Zagotavljanje_doslednosti_obrazov_in_naravnosti_slik_pri_generiranju_vecih_oseb_z_.pdf 1 C9A9E18D1D5E92A462CABB7AED4DB451 16b4a089c85a5c3f9d67e10c9e077fc93a2629cabadb02d6715a2098f9966d3c 7feaf793-ae35-11ef-b232-0050569b8976 https://repozitorij.uni-lj.si/Dokument.php?lang=slv&id=196370 Fakulteta za računalništvo in informatiko 0 0 0