20.500.12556/RUL-141661 Using machine learning to train a shepherd dog Uporaba strojnega učenja za učenje psa ovčarja Different organisms tend to form spontaneous and less predictable groups of individuals while doing everyday activities, such as eating or migrating. By understanding the rules of so called collective behaviour, we can learn how to control these groups to one's desires. Similar phenomena is of interest in many other domains like crowd control, cleaning the environment and other engineering problems. In this work, we focus on shepherding, which is an act of influencing or herding a flock of sheep using a shepherd dog. Here we create a model based on the existing shepherd dog models and then present some improvements to it to make it more realistic, such as limit the vision, add ability to hear other animals and implement a short term memory. We also adapt the model to allow multiple shepherd dogs to herd sheep at the same time. After that we present a model that is not based on some predefined rules, but is trained using reinforcement learning. Four different dog models are created, each able to observe the environment in a different way. The results show that the best model is the one that is using a ray casting method for observation. Številni organizmi velikokrat oblikujejo spontane in manj predvidljive skupine posameznikov, medtem ko opravljajo vsakodnevne dejavnosti, kot so prehranjevanje ali selitev. Z razumevanjem pravil tako imenovanega kolektivnega vedenja, se lahko naučimo, kako te skupine nadzorovati po svojih željah. S podobno tematiko se soočajo tudi na številnih drugih področjih, kot so nadzor množice, čiščenje okolja in drugi inženirski problemi. V tem delu smo se osredotočili na pastirstvo, kjer psi ovčarji s pomočjo strahu pasejo in preganjajo čredo ovc. Naredili smo model, ki temelji na obstoječih modelih psov ovčarjev in ovc, ter mu dodali nekaj izboljšav, da postane bolj realističen, kot so omejitev vida, sposobnost sluha in implementacija kratkoročnega spomina. Model smo prilagodili tudi tako, da omogoča sodelovanje večih psov pri pašnji črede. V nalogi predstavimo tudi modele, ki ne temeljio na vnaprej določenih pravilih, ampak se psi naučijo pasti ovce s pomočjo spodbujevanega učenja. Ustvarimo štiri takšne modele psov ovčarjev, od katerih vsak pridobiva podatke iz okolja na drugačen način. Z rezultati pokažemo, da se za najboljši model izkaže tisti, ki za opazovanje uporablja metodo sledenja žarkov. collective behaviour shepherding agent models artificial intelligence reinforcement learning simulation kolektivno vedenje pastirstvo agentni modeli umetna inteligenca spodbujevano učenje simulacija true false false Angleški jezik Slovenski jezik Magistrsko delo/naloga 2022-10-04 13:06:40 2022-10-04 13:06:49 2022-10-06 12:26:55 0000-00-00 00:00:00 2022 0 0 0000-00-00 NiDoloceno NiDoloceno NiDoloceno 0000-00-00 0000-00-00 0000-00-00 33881 124498691 Stromajer_Tim_-_Uporaba_strojnega_ucenja_za_ucenje_psa_ovcarja.pdf Stromajer_Tim_-_Uporaba_strojnega_ucenja_za_ucenje_psa_ovcarja.pdf 1 C7E858DFD1875DF230F215579E0A36A1 da03903e4764fd49c3c100aca5fea1b191be10c24c29355a06b3caefcd6d08b2 9f57ceed-43d4-11ed-9c94-00155dcfd717 https://repozitorij.uni-lj.si/Dokument.php?lang=slv&id=162771 Fakulteta za računalništvo in informatiko 0 0 0