Avtomatsko ocenjevanje testa tapkanja s prsti pri bolnikih s Parkinsonovo boleznijoZupanič, Matjaž (Avtor) Žabkar, Jure (Mentor) Georgiev, Dejan (Komentor) klasifikacijaParkinsonova bolezentest tapkanja s prstistrojno učenjeParkinsonova bolezen je kronična nevrodegenerativna bolezen, ki močno poslabša kvaliteto življenja pacientov. Čakalne vrste za nevrologa so danes precej dolge, pacienti pa so v tem obdobju brez ustrezne terapije s katero bi si olajšali simptome. Zato smo razvili avtomatsko metodo za določanje stopnje motorične prizadetosti oziroma bradikinezije Parkinsonove bolezni na podlagi testa tapkanja in s tem omogočili hitrejšo postavitev diagnoze. Zbrali smo 183 video posnetkov tapkanja, posnetih kar s pametnim telefonom v vsakdanjem okolju. Videe je v 5 razredov lestvice MDS-UPDRS ocenil nevrolog. Za prepoznavo roke smo uporabili MediaPipe Hand, ki nam kot rezultat vrne časovno vrsto skeleta roke. Za klasifikacijo smo ubrali dva različna pristopa. Prvič smo iz časovne vrste skeleta roke sami sestavili značilke, enkrat strogo po lestvici MDS-UPDRS, drugič pa se te nismo strogo držali. Te značilke smo nato uporabili v klasifikatorjih in z večplastnim perceptronom dosegli 61 \% točnost in 0,62 F1 vrednost. V drugem pristopu smo časovno vrsto razdalj med palcem in kazalcem uporabili neposredno v polnem konvolucijskem nevronskem omrežju in dosegli 77 \% točnost in 0,75 F1 vrednost. Izdelali smo še orodje za vizualizacijo tapkanja in izpis ključnih podatkov.20242024-06-19 13:35:01Magistrsko delo/naloga158700sl