20.500.12556/RUL-130311 Cross-lingual transfer of POS tagger into a low-resource language Medjezikovni prenos oblikoskladenjskega označevalnika v jezik z malo viri With the continuous growth of online textual content, machine learning is the only feasible approach for implementing advanced systems for language processing. Although many natural language processing (NLP) applications exist, most of them are anglocentric and low-resourced languages are left behind. We apply a cross-lingual transfer approach from several languages to overcome this limitation. Part-of-speech tagging (POS), a fundamental text processing task, is a prerequisite for a variety of NLP problems. To implement a POS-tagger in the low-resource Macedonian language, we use pretrained multilingual models along with annotated data in Serbian, Croatian and Bulgarian. We show that multilingual models fine-tuned with a set of languages similar to the target language achieve good performance in solving the POS-tagging task. Zaradi nenehne rasti količine spletnih besedil je strojno učenje edini izvedljiv pristop za izvajanje naprednih jezikovnih obdelav. Čeprav obstajajo števline aplikacije za obdelavo naravnega jezika, je večina anglocentričnih in jeziki z malo viri so zanemarjeni. V tem delu uporabljamo medjezikovni prenos iz več jezikov v jezik z malo viri. Oblikoskladenjski označevalnik je ena od temeljnih nalog obdelave besedil in je predpogoj za različne jezikovne naloge. Za implementacijo oblikoskladenjskega označevalnika za makedonski jezik, ki ima na voljo le malo virov, uporabljamo večjezikovne modele in označene podatke iz srbskega, hrvaškega in bolgarskega jezika. Pokazali smo, da večjezikovni modeli, prilagojeni z jeziki podobnimi ciljnemu jeziku, dosegajo dobre rezultate pri oblikoskladenjskem označevanju v makedonščini. cross-lingual transfer part-of-speech tagging multilingual language model low-resource language Macedonian language medjezikovni prenos oblikoskladenjski označevalnik večjezikovni model jezik z malo viri makedonski jezik true false false Angleški jezik Slovenski jezik Magistrsko delo/naloga 2021-09-13 13:40:02 2021-09-13 13:40:04 2022-09-09 04:15:50 0000-00-00 00:00:00 2021 0 0 0000-00-00 NiDoloceno NiDoloceno NiDoloceno 0000-00-00 0000-00-00 0000-00-00 29527 77541891 Stojanoska_Sanja_-_Medjezikovni_prenos_oblikoskladenjskega_oznacevalnika_v_jezik_z_malo_viri.pdf Stojanoska_Sanja_-_Medjezikovni_prenos_oblikoskladenjskega_oznacevalnika_v_jezik_z_malo_viri.pdf 1 8B7A7E917C981E70501B88354CC9D1AE 4db4653a28033de7e047de8d5725b2cc0d959e1b6adb281b298c3de06b976bc4 156399de-1487-11ec-a523-00155dcfd717 https://repozitorij.uni-lj.si/Dokument.php?lang=slv&id=147393 Fakulteta za računalništvo in informatiko 0 0 0