20.500.12556/RUL-144133 Detekcija političnega prepričanja v novicah z uporabo velikih jezikovnih modelov Political stance detection in news using large language models V diplomskem delu analiziramo pristranskost slovenskih novičarskih medijev do politično-ideoloških tem ter oseb, ki se pogosto pojavljajo v njih. Članke želimo klasificirati v razrede (proti, za, ni) glede na pristranskost oziroma naklonjenost avtorja neki temi ali osebi. Detekcija pristranskosti v slovenskem jeziku še ni rešena, saj ne obstaja podatkovna množica za ta problem. Za učenje naših modelov smo uporabili javno dostopno označeno učno množico objav na omrežju Twitter. Uporabili smo angleško in prevedeno slovensko verzijo te učne množice. Sami smo za evalvacijo označili 150 slovenskih člankov. Preizkusimo dva klasifikacijska modela, ki temeljita na modelu BERT, SloBERTa in CroSloEngualBERT. Poizkusi kažejo precejšnje razlike med tematikami. Večina modelov najbolje napoveduje na celotnih člankih. Najboljše rezultate smo dobili na tematiki feminizem z mero F1 enako 0,58 najslabše pa na tematiki ateizem z mero F1 enako 0,33. We analyse the bias of Slovenian news media towards political-ideological topics and people who often appear in them. We want to classify the articles into classes (against, for, neutral) according to authors' inclination towards a certain topic or person. Stance detection in Slovene language is not yet solved, as there is no dataset for this problem. To learn our models, we used a publicly available labelled training set of Twitter posts in English and in the translated Slovenian version. We test two classification models based on the BERT model, SloBERTa and CroSloEngualBERT. The experiments show significant differences between the topics. Most models predict best on full articles. The best results were obtained on the topic of feminism with the F1-measure of 0,58 and the worst on the topic of atheism with the F1-measure of 0,33. Obdelava naravnega jezika detekcija pristranskosti model BERT večjezikovni modeli medjezikovni prenos CroSloEngualBERT SloBERTa Natural language processing stance detection BERT model multilanguage models crosslingual transfer CroSloEngualBERT SloBERTa true false false Slovenski jezik Angleški jezik Diplomsko delo/naloga 2023-02-01 16:20:00 2023-02-01 16:20:06 2023-02-24 09:12:45 0000-00-00 00:00:00 2023 0 0 0000-00-00 NiDoloceno NiDoloceno NiDoloceno 0000-00-00 0000-00-00 0000-00-00 34847 142949123 Potocnik_Aljaz_-_Detekcija_politicnega_prepricanja_v_novicah_z_uporabo_velikih_jezikovnih_modelo.pdf Potocnik_Aljaz_-_Detekcija_politicnega_prepricanja_v_novicah_z_uporabo_velikih_jezikovnih_modelo.pdf 1 57AB371916FA6FB79ADF81FAE0B89607 3d35d936433787f803ff8326c8842868cea7816f558c1527e8400468c6f7d8ed a0416c83-a243-11ed-9c94-00155dcfd717 https://repozitorij.uni-lj.si/Dokument.php?lang=slv&id=166289 Fakulteta za računalništvo in informatiko 0 0 0