20.500.12556/RUL-151705 Razlaga besedilnih klasifikatorjev s protiprimeri Counterfactual explanation of text classifiers Razlaga s protiprimeri je metoda razlage napovednih modelov strojnega učenja. V nalogi opišemo več načinov generiranja protiprimerov pri besedilnih klasifikatorjih, LIME-C, Polyjuice in ChatGPT, ter izpostavimo njihove ključne značilnosti. Uporabimo jih na treh različnih besedilnih podatkovnih množicah. Uporabljene metode in pridobljene protiprimere primerjamo in jih ocenimo po kriterijih za ocenjevanje kakovosti protiprimerov. Ugotovimo, da ni ene same najboljše rešitve in da ima vsak pristop prednosti in slabosti. Kljub temu se izkaže, da so trenutno najsplošnejša in uporabna rešitev protiprimeri, generirani z velikim jezikovnim modelom ChatGPT. Counterfactual explanations are used for interpreting predictive machine learning models. We describe three methods for generating counterfactual examples, LIME-C, Polyjuice and ChatGPT, and highlight their key features. We apply them to three different text datasets. We compare the methods used and the obtained counterfactual examples and evaluate them according to the quality criteria of counterfactual examples. We conclude that there is no single best solution and that each approach has advantages and disadvantages. Nevertheless, the most general and useful solution at the moment are the counterfactual examples generated with ChatGPT large language model. strojno učenje razlaga napovednega modela strojnega učenja protiprimeri razlaga s protiprimeri LIME-C Polyjuice ChatGPT machine learning explaining machine learning prediction model counterfactual examples counterfactual explanation LIME-C Polyjuice ChatGPT true false false Slovenski jezik Angleški jezik Diplomsko delo/naloga 2023-10-17 16:25:02 2023-10-17 16:25:08 2023-10-27 12:24:02 0000-00-00 00:00:00 2023 0 0 0000-00-00 NiDoloceno NiDoloceno NiDoloceno 0000-00-00 0000-00-00 0000-00-00 36681 170240003 Subic_Gal_-_Razlaga_besedilnih_klasifikatorjev_s_protiprimeri.pdf Subic_Gal_-_Razlaga_besedilnih_klasifikatorjev_s_protiprimeri.pdf 1 12150F55D9816F493DE62796ED71FC1E 4b56c58bb8282342d0dc350a56b9bd2fa299d5e87f03e5bbcd957ac864d1df5e f90b2a68-6cf8-11ee-bec4-0050569b8976 https://repozitorij.uni-lj.si/Dokument.php?lang=slv&id=176742 Fakulteta za računalništvo in informatiko 0 0 0