20.500.12556/RUL-120555 Implementacija sistema za ocenjevanje esejev na podlagi koherence in semantične skladnosti Implementation of an automated essay evaluation system based on coherence and semantic consistency Cilj magistrskega dela je implementirati sistem za ocenjevanje esejev v angleškem jeziku. Zgledujemo se po metodologiji obstoječega sistema, ki poleg ocenjevanja sintakse uporablja tudi mere koherentnosti in semantične skladnosti. Metodologijo implementiramo v grafičnem okolju Orange, s prijaznim vmesnikom, opcijsko uporabo vektorskih vložitev za predstavitev besedila in možnostjo nadaljnjega razvoja sistema. Sistem evalviramo na podatkih, dostopnih na spletnem mestu Kaggle in, kolikor je mogoče, rezultate primerjamo z rezultati dosedanje metodologije in jih podrobno analiziramo. Poglobimo se tudi v izbiranje atributov za izboljšanje rezultatov. Glavni prispevki dela obsegajo (1) implementacijo sistema, (2) preprostost uporabe in (3) izboljšave dosedanjega dela, vključno z dodatnimi računskimi možnostmi in podrobno analizo izbiranja atributov za izboljšanje rezultatov. The goal of this thesis is the implementation of an essay grading system. We lean heavily on the methodology of an existing system, which, besides using syntactical measurements, also uses coherence and semantic cosistency measures. We implement the methodology in the Orange data mining tool, with a firendly user interface, optional use of word embeddings for word representation and the possibility for further developments of the system. The system is evaluated on public datasets from the Kaggle website. The results are to the most possible extent compared with the results of the existing methodology and analyzed in detail. We also compare several attribute selection methods, which improve our results. Main contributions of this work are comprised of (1) implementation of the system, (2) ease of use and (3) improvements upon previous work, including additional computing options and detailed attribute selection analysis. samodejno ocenjevanje esejev semantična skladnost Orange automatic essay evaluation semantic consistency Orange true false false Slovenski jezik Angleški jezik Magistrsko delo/naloga 2020-09-22 17:05:16 2020-09-22 17:05:23 2024-02-26 11:55:14 0000-00-00 00:00:00 2020 0 0 0000-00-00 NiDoloceno NiDoloceno NiDoloceno 0000-00-00 0000-00-00 0000-00-00 25183 32227843 Simoncic_Ziga_-_Implementacija_sistema_za_ocenjevanje_esejev_na_podlagi_koherence_in_semanticne_.pdf Simoncic_Ziga_-_Implementacija_sistema_za_ocenjevanje_esejev_na_podlagi_koherence_in_semanticne_.pdf 1 7852B7B348C397CFD0F968E3A20B3B14 4a633c1b4e68f625418156db4c68b7d7575d32ce9c129143608e3b8acf2d982c 1e536fb8-a1ba-11eb-a523-00155dcfd717 https://repozitorij.uni-lj.si/Dokument.php?lang=slv&id=135366 Fakulteta za računalništvo in informatiko 0 0 0