Segmentacija in postavljanje končnih ločil v slovenskih stavkih z modeli tipa BERTVelikonja, Nejc (Avtor) Robnik Šikonja, Marko (Mentor) globoke nevronske mrežeobdelava naravnega jezikamodel BERTmodel RoBERTanapovedovanje končnih ločilsegmentacija stavkovtransformerjijezikovni modelV diplomski nalogi se osredotočamo na postavljanje končnih ločil v povedih. Modeli za postavljanje ločil so uporabni pri urejanju besedil, generiranih s prepoznavanjem govora in potencialno tudi pri popravljanju različnih besedil. Ugotoviti želimo, ali je poved pripovedna, vprašalna ali vzklična in kje se ta poved konča. Končna implementacija za vsako besedo v besedilu napove, ali in katero ločilo ji sledi. Uporabili smo slovenski različici modela BERT, ki sta uspešni pri obdelavi naravnega jezika. Model CroSloEngual BERT, ki je bil naučen na podlagi slovenskega, hrvaškega in angleškega jezika, in model SloBERTa, ki je bil naučen na izključno slovenskem jeziku, smo izpopolnili na pripravljeni učni množici. Rezultati kažejo, da model SloBERTa ločila napoveduje bolje od modela CroSloEngual BERT. Ugotovili smo tudi, da je težko napovedovati klicaje, saj jih v učni množici ni dovolj.20212021-09-13 19:35:00Diplomsko delo/naloga130323VisID: 32962COBISS_ID: 77868291sl