Podrobno

Large Language Models for Japanese–Croatian translation : human evaluation and macroeconomic implications
ID Karlović, Ratomir (Avtor), ID Bobanović Dasko, Mieta (Avtor), ID Srdanović, Irena (Avtor)

.pdfPDF - Predstavitvena datoteka, prenos (781,42 KB)
MD5: C38C5E30959C4017B68B6252DD0B76CD
URLURL - Izvorni URL, za dostop obiščite http://journals.uni-lj.si/ala/article/view/27227 Povezava se odpre v novem oknu

Izvleček
Large Language Models (LLMs) are increasingly used for translation, yet their value depends on preserving meaning rather than producing fluent output. This study evaluates seven LLMs on Japanese–Croatian translation, a low-resource, typologically distant language pair. Using rubric-based human evaluation of adequacy, fluency, terminology, and register, we compare model performance. Results show a stable ranking: qwen3 performs best, followed by phi4 and gemma3, while qwen2 performs worst. Performance differences reflect structural reconstruction, particularly argument recovery, aspectual mapping, lexical precision, and register. Qualitative analysis also reveals limited differentiation within the South Slavic continuum and pragmatic inconsistencies. Although productivity effects were not measured, improved translation adequacy may reduce post-editing and verification effort.

Jezik:Angleški jezik
Ključne besede:LLM, Japanese-Croatian machine translation, human evaluation, macroeconomic implications
Vrsta gradiva:Članek v reviji
Tipologija:1.01 - Izvirni znanstveni članek
Organizacija:FF - Filozofska fakulteta
Status publikacije:Objavljeno
Različica publikacije:Objavljena publikacija
Leto izida:2026
Št. strani:Str. 237-261
Številčenje:Vol. 16, no. 2
PID:20.500.12556/RUL-190497 Povezava se odpre v novem oknu
ISSN pri članku:2232-3317
DOI:10.4312/ala.16.2.237-261 Povezava se odpre v novem oknu
Datum objave v RUL:04.11.2026
Število ogledov:158
Število prenosov:45
Metapodatki:XML DC-XML DC-RDF
:
Kopiraj citat
Objavi na:Bookmark and Share

Gradivo je del revije

Naslov:Acta linguistica asiatica
Založnik:Založba Univerze v Ljubljani
ISSN:2232-3317
COBISS.SI-ID:255902464 Povezava se odpre v novem oknu

Licence

Licenca:CC BY-SA 4.0, Creative Commons Priznanje avtorstva-Deljenje pod enakimi pogoji 4.0 Mednarodna
Povezava:http://creativecommons.org/licenses/by-sa/4.0/deed.sl
Opis:Ta licenca Creative Commons je zelo podobna običajni licenci Priznanje avtorstva, vendar zahteva, da so materialne avtorske pravice na izpeljanih delih upravljane z enako licenco.

Sekundarni jezik

Jezik:Slovenski jezik
Naslov:Veliki jezikovni modeli za prevajanje med japonščino in hrvaščino : človeško vrednotenje in makroekonomske implikacije
Izvleček:
Veliki jezikovni modeli (LLM) se vse pogosteje uporabljajo za prevajanje, vendar je njihova vrednost odvisna predvsem od ohranjanja pomena. Prispevek vrednoti sedem LLM-jev pri prevajanju med japonščino in hrvaščino, jezikovnim parom z omejenimi viri in veliko tipološko oddaljenostjo. Na podlagi ocenjevalne rubrike za prevodno ustreznost, tekočnost, terminološko natančnost in register primerjamo uspešnost modelov. Rezultati kažejo stabilno razvrstitev: qwen3 se je izkazal najbolje, sledita phi4 in gemma3, najslabši pa je qwen2. Razlike v uspešnosti odražajo predvsem strukturno rekonstrukcijo, zlasti obnovo vezljivostne strukture, preslikavo glagolskega vida, natančnost izbire besed in register. Kvalitativna analiza razkriva tudi omejeno razlikovanje znotraj južnoslovanskega jezikovnega kontinuuma ter pragmatične nedoslednosti. Čeprav produktivnost ni bila neposredno merjena, bi večja prevodna ustreznost lahko zmanjšala obseg popravkov in napor pri preverjanju prevodov.

Ključne besede:veliki jezikovni modeli, LLM, strojno prevajanje med japonščino in hrvaščino, človeško vrednotenje, makroekonomske implikacije

Projekti

Financer:EC - European Commission
Program financ.:NextGeneration
Številka projekta:IIP_UNIPU_010138
Naslov:From Dynamic Vocabulary to Virtual Interaction: Development of a Foreign Language Learning Model in Tourism Using Corpora, Artificial Intelligence, and Extended Reality – Language for Real and Virtual Worlds
Akronim:VIRAI

Financer:Drugi - Drug financer ali več financerjev
Program financ.:SPIN
Številka projekta:IP.1.1.03.0120
Naslov:Konverzacijski Order Management
Akronim:INFOBIP

Financer:Drugi - Drug financer ali več financerjev
Program financ.:SPIN
Številka projekta:IP.1.1.03.0158
Naslov:Projektiranje i razvoj nove generacije laboratorijskog informacijskog sustava
Akronim:iLIS

Financer:Drugi - Drug financer ali več financerjev
Program financ.:SPIN
Številka projekta:IP.1.1.03.0039
Naslov:Istraživanje i razvoj inovativnog sustava preporuka za napredno gostoprimstvo u turizmu
Akronim:InnovateStay

Financer:EC - European Commission
Program financ.:Digital Europe
Številka projekta:101083838
Naslov:European Digital Innovation Hub Adriatic Croatia
Akronim:EDIH Adria

Podobna dela

Podobna dela v RUL:
Podobna dela v drugih slovenskih zbirkah:

Zbirka

To gradivo je del naslednjih zbirk del:
  1. Acta linguistica asiatica

Nazaj