20.500.12556/RUL-188372 Analiza učinkovitosti VJM pri obravnavi razpisne dokumentacije javnih naročil diplomsko delo Analysis of the effectiveness of LLM in processing public procurement tender documentation Razpisna dokumentacija javnih naročil lahko vsebuje veliko informacij, ki so razdeljene med več različnih dokumentov. Njihovo iskanje in pravilno razumevanje je zato lahko časovno potratno. Namen diplomske naloge je raziskati uporabnost velikih jezikovnih modelov pri obravnavi razpisne dokumentacije javnih naročil. V nalogi so predstvaljene osnovne zmožnosti in omejitve umetne inteligence, velikih jezikovnih modelov, ter pristopa generiranja z razširjenim iskanjem (angl. retrieval-augmented generation, RAG). Poleg tega so predstavljene tudi značilnosti javnih naročil in razpisne dokumentacije. Osrednji del naloge predstavlja analiza učinkovitosti velikih jezikovnih modelov pri izpolnjevanju razpisne dokumentacije. Raziskava je bila izvedena z osmimi udeleženci, razdeljenimi v dve skupini. Ena skupina je vprašanja reševala z uporabo velikega jezikovnega modela, druga pa brez njegove uporabe. Primerjani so bili čas reševanja, pravilnost odgovorov in opažanja udeležencev. Udeleženci z uporabo velikega jezikovnega modela so vprašalnik v povprečju rešili hitreje in dosegli večjo pravilnost odgovorov. Tudi njihova opažanja kažejo na enostavnejše iskanje informacij. Rezultati kažejo, da so veliki jezikovni modeli lahko uporabno podporno orodje pri obravnavi razpisne dokumentacije. Kljub temu je pomembno, da uporabnik pridobljene informacije preveri v izvorni dokumentaciji in ohrani končno presojo. Public procurement tender documentation may contain a large amount of information distributed across several different documents. Finding and correctly understanding this information can therefore be time-consuming. The aim of this thesis is to investigate the usefulness of large language models in the analysis of public procurement tender documentation. The thesis presents the basic capabilities and limitations of artificial intelligence, large language models, and retrieval-augmented generation (RAG). In addition, the main characteristics of public procurement and tender documentation are presented. The central part of the thesis focuses on the analysis of the effectiveness of large language models when working with tender documentation. The study was conducted with eight participants divided into two groups. One group answered the questions using a large language model, while the other group answered them without its use. The groups were compared in terms of completion time, accuracy of answers, and participants’ observations. On average, participants using a large language model completed the questionnaire faster and achieved higher answer accuracy. Their observations also indicate that finding information was easier. The results show that large language models can be a useful support tool when working with tender documentation. Nevertheless, it is important that users verify the obtained information against the original documentation and retain final judgement. diplomske naloge gradbeništvo umetna inteligenca veliki jezikovni modeli javna naročila razpisna dokumentacija obdelava dokumentov graduation thesis civil engineering artificial intelligence large language models public procurement tender documentation document processing true false false [J. Cigoj] Slovenski jezik Angleški jezik Diplomsko delo/naloga 2026-09-22 08:45:34 2026-09-22 08:45:41 2026-09-23 09:26:45 0000-00-00 00:00:00 2026 0 Ljubljana 2026 Ljubljana 1 spletni vir (1 datoteka PDF (IX, 30 str., [3] str. pril.)) 0000-00-00 NiDoloceno NiDoloceno NiDoloceno 0000-00-00 0000-00-00 0000-00-00 004.81:351.712.1:005.6(043.2) 182980 292103171 23275.pdf 23275.pdf 1 22C9AC8BE9411AF75288C89DAC5D7A46 164224ecfb4c0508165cea74c067fd715c254e3eaba71cdd983e8d53942d8311 29ab781e-b651-11f1-8bc5-0050569b8976 https://repozitorij.uni-lj.si/Dokument.php?lang=slv&id=248484 Fakulteta za gradbeništvo in geodezijo 0 0 0