A comprehensive measurement framework for performance assessment of the national innovation systems in EU countries

Popovska, Jasmina (author), Umek, Lan (mentor), Jaklič, Marko (comentor)

This dissertation develops a conceptually coherent and empirically robust framework for assessing the performance of National Innovation Systems (NIS) in the European Union (EU). It addresses a central constraint of existing benchmarks, such as the European Innovation Scoreboard, regarding the conflation of innovation outcomes with inputs, and framework conditions, which limits diagnostic value and policy relevance. Building on innovation systems theory, the study distinguishes between NIS’s performance, efficiency and capacity. Methodologically, the dissertation introduces Multi-Cluster Feature Selection for transparent, data-driven indicator selection; applies a two-stage Data Envelopment Analysis model distinguishing knowledge production from commercialisation; and proposes the Efficiency-Adjusted Result-based Performance Index, which integrates performance and efficiency through a performance-first aggregation rule. The framework was empirically implemented for the EU-27 over 2017-2024. Findings reveal that result-based performance and efficiency are empirically independent dimensions, commercialisation constitutes the binding structural constraint across most EU countries, confirming the European Paradox at the efficiency level, and innovation systems cluster into four distinct performance-efficiency configurations rather than converging around the EU average. Robustness checks confirm ranking stability and construct validity. The framework advances innovation measurement by providing policymakers with stage-specific diagnostics for evidence-based policy design and structurally grounded peer benchmarking. Limitations include the sample-dependent nature of DEA efficiency, normative weighting choices, and a fixed two-year transformation lag. Future research could extend the framework through meta-frontier approaches, dynamic efficiency analysis, sector-differentiated lag structures, and application to regional or sector-specific innovation systems.

• Language: English
• Keywords: innovation policy, innovation performance, innovation efficiency, innovation capacity, national innovation system, innovation index, Data Envelopment Analysis
• Work type: Dissertation
• Typology: 2.08 - Doctoral Dissertation
• Organization: FU - Faculty of Administration
• Place of publishing: Ljubljana
• Publisher: [J. Popovska ]
• Year: 2026
• Number of pages: XV, 263 str.
• PID: 20.500.12556/RUL-183829
• UDC: 330.34:330.341.1:061.1EU(043.2)
• COBISS.SI-ID: 282672131
• Publication date in RUL: 19.06.2026

Secondary language

• Language: Slovenian
• Title: Celovit okvir merjenja za ocenjevanje učinkovitosti in uspešnosti nacionalnih inovacijskih sistemov v državah EU

Abstract

Ta disertacija razvija konceptualno koherenten in empirično robusten okvir za ocenjevanje uspešnosti nacionalnih inovacijskih sistemov (NIS) v Evropski uniji (EU). Obravnava osrednjo omejitev obstoječih meril, kot je Evropska tabela inovacijskih kazalnikov, glede združevanja inovacijskih rezultatov z vložki in okvirnih pogojev, kar omejuje diagnostično vrednost in ustreznost za politiko. Študija, ki temelji na teoriji inovacijskih sistemov, razlikuje med uspešnostjo, učinkovitostjo in zmogljivostjo NIS. Metodološko disertacija uvaja izbor večklasterskih značilnosti za pregleden izbor kazalnikov, ki temelji na podatkih; uporablja dvostopenjski model analize ovoja podatkov, ki ločuje proizvodnjo znanja od komercializacije; in predlaga indeks uspešnosti, prilagojen rezultatom, ki združuje uspešnost in učinkovitost s pravilom agregacije, ki daje prednost uspešnosti. Okvir je bil empirično implementiran za EU-27 v obdobju 2017-2024. Ugotovitve kažejo, da sta uspešnost in učinkovitost, ki temeljita na rezultatih, empirično neodvisni dimenziji, da komercializacija predstavlja zavezujočo strukturno omejitev v večini držav EU, kar potrjuje evropski paradoks na ravni učinkovitosti, inovacijski sistemi pa se združujejo v štiri različne konfiguracije uspešnosti in učinkovitosti, namesto da bi se zbližali okoli povprečja EU. Preverjanja robustnosti potrjujejo stabilnost uvrstitve in veljavnost konstrukcije. Okvir izboljšuje merjenje inovacij tako, da oblikovalcem politik zagotavlja diagnostiko, specifično za posamezne faze, za oblikovanje politik, ki temeljijo na dokazih, in strukturno utemeljeno primerjalno analizo med vrstniki. Omejitve vključujejo naravo učinkovitosti DEA, odvisno od vzorca, možnosti normativne uteži in fiksni dvoletni zamik pri preobrazbi. Prihodnje raziskave bi lahko okvir razširile z meta-mejami, analizo dinamične učinkovitosti, sektorsko diferenciranimi strukturami zamika in uporabo v regionalnih ali sektorsko specifičnih inovacijskih sistemih.

• Keywords: inovacijska politika, inovacijska uspešnost, inovacijska učinkovitost, inovacijska zmogljivost, nacionalni inovacijski sistem, inovacijski indeks, analiza podatkovne učinkovitosti