Asatryan Z, Birkholz C, Heinemann F (2024) Evidence-based policy or beauty contest? An LLM-based meta-analysis of EU cohesion policy evaluations. Int Tax Public Finance – https://doi.org/10.1007/s10797-024-09875-4 – open access document pdf – CC BY 4.0

Abstract (povzetek):

Neodvisna in kakovostna vrednotenja vladnih politik so pomemben prispevek k oblikovanju politike, ki temelji na dokazih. Po drugi strani pa institucionalna trenja in pomanjkanje spodbud za pripravo takšnih ocen predstavljajo tveganje, da se sistem spremeni v drago lepotno tekmovanje. Preučujemo enega najnaprednejših trgov vrednotenj politik na svetu, in sicer vrednotenja intervencij kohezijske politike EU (angl. EU Cohesion Policy), ki jih izvajajo države članice EU. Za kvantifikacijo ugotovitev približno 2 300 vrednotenj uporabljamo obsežen jezikovni model, te podatke pa dopolnjujemo z lastno anketo med avtorji vrednotenj. Pokazali smo, da ugotovitve vrednotenj niso skladne z ugotovitvami akademske literature o učinkih kohezijske politike na rezultate. Na podlagi dodatnih razlik med državami članicami naša analiza kaže, da je trg vrednotenj znotraj držav članic precej oligopolističen, da je po EU zelo razdrobljen in da so v delo formalno neodvisnih ocenjevalcev pogosto močno vpleteni organi upravljanja. Ti dejavniki prispevajo k temu, da so ugotovitve vrednotenj preveč optimistične, kar ogroža njihov pomen za (na dokazih temelječo) politiko. Na koncu razpravljamo o možnostih reforme, da bi bila vrednotenja kohezijske politike EU bolj nepristranska in učinkovita.

URL: https://link.springer.com/article/10.1007/s10797-024-09875-4