Znalostná báza

Čo je evaluácia

Evaluácia je systematické a objektívne posúdenie prebiehajúceho alebo ukončeného projektu, programu alebo politiky, vrátane jej návrhu, implementácie a výsledkov. Cieľom evaluácie je zistiť relevantnosť a naplnenie cieľov, efektívnosť, účinnosť, dopad a udržateľnosť danej intervencie.

Prečo je evaluácia dôležitá?

• Zodpovednosť (accountability) – evaluácia poskytuje dôkazy o tom, ako boli využité zdroje a aké výsledky boli dosiahnuté
• Učenie sa – z evaluačných zistení sa môžu poučiť tvorcovia politík, manažéri programov aj realizátori
• Zlepšovanie – evaluácia identifikuje silné a slabé stránky intervencie a poskytuje odporúčania na zlepšenie
• Rozhodovanie založené na dôkazoch – evaluačné zistenia podporujú informované rozhodovanie o budúcich intervenciách
• Transparentnosť – zverejňovanie evaluačných správ zvyšuje transparentnosť verejných výdavkov

Evaluácia vs. monitoring vs. audit

Evaluáciu je dôležité odlíšiť od príbuzných, ale odlišných aktivít:

• Monitoring je priebežný proces zberu údajov o implementácii projektu/programu. Na rozdiel od evaluácie je nepretržitý a zameriava sa primárne na vstupy, aktivity a výstupy.
• Audit sa zameriava na overenie súladu s pravidlami a predpismi. Posudzuje, či boli finančné prostriedky použité v súlade s právnymi a zmluvnými požiadavkami.
• Evaluácia ide ďalej – hodnotí relevantnosť, efektívnosť a dopad. Snaží sa pochopiť, prečo boli alebo neboli dosiahnuté zamýšľané výsledky.

Typy evaluácií

Podľa času realizácie

• Ex ante evaluácia – realizuje sa pred začiatkom programu/projektu. Posudzuje relevantnosť navrhovanej intervencie, kvalitu intervenčnej logiky, realistickosť cieľov a ukazovateľov.
• Priebežná (mid-term) evaluácia – uskutočňuje sa počas implementácie. Posudzuje priebeh realizácie a umožňuje korigovať smerovanie programu.
• Ex post evaluácia – vykonáva sa po ukončení programu/projektu. Hodnotí dosiahnuté výsledky, dopady a udržateľnosť.

Podľa realizátora

• Interná evaluácia (sebahodnotenie) – vykonaná pracovníkmi organizácie, ktorá program implementuje
• Externá evaluácia – vykonaná nezávislým externým evaluátorom alebo evaluačným tímom
• Zmiešaná evaluácia – kombinácia internej a externej evaluácie
• Partnerská evaluácia (peer review) – realizovaná kolegami z podobných organizácií

Podľa účelu

• Formatívna evaluácia – zameraná na zlepšovanie programu počas jeho realizácie
• Sumatívna evaluácia – zameraná na celkové zhodnotenie programu a rozhodovanie o jeho budúcnosti
• Evaluácia dopadu – zameriava sa na meranie dlhodobých zmien spôsobených programom
• Procesná evaluácia – hodnotí, ako bol program implementovaný
• Evaluácia potrieb – identifikuje potreby cieľovej skupiny pred návrhom intervencie

Špeciálne typy

• Tematická evaluácia – naprieč viacerými programami sa zameriava na konkrétnu tému (napr. rodová rovnosť, udržateľnosť)
• Klastrová evaluácia – hodnotenie skupiny súvisiacich projektov
• Meta-evaluácia – evaluácia kvality iných evaluácií
• Evaluácia evaluovateľnosti (evaluability assessment) – posudzuje, či je program pripravený na evaluáciu

Evaluačné metódy

Kvantitatívne metódy

• Randomizované kontrolované experimenty (RCT) – „zlatý štandard" v evaluácii dopadu. Náhodné rozdelenie do intervenčnej a kontrolnej skupiny.
• Kvázi-experimentálne metódy – využívajú porovnávacie skupiny bez náhodného výberu (difference-in-differences, regression discontinuity, propensity score matching)
• Dotazníkové prieskumy – štrukturovaný zber kvantitatívnych údajov od veľkého počtu respondentov
• Štatistická analýza sekundárnych údajov – analýza existujúcich administratívnych alebo štatistických údajov
• Cost-benefit analýza (CBA) – porovnanie nákladov a prínosov intervencie v peňažnom vyjadrení
• Cost-effectiveness analýza (CEA) – porovnanie nákladov rôznych alternatív na dosiahnutie rovnakého výsledku

Kvalitatívne metódy

• Hĺbkové rozhovory – pološtrukturované alebo neštruktúrované rozhovory s kľúčovými aktérmi
• Fokusové skupiny – skupinové diskusie s účastníkmi programu alebo zainteresovanými stranami
• Prípadové štúdie – hĺbková analýza konkrétnych prípadov alebo projektov
• Pozorovanie – priame pozorovanie implementácie programu v praxi
• Analýza dokumentov – systematické preskúmanie projektovej dokumentácie, správ a ďalších materiálov
• Most Significant Change (MSC) – participatívna metóda zberu a výberu príbehov o najvýznamnejších zmenách
• Outcome Harvesting – identifikácia a overenie výsledkov, ku ktorým prispel program

Zmiešané metódy (mixed methods)

Kombinácia kvantitatívnych a kvalitatívnych metód sa považuje za najlepšiu prax v evaluácii. Kvantitatívne údaje poskytujú informácie o rozsahu zmien a kauzalite, zatiaľ čo kvalitatívne údaje pomáhajú pochopiť kontext, procesy a skúsenosti aktérov.

Participatívne prístupy

• Participatívna evaluácia – aktívne zapojenie zainteresovaných strán do evaluačného procesu
• Empowerment evaluácia – evaluácia zameraná na posilnenie kapacít komunít
• Developmental evaluácia – priebežná evaluácia inovatívnych programov v komplexnom prostredí
• Utilization-focused evaluácia – evaluácia navrhnutá tak, aby maximalizovala využitie zistení primárnymi používateľmi

Evaluačný cyklus

Evaluačný cyklus zvyčajne zahŕňa nasledujúce fázy:

1. Plánovanie evaluácie

• Definovanie účelu a rozsahu evaluácie
• Formulovanie evaluačných otázok
• Identifikácia zainteresovaných strán
• Stanovenie rozpočtu a časového harmonogramu

2. Zadávacie podmienky (Terms of Reference – ToR)

• Kontext a pozadie programu
• Účel a ciele evaluácie
• Evaluačné otázky a kritériá
• Metodologické požiadavky
• Očakávané výstupy a časový harmonogram
• Kvalifikačné požiadavky na evaluátora

3. Výber evaluátora

Proces výberu zvyčajne zahŕňa verejné obstarávanie alebo oslovenie osvedčených evaluátorov. Kľúčové kritériá: odbornosť v danej oblasti, metodologická zdatnosť, nezávislosť a absencia konfliktu záujmov.

4. Inception (začiatočná fáza)

• Spresnenie evaluačného dizajnu a metodológie
• Vypracovanie inception reportu
• Príprava nástrojov zberu údajov

5. Zber údajov

Realizácia terénneho výskumu podľa schválenej metodológie – rozhovory, prieskumy, analýza dokumentov a pod.

6. Analýza a interpretácia

Systematická analýza zozbieraných údajov, triangulácia zistení a formulovanie záverov.

7. Správa a prezentácia výsledkov

• Vypracovanie návrhu evaluačnej správy
• Pripomienkovanie zo strany zadávateľa a zainteresovaných strán
• Finalizácia správy s odporúčaniami
• Prezentácia zistení

8. Využitie zistení

Implementácia odporúčaní, manažérska odpoveď (management response), sledovanie plnenia odporúčaní.

Evaluačné štandardy

Evaluačné kritériá OECD/DAC

V roku 2019 revidované kritériá, ktoré tvoria základ väčšiny evaluácií v medzinárodnom rozvoji:

• Relevantnosť – Je intervencia zmysluplná a zodpovedá potrebám cieľových skupín?
• Koherencia – Je intervencia v súlade s ostatnými intervenciami v danej oblasti? (nové kritérium od 2019)
• Efektívnosť (effectiveness) – Dosiahla intervencia svoje ciele?
• Účinnosť (efficiency) – Boli zdroje využité hospodárne?
• Dopad (impact) – Aké zmeny intervencia spôsobila?
• Udržateľnosť – Sú výsledky udržateľné aj po ukončení intervencie?

Etické štandardy

• Nezávislosť a nestrannosť evaluátora
• Dôvernosť a ochrana údajov respondentov
• Informovaný súhlas účastníkov
• Transparentnosť procesu a zistení
• Kultúrna citlivosť
• Princíp „do no harm" – neublížiť

Medzinárodné evaluačné spoločnosti a štandardy

• American Evaluation Association (AEA) – Program Evaluation Standards
• European Evaluation Society (EES) – európske evaluačné štandardy
• UNEG – Normy a štandardy evaluácie v systéme OSN
• OECD/DAC Network on Development Evaluation – kvalitné štandardy pre evaluáciu rozvojovej spolupráce

Evaluácia vo verejnej správe

Evaluácia vo verejnej správe na Slovensku sa rozvíja najmä v kontexte čerpania fondov EÚ a iniciatív na zvýšenie efektívnosti verejných výdavkov.

Evaluácia EŠIF a eurofondov

Európske štrukturálne a investičné fondy (EŠIF) vyžadujú systematické hodnotenie operačných programov. Na Slovensku zabezpečuje koordináciu hodnotení Centrálny koordinačný orgán (CKO) pri Ministerstve investícií, regionálneho rozvoja a informatizácie SR (MIRRI).

• Ex ante hodnotenie operačných programov
• Priebežné hodnotenia implementácie
• Ex post hodnotenia výsledkov a dopadov
• Plán hodnotení Programu Slovensko 2021–2027

Hodnota za peniaze

Útvar hodnoty za peniaze (ÚHP) pri Ministerstve financií SR zaviedol systematické revízie verejných výdavkov, ktoré hodnotia efektívnosť výdavkov naprieč rezortmi. Do roku 2026 bolo vypracovaných viac ako 39 hodnotiacich správ.

Ex post hodnotenie regulácií

Od roku 2022 je na Slovensku zavedená povinnosť ex post hodnotenia regulácií na základe Jednotnej metodiky na posudzovanie vybraných vplyvov, a to v súlade s Plánom obnovy a odolnosti SR.

Evaluácia v mimovládnom sektore

Mimovládne organizácie na Slovensku využívajú evaluácie na hodnotenie efektívnosti svojich programov a projektov, zvyšovanie zodpovednosti voči donorom a verejnosti, a na učenie sa a zlepšovanie.

Hlavné oblasti evaluácie v MVO

• Sociálna inklúzia a vzdelávanie – programy pre marginalizované rómske komunity, inkluzívne vzdelávanie
• Transparentnosť a boj proti korupcii – hodnotenie protikorupčných opatrení a transparentnosti
• Občianska spoločnosť a participácia – zapájanie občanov do rozhodovania
• Sociálne inovácie – nové prístupy k riešeniu spoločenských problémov
• Ľudské práva – monitoring a hodnotenie dodržiavania ľudských práv

Kľúčové organizácie

• SGI – Inštitút pre dobre spravovanú spoločnosť – evaluácie v oblasti verejnej správy, vzdelávania a sociálnej inklúzie
• Transparency International Slovensko – hodnotenie transparentnosti a protikorupčných opatrení
• MESA10 – analytické a evaluačné aktivity v oblasti vzdelávania
• Centrum pre výskum etnicity a kultúry (CVEK) – evaluácie v oblasti etnických menšín
• Nadácia otvorenej spoločnosti – podpora evaluačnej kultúry v mimovládnom sektore

Evaluácia v medzinárodnom rozvoji

Slovenská republika je členom OECD/DAC od roku 2013 a systematicky buduje svoj systém rozvojovej spolupráce pod značkou SlovakAid.

SlovakAid a evaluácia

Slovenská agentúra pre medzinárodnú rozvojovú spoluprácu (SAIDC) zodpovedá za monitoring a evaluáciu bilaterálnych a trilaterálnych rozvojových projektov. Ministerstvo zahraničných vecí a európskych záležitostí (MZVaEZ) zabezpečuje nezávislé evaluácie programov.

OECD/DAC Peer Review

Slovensko absolvovalo peer review DAC v rokoch 2019 a 2025. Hodnotenie v roku 2025 potvrdilo pokrok v posilnení systému rozvojovej spolupráce, ocenilo technickú asistenciu ako silnú stránku SR, a odporučilo okrem iného:

• Zvyšovanie úrovne ODA
• Sústredenie zdrojov do menšieho počtu programových iniciatív
• Pokračovanie v pravidelných nezávislých evaluáciách

Program Verejné financie pre rozvoj

Realizovaný od roku 2009 v spolupráci s UNDP, zameraný na zdieľanie skúseností SR v oblasti riadenia verejných financií s partnerskými krajinami.

Strednodobá stratégia rozvojovej spolupráce SR 2025–2030

Stratégia zachováva doterajšie tematické priority a zavádza nový „Zelený program" na podporu environmentálnej udržateľnosti.

Evaluácia na Slovensku – história a kontext

Evaluačná kultúra na Slovensku sa začala budovať v 90-tych rokoch, najmä v kontexte prípravy na vstup do EÚ a s podporou medzinárodných organizácií. Kľúčové míľniky:

• 90. roky – Prvé evaluačné aktivity v kontexte programov PHARE a prístupu do EÚ
• 2001 – Vznik SGI (Slovak Governance Institute) ako jednej z prvých organizácií systematicky sa venujúcich evaluácii na Slovensku
• 2003 – Začiatok budovania systému rozvojovej spolupráce SR (SlovakAid)
• 2004 – Vstup SR do EÚ, začiatok čerpania štrukturálnych fondov s požiadavkami na evaluáciu
• 2013 – Vstup SR do OECD/DAC
• 2016 – Vytvorenie Útvaru hodnoty za peniaze pri MF SR
• 2019 – Prvý Peer Review OECD/DAC pre SR
• 2022 – Zavedenie povinnosti ex post hodnotenia regulácií
• 2025 – Druhý Peer Review OECD/DAC, nová Strednodobá stratégia rozvojovej spolupráce 2025–2030

Využívanie AI v evaluácii

Umelá inteligencia (AI) – najmä strojové učenie, spracovanie prirodzeného jazyka a generatívne modely – rýchlo mení spôsob, akým sa realizujú evaluácie. AI dokáže zefektívniť časovo náročné úlohy, spracovať veľké objemy kvalitatívnych aj kvantitatívnych údajov a odhaliť vzorce, ktoré by tradičné metódy nemuseli zachytiť. Zároveň prináša nové riziká a etické otázky, ktoré musí zodpovedný evaluátor aktívne riadiť.

Oblasti využitia AI v evaluácii

• Zber a príprava údajov – automatická transkripcia rozhovorov a fokusových skupín, extrakcia údajov z dokumentov a formulárov, čistenie a štruktúrovanie veľkých datasetov
• Spracovanie prirodzeného jazyka (NLP) – automatizované kódovanie kvalitatívnych údajov, analýza sentimentu, tematická analýza otvorených odpovedí z prieskumov, klasifikácia textov
• Analýza veľkých objemov textu – systematické prehľady literatúry, analýza stoviek projektových správ či mediálnych výstupov, identifikácia opakujúcich sa tém naprieč rozsiahlymi súbormi dokumentov
• Strojové učenie pri evaluácii dopadu – prediktívne modelovanie, identifikácia podskupín s odlišnými účinkami (heterogenita dopadov), modelovanie kontrafaktuálu a hľadanie vzorcov v rozsiahlych administratívnych dátach
• Generatívna AI – sumarizácia rozsiahlych podkladov, návrhy evaluačných otázok a indikátorov, podpora pri písaní a štruktúrovaní správ, generovanie vizualizácií a prvé verzie textov
• Vizualizácia a reportovanie – automatizovaná tvorba grafov, interaktívnych dashboardov a prehľadných zhrnutí pre rôzne cieľové skupiny

NLP a analýza kvalitatívnych údajov

Najvýraznejší prínos AI sa zatiaľ prejavuje pri práci s kvalitatívnymi údajmi, ktoré sú tradične veľmi náročné na spracovanie. Nástroje na spracovanie prirodzeného jazyka dokážu podporiť:

• Automatizované (asistované) kódovanie – návrh kódovacích schém a predbežné priraďovanie kódov k segmentom textu, ktoré evaluátor následne overuje a upravuje
• Tematickú analýzu – identifikáciu opakujúcich sa tém a vzťahov medzi nimi v rozsiahlych súboroch rozhovorov či odpovedí
• Analýzu sentimentu a tónu – posúdenie postojov a emócií respondentov vo veľkých objemoch textových údajov
• Sumarizáciu – zhrnutie dlhých prepisov a dokumentov pri zachovaní kľúčových zistení

Etické aspekty a riziká

Využívanie AI v evaluácii prináša významné riziká, ktoré treba aktívne riadiť:

• Skreslenie (bias) – modely AI môžu reprodukovať a zosilňovať skreslenia obsiahnuté v tréningových dátach, čo môže znevýhodniť určité skupiny
• Halucinácie a presnosť – generatívne modely môžu vytvárať presvedčivo znejúce, no nepravdivé tvrdenia; každý výstup je nutné overiť voči primárnym zdrojom
• Ochrana údajov a súkromia – citlivé údaje respondentov sa nesmú vkladať do verejných nástrojov bez náležitej anonymizácie a súhlasu
• Transparentnosť a vysvetliteľnosť – evaluátor musí vedieť vysvetliť, ako boli zistenia získané, vrátane úlohy AI v procese
• Ľudský dohľad (human-in-the-loop) – konečná zodpovednosť za závery a odporúčania zostáva na evaluátorovi, nie na nástroji
• Reprodukovateľnosť – výstupy generatívnych modelov sa môžu líšiť pri opakovaní; je potrebné dokumentovať použité nástroje, verzie a postupy

Praktické odporúčania pre evaluátorov

• Používajte AI ako asistenta, nie ako autoritu – každý výstup kriticky overujte a triangulujte s ďalšími zdrojmi
• Vopred si ujasnite, na ktoré úlohy je AI vhodná (sumarizácia, predbežné kódovanie, čistenie dát) a na ktoré nie (konečné hodnotiace úsudky)
• Chráňte údaje respondentov – anonymizujte citlivé informácie a využívajte nástroje so zodpovedajúcimi zárukami ochrany súkromia
• Dokumentujte použité nástroje, verzie, vstupné zadania (prompty) a postupy v záujme transparentnosti a reprodukovateľnosti
• Buďte si vedomí rizika skreslenia a aktívne ho posudzujte, najmä pri zraniteľných skupinách
• Investujte do budovania kapacít – porozumenie možnostiam aj limitom AI je novou kľúčovou kompetenciou evaluátora

Slovník pojmov

• Baseline (východiskový stav) – stav pred začiatkom intervencie, voči ktorému sa merajú zmeny
• Beneficient – cieľová skupina, ktorej je intervencia určená
• Counterfactual (kontrafaktuál) – čo by sa stalo bez intervencie
• DAC – Development Assistance Committee (Výbor OECD pre rozvojovú pomoc)
• Donor – poskytovateľ finančných prostriedkov
• Evaluačné kritériá – hľadiská, podľa ktorých sa intervencia hodnotí
• Evaluačná otázka – konkrétna otázka, na ktorú má evaluácia odpovedať
• Indikátor (ukazovateľ) – merateľný údaj, ktorý signalizuje zmenu
• Intervenčná logika – reťazec predpokladaných príčinných vzťahov: vstupy → aktivity → výstupy → výsledky → dopad
• Logický rámec (logframe) – matrica zobrazujúca intervenčnú logiku, indikátory, zdroje overenia a predpoklady
• ODA – Official Development Assistance (oficiálna rozvojová pomoc)
• Stakeholder – zainteresovaná strana
• Teória zmeny (Theory of Change) – vysvetlenie, ako a prečo má intervencia viesť k požadovanej zmene
• ToR (Terms of Reference) – zadávacie podmienky evaluácie
• Triangulácia – overenie zistení z viacerých zdrojov a metód

Užitočné zdroje

Medzinárodné zdroje

• OECD/DAC Network on Development Evaluation – štandardy, príručky a databáza evaluácií
• UNEG (United Nations Evaluation Group) – normy a štandardy evaluácie v systéme OSN
• Better Evaluation – komplexný zdroj o evaluačných metódach a prístupoch
• European Evaluation Society (EES) – európska evaluačná komunita
• J-PAL (Abdul Latif Jameel Poverty Action Lab) – líder v randomizovaných evaluáciách

Slovenské zdroje

• Partnerská dohoda – Hodnotenie EŠIF – databáza hodnotiacich správ EŠIF
• Útvar hodnoty za peniaze (MF SR) – revízie verejných výdavkov
• SlovakAid – evaluácie v oblasti rozvojovej spolupráce
• MIRRI SR – evaluácie operačných programov a fondov EÚ
• SGI – Inštitút pre dobre spravovanú spoločnosť – výskum a evaluácie verejných politík