Sborník 2009 díl 2. - Fakulta informatiky a managementu - Univerzita ...

Sborník 2009 díl 2. - Fakulta informatiky a managementu - Univerzita ... Sborník 2009 díl 2. - Fakulta informatiky a managementu - Univerzita ...

08.01.2013 Views

Michal Petrůj INDIKÁTORY ÚSPĚŠNOSTI NEINVESTIČNÍCH VEŘEJNÝCH ROZVOJOVÝCH PROJEKTŮ Úvod Tento článek se zaměřuje na problematiku veřejných rozvojových projektů fungujících v prostředí Regionální a strukturální politiky EU a její implementace v tuzemsku při podpoře regionálního rozvoje. Předmětem zkoumání je oblast monitorování a zejména pak vyhodnocování realizovaných projektů. Důraz na hodnocení „úspěšnosti“ takových projektů je motivován zejména tím, že převážnou část rozpočtových výdajů (obvyklá hodnota činí 85 %) kryjí veřejné dotační zdroje z rozpočtu EU (strukturálních fondů), u nichž má smysl zabývat se hodnocením hospodárnosti, efektivnosti a účinnosti. Nástrojem takového hodnocení je disciplína pro veřejné rozpočty – tzv. evaluace, kterou lze aplikovat jak na úrovni výdajového programu, tak na úrovni jednotlivých projektů spadajících pod tento program. Právě na úrovni projektů lze v tuzemsku hovořit o nízkém stupni rozvoje i využití této disciplíny. Úspěšnost projektů je v současné době měřena prostřednictvím povinných monitorovacích indikátorů, které jsou schopny zachytit dosažený stav realizace projektu (popř. jeho ukončení a provozu). Evaluace v podobě uceleného sebe-evaluačního modelu s tzv. evaluačními indikátory úspěšnosti však umožňuje tento dosažený stav vysvětlit a umožnit jak realizátorovi projektu, tak dalším zainteresovaným subjektům (administrátorům strukturální pomoci) hlubší porozumění projektu. Literární rešerše Evaluace, coby samostatná disciplína vyvinutá pro veřejné rozpočty, bývá často zaměňována s termínem „hodnocení“. Definic pojmu evaluace je řada – možným východiskem pro přesné vymezení tohoto pojmu s důrazem na odlišnosti od obecného „hodnocení“ je výklad Píšové a Groliga [4, 1], dle kterého „…evaluace identifikuje a vymezuje obecně platné skutečnosti a navrhuje možné způsoby řešení.“ Bude-li respektován tento předpoklad, pak je evaluace specializovanou formou hodnocení zaměřeného výhradně na zkoumání veřejných výdajů, přičemž cílem evaluace není nalezení nepřesností z hlediska činnosti jednotlivce, ale naopak jde o nalezení faktorů relevantních pro implementační systém jako celek [4, 1]. Implementačním systémem není jen politika, popř. dílčí strategie (operační programy) – je jím také projekt coby ucelená základní implementační jednotka politiky. Avšak ani po doplnění prvotní definice pohledem rozlišujícím typické atributy různých druhů hodnocení nelze říci, že by definice pojmu evaluace byla úplná. Především je třeba říci, že by evaluace měla být procesem vyhodnocování shromážděných informací o výstupech projektu. V projektové teorii i na realizační (praktické) úrovni bylo přijato toto členění výstupů projektu [2, 22]: okamžité produkty realizovaného projektu (výstupy – short-term outcomes) a dlouhodobé produkty (efekty) ukončeného projektu (long-term outcomes). Meziúrovní, která se stala obvyklým standardem veřejných rozvojových projektů v tuzemsku je střednědobá oblast dílčích cílů projektu označujících kýžené výstupy projektu v obvykle pětiletém období udržitelnosti výstupů projektu (tj. v období provozu). Evaluace se v rámci těchto úrovní výstupů zabývá nejen sběrem informací (reprezentovaných monitorovacími indikátory), ale také je dále vyhodnocuje prostřednictvím vlastních evaluačních indikátorů neboli tzv. indikátorů úspěšnosti. K výše uvedenému je zapotřebí dodat, že by se stejný proces shromažďování informací měl týkat také způsobů dosažení výstupů, střednědobých výsledků a dlouhodobých dopadů projektu, přičemž informace je nejen zapotřebí shromažďovat, ale také je využívat k odpovědi na počáteční evaluační otázky (např. „Jakých výsledků se nám 142

Michal Petrůj INDIKÁTORY ÚSPĚŠNOSTI NEINVESTIČNÍCH VEŘEJNÝCH ROZVOJOVÝCH PROJEKTŮ u dané cílové skupiny podařilo v horizontu jednoho roku po ukončení projektu dosáhnout?“) a dále je distribuovat v rámci týmu realizujícího projekt a dalších zainteresovaných subjektů (administrátora pomoci, cílových skupin, partnerů projektů atd.). V návaznosti na výše uvedené je vhodné krátce se zastavit u obecného modelu sebe-evaluace na úrovni projektu, který je dle [3, 10–20] popsán následovně: 1. Zpracování logické mapy projektu 2. Formulace evaluačních otázek a stanovení měřitelných indikátorů (indikátorů úspěšnosti). 3. Výběr metodologického přístupu 4. Sběr dat a jejich analýza 5. Odpověď na evaluační otázky 6. Reporting, příp. disseminace zjištěných výsledků evaluace Vzhledem ke zkoumání problematiky indikátorů se blíže zaměřím na přiblížení prvního a druhého metodického kroku, tj. zpracování logické mapy projektu a formulace evaluačních otázek včetně stanovení měřitelných indikátorů. Zatímco logická mapa projektu je v tuzemsku relativně známým a reálně využívaným nástrojem (v tuzemsku se jedná o tzv. matici logického rámce) a je bezesporu nutným podkladem pro jakoukoliv projektovou evaluaci, pak právě krok č. 2 představuje fázi, v které jsou stanoveny mnou zkoumané indikátory úspěšnosti. U logické mapy projektu je pro jakoukoliv další práci s indikátory nezbytná tzv. vertikální logika, která je jasným znázorněním logické vazby mezi klíčovými aktivitami projektu (školení, kulturní akce, konference o cestovním ruchu apod.) a na ně navázanými výstupy, na základě nichž lze posoudit dosažení dílčích cílů projektu (střednědobé výsledky). Pro úplnost této vazby nezbývá než dodat, že o dosažení celkového (všeobecného) cíle projektu a očekávaných dlouhodobých dopadech lze hovořit na základě pozitivního hodnocení všech dílčích cílů projektu. Tuto logiku obsahuje i v tuzemsku používaná matice logického rámce, která těmto klíčovým prvkům celého projektu přiřazuje příslušné ukazatele stavu – monitorovací indikátory (počet podpořených akcí, počet účastníků, podíl měkké turistiky na cestovním ruchu v regionu apod.). Vzhledem k tomu, že na této úrovni je sledován (monitorován) především dosahovaný stav, lze tvrdit, že se jedná o sféru projektového monitoringu. Evaluační otázky lze zjednodušeně popsat jako otázky směřující na klíčové prvky projektu (aktivity, výstupy, výsledky a dopady), které mají být dosaženy. Konkrétní počet a rozsah otázek závisí toliko na rozhodnutí projektového managementu. Tyto otázky lze klást jak u aktivit („Jaké aktivity jsou klíčové pro dosažení cílů projektu?“), výstupů („Dosahujeme také neočekávaných výstupů?“) a dopadů („Budou dlouhodobé dopady projektu u cílové skupiny pozitivní?“), tak u posuzování hospodárnosti projektu („Dosahujeme požadované výstupy s minimálními náklady?“), účelnosti projektu („Byly dosaženy cíle projektu?“) atd. Určitou pomůckou při formulaci komplexní sady evaluačních otázek na projektové úrovni se stává pomocná klasifikace otázek, kterou ve své práci uvádí [5, 10], jehož dělení otázek na otázky vztažené k implementaci (procesní otázky), k výstupům a k dopadům je dobrým základem (hrubým dělením) pro doplnění dalších specifických subkategorií otázek v závislosti na typu projektu (otázky na splnění 3E, spokojenost cílové skupiny, kvality partnerství atd.). Právě na evaluační otázky by dle výše uvedeného modelu měly být navázány indikátory úspěšnosti. Vzhledem k tomu, že zde již jedna úroveň indikátorů existuje (monitorovací 143

Michal Petrůj INDIKÁTORY ÚSPĚŠNOSTI NEINVESTIČNÍCH VEŘEJNÝCH ROZVOJOVÝCH<br />

PROJEKTŮ<br />

u dané cílové skupiny podařilo v horizontu jednoho roku po ukončení projektu<br />

dosáhnout?“) a dále je distribuovat v rámci týmu realizujícího projekt a dalších<br />

zainteresovaných subjektů (administrátora pomoci, cílových skupin, partnerů projektů<br />

atd.). V návaznosti na výše uvedené je vhodné krátce se zastavit u obecného modelu<br />

sebe-evaluace na úrovni projektu, který je dle [3, 10–20] popsán následovně:<br />

1. Zpracování logické mapy projektu<br />

<strong>2.</strong> Formulace evaluačních otázek a stanovení měřitelných indikátorů (indikátorů<br />

úspěšnosti).<br />

3. Výběr metodologického přístupu<br />

4. Sběr dat a jejich analýza<br />

5. Odpověď na evaluační otázky<br />

6. Reporting, příp. disseminace zjištěných výsledků evaluace<br />

Vzhledem ke zkoumání problematiky indikátorů se blíže zaměřím na přiblížení prvního<br />

a druhého metodického kroku, tj. zpracování logické mapy projektu a formulace<br />

evaluačních otázek včetně stanovení měřitelných indikátorů. Zatímco logická mapa<br />

projektu je v tuzemsku relativně známým a reálně využívaným nástrojem (v tuzemsku<br />

se jedná o tzv. matici logického rámce) a je bezesporu nutným podkladem pro<br />

jakoukoliv projektovou evaluaci, pak právě krok č. 2 představuje fázi, v které jsou<br />

stanoveny mnou zkoumané indikátory úspěšnosti.<br />

U logické mapy projektu je pro jakoukoliv další práci s indikátory nezbytná tzv.<br />

vertikální logika, která je jasným znázorněním logické vazby mezi klíčovými aktivitami<br />

projektu (školení, kulturní akce, konference o cestovním ruchu apod.) a na ně<br />

navázanými výstupy, na základě nichž lze posoudit dosažení <strong>díl</strong>čích cílů projektu<br />

(střednědobé výsledky). Pro úplnost této vazby nezbývá než dodat, že o dosažení<br />

celkového (všeobecného) cíle projektu a očekávaných dlouhodobých dopadech lze<br />

hovořit na základě pozitivního hodnocení všech <strong>díl</strong>čích cílů projektu. Tuto logiku<br />

obsahuje i v tuzemsku používaná matice logického rámce, která těmto klíčovým<br />

prvkům celého projektu přiřazuje příslušné ukazatele stavu – monitorovací indikátory<br />

(počet podpořených akcí, počet účastníků, po<strong>díl</strong> měkké turistiky na cestovním ruchu<br />

v regionu apod.). Vzhledem k tomu, že na této úrovni je sledován (monitorován)<br />

především dosahovaný stav, lze tvrdit, že se jedná o sféru projektového monitoringu.<br />

Evaluační otázky lze zjednodušeně popsat jako otázky směřující na klíčové prvky<br />

projektu (aktivity, výstupy, výsledky a dopady), které mají být dosaženy. Konkrétní<br />

počet a rozsah otázek závisí toliko na rozhodnutí projektového <strong>managementu</strong>. Tyto<br />

otázky lze klást jak u aktivit („Jaké aktivity jsou klíčové pro dosažení cílů projektu?“),<br />

výstupů („Dosahujeme také neočekávaných výstupů?“) a dopadů („Budou dlouhodobé<br />

dopady projektu u cílové skupiny pozitivní?“), tak u posuzování hospodárnosti projektu<br />

(„Dosahujeme požadované výstupy s minimálními náklady?“), účelnosti projektu<br />

(„Byly dosaženy cíle projektu?“) atd. Určitou pomůckou při formulaci komplexní sady<br />

evaluačních otázek na projektové úrovni se stává pomocná klasifikace otázek, kterou ve<br />

své práci uvádí [5, 10], jehož dělení otázek na otázky vztažené k implementaci<br />

(procesní otázky), k výstupům a k dopadům je dobrým základem (hrubým dělením) pro<br />

doplnění dalších specifických subkategorií otázek v závislosti na typu projektu (otázky<br />

na splnění 3E, spokojenost cílové skupiny, kvality partnerství atd.). Právě na evaluační<br />

otázky by dle výše uvedeného modelu měly být navázány indikátory úspěšnosti.<br />

Vzhledem k tomu, že zde již jedna úroveň indikátorů existuje (monitorovací<br />

143

Hooray! Your file is uploaded and ready to be published.

Saved successfully!

Ooh no, something went wrong!