Sborník 2009 díl 2. - Fakulta informatiky a managementu - Univerzita ...
Sborník 2009 díl 2. - Fakulta informatiky a managementu - Univerzita ... Sborník 2009 díl 2. - Fakulta informatiky a managementu - Univerzita ...
Michal Petrůj INDIKÁTORY ÚSPĚŠNOSTI NEINVESTIČNÍCH VEŘEJNÝCH ROZVOJOVÝCH PROJEKTŮ Úvod Tento článek se zaměřuje na problematiku veřejných rozvojových projektů fungujících v prostředí Regionální a strukturální politiky EU a její implementace v tuzemsku při podpoře regionálního rozvoje. Předmětem zkoumání je oblast monitorování a zejména pak vyhodnocování realizovaných projektů. Důraz na hodnocení „úspěšnosti“ takových projektů je motivován zejména tím, že převážnou část rozpočtových výdajů (obvyklá hodnota činí 85 %) kryjí veřejné dotační zdroje z rozpočtu EU (strukturálních fondů), u nichž má smysl zabývat se hodnocením hospodárnosti, efektivnosti a účinnosti. Nástrojem takového hodnocení je disciplína pro veřejné rozpočty – tzv. evaluace, kterou lze aplikovat jak na úrovni výdajového programu, tak na úrovni jednotlivých projektů spadajících pod tento program. Právě na úrovni projektů lze v tuzemsku hovořit o nízkém stupni rozvoje i využití této disciplíny. Úspěšnost projektů je v současné době měřena prostřednictvím povinných monitorovacích indikátorů, které jsou schopny zachytit dosažený stav realizace projektu (popř. jeho ukončení a provozu). Evaluace v podobě uceleného sebe-evaluačního modelu s tzv. evaluačními indikátory úspěšnosti však umožňuje tento dosažený stav vysvětlit a umožnit jak realizátorovi projektu, tak dalším zainteresovaným subjektům (administrátorům strukturální pomoci) hlubší porozumění projektu. Literární rešerše Evaluace, coby samostatná disciplína vyvinutá pro veřejné rozpočty, bývá často zaměňována s termínem „hodnocení“. Definic pojmu evaluace je řada – možným východiskem pro přesné vymezení tohoto pojmu s důrazem na odlišnosti od obecného „hodnocení“ je výklad Píšové a Groliga [4, 1], dle kterého „…evaluace identifikuje a vymezuje obecně platné skutečnosti a navrhuje možné způsoby řešení.“ Bude-li respektován tento předpoklad, pak je evaluace specializovanou formou hodnocení zaměřeného výhradně na zkoumání veřejných výdajů, přičemž cílem evaluace není nalezení nepřesností z hlediska činnosti jednotlivce, ale naopak jde o nalezení faktorů relevantních pro implementační systém jako celek [4, 1]. Implementačním systémem není jen politika, popř. dílčí strategie (operační programy) – je jím také projekt coby ucelená základní implementační jednotka politiky. Avšak ani po doplnění prvotní definice pohledem rozlišujícím typické atributy různých druhů hodnocení nelze říci, že by definice pojmu evaluace byla úplná. Především je třeba říci, že by evaluace měla být procesem vyhodnocování shromážděných informací o výstupech projektu. V projektové teorii i na realizační (praktické) úrovni bylo přijato toto členění výstupů projektu [2, 22]: okamžité produkty realizovaného projektu (výstupy – short-term outcomes) a dlouhodobé produkty (efekty) ukončeného projektu (long-term outcomes). Meziúrovní, která se stala obvyklým standardem veřejných rozvojových projektů v tuzemsku je střednědobá oblast dílčích cílů projektu označujících kýžené výstupy projektu v obvykle pětiletém období udržitelnosti výstupů projektu (tj. v období provozu). Evaluace se v rámci těchto úrovní výstupů zabývá nejen sběrem informací (reprezentovaných monitorovacími indikátory), ale také je dále vyhodnocuje prostřednictvím vlastních evaluačních indikátorů neboli tzv. indikátorů úspěšnosti. K výše uvedenému je zapotřebí dodat, že by se stejný proces shromažďování informací měl týkat také způsobů dosažení výstupů, střednědobých výsledků a dlouhodobých dopadů projektu, přičemž informace je nejen zapotřebí shromažďovat, ale také je využívat k odpovědi na počáteční evaluační otázky (např. „Jakých výsledků se nám 142
Michal Petrůj INDIKÁTORY ÚSPĚŠNOSTI NEINVESTIČNÍCH VEŘEJNÝCH ROZVOJOVÝCH PROJEKTŮ u dané cílové skupiny podařilo v horizontu jednoho roku po ukončení projektu dosáhnout?“) a dále je distribuovat v rámci týmu realizujícího projekt a dalších zainteresovaných subjektů (administrátora pomoci, cílových skupin, partnerů projektů atd.). V návaznosti na výše uvedené je vhodné krátce se zastavit u obecného modelu sebe-evaluace na úrovni projektu, který je dle [3, 10–20] popsán následovně: 1. Zpracování logické mapy projektu 2. Formulace evaluačních otázek a stanovení měřitelných indikátorů (indikátorů úspěšnosti). 3. Výběr metodologického přístupu 4. Sběr dat a jejich analýza 5. Odpověď na evaluační otázky 6. Reporting, příp. disseminace zjištěných výsledků evaluace Vzhledem ke zkoumání problematiky indikátorů se blíže zaměřím na přiblížení prvního a druhého metodického kroku, tj. zpracování logické mapy projektu a formulace evaluačních otázek včetně stanovení měřitelných indikátorů. Zatímco logická mapa projektu je v tuzemsku relativně známým a reálně využívaným nástrojem (v tuzemsku se jedná o tzv. matici logického rámce) a je bezesporu nutným podkladem pro jakoukoliv projektovou evaluaci, pak právě krok č. 2 představuje fázi, v které jsou stanoveny mnou zkoumané indikátory úspěšnosti. U logické mapy projektu je pro jakoukoliv další práci s indikátory nezbytná tzv. vertikální logika, která je jasným znázorněním logické vazby mezi klíčovými aktivitami projektu (školení, kulturní akce, konference o cestovním ruchu apod.) a na ně navázanými výstupy, na základě nichž lze posoudit dosažení dílčích cílů projektu (střednědobé výsledky). Pro úplnost této vazby nezbývá než dodat, že o dosažení celkového (všeobecného) cíle projektu a očekávaných dlouhodobých dopadech lze hovořit na základě pozitivního hodnocení všech dílčích cílů projektu. Tuto logiku obsahuje i v tuzemsku používaná matice logického rámce, která těmto klíčovým prvkům celého projektu přiřazuje příslušné ukazatele stavu – monitorovací indikátory (počet podpořených akcí, počet účastníků, podíl měkké turistiky na cestovním ruchu v regionu apod.). Vzhledem k tomu, že na této úrovni je sledován (monitorován) především dosahovaný stav, lze tvrdit, že se jedná o sféru projektového monitoringu. Evaluační otázky lze zjednodušeně popsat jako otázky směřující na klíčové prvky projektu (aktivity, výstupy, výsledky a dopady), které mají být dosaženy. Konkrétní počet a rozsah otázek závisí toliko na rozhodnutí projektového managementu. Tyto otázky lze klást jak u aktivit („Jaké aktivity jsou klíčové pro dosažení cílů projektu?“), výstupů („Dosahujeme také neočekávaných výstupů?“) a dopadů („Budou dlouhodobé dopady projektu u cílové skupiny pozitivní?“), tak u posuzování hospodárnosti projektu („Dosahujeme požadované výstupy s minimálními náklady?“), účelnosti projektu („Byly dosaženy cíle projektu?“) atd. Určitou pomůckou při formulaci komplexní sady evaluačních otázek na projektové úrovni se stává pomocná klasifikace otázek, kterou ve své práci uvádí [5, 10], jehož dělení otázek na otázky vztažené k implementaci (procesní otázky), k výstupům a k dopadům je dobrým základem (hrubým dělením) pro doplnění dalších specifických subkategorií otázek v závislosti na typu projektu (otázky na splnění 3E, spokojenost cílové skupiny, kvality partnerství atd.). Právě na evaluační otázky by dle výše uvedeného modelu měly být navázány indikátory úspěšnosti. Vzhledem k tomu, že zde již jedna úroveň indikátorů existuje (monitorovací 143
- Page 92 and 93: Robert Mroczek EFFECT OF THE COMMON
- Page 94 and 95: Martin Musil, Kateřina Dušáková
- Page 96 and 97: Martin Musil, Kateřina Dušáková
- Page 98 and 99: JEDNOTNÝ EURÓPSKY PLATOBNÝ PRIES
- Page 100 and 101: Ivana Nemšáková, Pavol Kolenčí
- Page 102 and 103: Ivana Nemšáková, Pavol Kolenčí
- Page 104 and 105: Mária Novysedláková, Martina Sl
- Page 106 and 107: Mária Novysedláková, Martina Sl
- Page 108 and 109: Mária Novysedláková, Martina Sl
- Page 110 and 111: Pavla Odehnalová RODINNÉ PODNIKÁ
- Page 112 and 113: Pavla Odehnalová RODINNÉ PODNIKÁ
- Page 114 and 115: WSPÓŁDZIAŁANIE JEDNOSTEK SAMORZ
- Page 116 and 117: Jarosław Olejniczak, Dorota Bednar
- Page 118 and 119: Jarosław Olejniczak, Dorota Bednar
- Page 120 and 121: Jarosław Olejniczak, Dorota Bednar
- Page 122 and 123: Anna Olszańska POSSIBILITIES OF RE
- Page 124 and 125: Anna Olszańska POSSIBILITIES OF RE
- Page 126 and 127: Anna Olszańska POSSIBILITIES OF RE
- Page 128 and 129: Anna Olszańska POSSIBILITIES OF RE
- Page 130 and 131: Alena Pauličková MEDZINÁRODNÉ V
- Page 132 and 133: Alena Pauličková MEDZINÁRODNÉ V
- Page 134 and 135: Alena Pauličková MEDZINÁRODNÉ V
- Page 136 and 137: Alena Pauličková MEDZINÁRODNÉ V
- Page 138 and 139: Jan Pelikán, Jan Fábry, Jiří He
- Page 140 and 141: Jan Pelikán, Jan Fábry, Jiří He
- Page 144 and 145: Michal Petrůj INDIKÁTORY ÚSPĚŠ
- Page 146 and 147: Michal Petrůj INDIKÁTORY ÚSPĚŠ
- Page 148 and 149: Michal Petrůj INDIKÁTORY ÚSPĚŠ
- Page 150 and 151: Ctibor Pilch ETICKÝ KÓDEX FINANČ
- Page 152 and 153: Ctibor Pilch ETICKÝ KÓDEX FINANČ
- Page 154 and 155: Ctibor Pilch ETICKÝ KÓDEX FINANČ
- Page 156 and 157: MANAŽERSKÁ KONCEPCE BYROKRACIE MA
- Page 158 and 159: Monika Piskorzová MANAŽERSKÁ KON
- Page 160 and 161: Monika Piskorzová MANAŽERSKÁ KON
- Page 162 and 163: Monika Piskorzová MANAŽERSKÁ KON
- Page 164 and 165: Elżbieta Pohulak-Żołędowska CLU
- Page 166 and 167: Elżbieta Pohulak-Żołędowska CLU
- Page 168 and 169: Elżbieta Pohulak-Żołędowska CLU
- Page 170 and 171: JE REÁLNÁ KONVERGENCE AFRICKÝCH
- Page 172 and 173: Irena Pokorná JE REÁLNÁ KONVERGE
- Page 174 and 175: Irena Pokorná JE REÁLNÁ KONVERGE
- Page 176 and 177: Irena Pokorná JE REÁLNÁ KONVERGE
- Page 178 and 179: ŘÍZENÍ PROCESŮ REGIONÁLNÍHO R
- Page 180 and 181: Petr Ponikelský ŘÍZENÍ PROCESŮ
- Page 182 and 183: PUBLIC ORGANIZATIONS AND THEIR ROLE
- Page 184 and 185: Renata Przygodzka PUBLIC ORGANIZATI
- Page 186 and 187: Renata Przygodzka PUBLIC ORGANIZATI
- Page 188 and 189: Renata Przygodzka PUBLIC ORGANIZATI
- Page 190 and 191: Małgorzata Rutkowska, Joanna Szyma
Michal Petrůj INDIKÁTORY ÚSPĚŠNOSTI NEINVESTIČNÍCH VEŘEJNÝCH ROZVOJOVÝCH<br />
PROJEKTŮ<br />
u dané cílové skupiny podařilo v horizontu jednoho roku po ukončení projektu<br />
dosáhnout?“) a dále je distribuovat v rámci týmu realizujícího projekt a dalších<br />
zainteresovaných subjektů (administrátora pomoci, cílových skupin, partnerů projektů<br />
atd.). V návaznosti na výše uvedené je vhodné krátce se zastavit u obecného modelu<br />
sebe-evaluace na úrovni projektu, který je dle [3, 10–20] popsán následovně:<br />
1. Zpracování logické mapy projektu<br />
<strong>2.</strong> Formulace evaluačních otázek a stanovení měřitelných indikátorů (indikátorů<br />
úspěšnosti).<br />
3. Výběr metodologického přístupu<br />
4. Sběr dat a jejich analýza<br />
5. Odpověď na evaluační otázky<br />
6. Reporting, příp. disseminace zjištěných výsledků evaluace<br />
Vzhledem ke zkoumání problematiky indikátorů se blíže zaměřím na přiblížení prvního<br />
a druhého metodického kroku, tj. zpracování logické mapy projektu a formulace<br />
evaluačních otázek včetně stanovení měřitelných indikátorů. Zatímco logická mapa<br />
projektu je v tuzemsku relativně známým a reálně využívaným nástrojem (v tuzemsku<br />
se jedná o tzv. matici logického rámce) a je bezesporu nutným podkladem pro<br />
jakoukoliv projektovou evaluaci, pak právě krok č. 2 představuje fázi, v které jsou<br />
stanoveny mnou zkoumané indikátory úspěšnosti.<br />
U logické mapy projektu je pro jakoukoliv další práci s indikátory nezbytná tzv.<br />
vertikální logika, která je jasným znázorněním logické vazby mezi klíčovými aktivitami<br />
projektu (školení, kulturní akce, konference o cestovním ruchu apod.) a na ně<br />
navázanými výstupy, na základě nichž lze posoudit dosažení <strong>díl</strong>čích cílů projektu<br />
(střednědobé výsledky). Pro úplnost této vazby nezbývá než dodat, že o dosažení<br />
celkového (všeobecného) cíle projektu a očekávaných dlouhodobých dopadech lze<br />
hovořit na základě pozitivního hodnocení všech <strong>díl</strong>čích cílů projektu. Tuto logiku<br />
obsahuje i v tuzemsku používaná matice logického rámce, která těmto klíčovým<br />
prvkům celého projektu přiřazuje příslušné ukazatele stavu – monitorovací indikátory<br />
(počet podpořených akcí, počet účastníků, po<strong>díl</strong> měkké turistiky na cestovním ruchu<br />
v regionu apod.). Vzhledem k tomu, že na této úrovni je sledován (monitorován)<br />
především dosahovaný stav, lze tvrdit, že se jedná o sféru projektového monitoringu.<br />
Evaluační otázky lze zjednodušeně popsat jako otázky směřující na klíčové prvky<br />
projektu (aktivity, výstupy, výsledky a dopady), které mají být dosaženy. Konkrétní<br />
počet a rozsah otázek závisí toliko na rozhodnutí projektového <strong>managementu</strong>. Tyto<br />
otázky lze klást jak u aktivit („Jaké aktivity jsou klíčové pro dosažení cílů projektu?“),<br />
výstupů („Dosahujeme také neočekávaných výstupů?“) a dopadů („Budou dlouhodobé<br />
dopady projektu u cílové skupiny pozitivní?“), tak u posuzování hospodárnosti projektu<br />
(„Dosahujeme požadované výstupy s minimálními náklady?“), účelnosti projektu<br />
(„Byly dosaženy cíle projektu?“) atd. Určitou pomůckou při formulaci komplexní sady<br />
evaluačních otázek na projektové úrovni se stává pomocná klasifikace otázek, kterou ve<br />
své práci uvádí [5, 10], jehož dělení otázek na otázky vztažené k implementaci<br />
(procesní otázky), k výstupům a k dopadům je dobrým základem (hrubým dělením) pro<br />
doplnění dalších specifických subkategorií otázek v závislosti na typu projektu (otázky<br />
na splnění 3E, spokojenost cílové skupiny, kvality partnerství atd.). Právě na evaluační<br />
otázky by dle výše uvedeného modelu měly být navázány indikátory úspěšnosti.<br />
Vzhledem k tomu, že zde již jedna úroveň indikátorů existuje (monitorovací<br />
143