Az Új Magyarország Vidékfejlesztési Program (2007-2013) folyamatos és félidei értékelése

1. Az Új Magyarország Vidékfejlesztési Program (2007-2013) folyamatos és félidei értékelése Tájékoztató a 2009. évi értékelési tevékenységről a Monitoring Bizottság részére Dr. HabudaJudit 2010. június 28.

2. Tartalom • Jogszabályban rögzített kötelezettségek • A 2009. évi értékelési munka • A félidei értékelés a folyamatos értékelés rendszerében • Szakmai elvárások, bizottsági útmutatás, minőségbiztosítás

3. Jogszabályban rögzített kötelezettségek

4. A 1698/2005/EK rendelet II. fejezet 86. cikk: „(1) A tagállamok valamennyi vidékfejlesztési programhoz létrehoznak egy folyamatos értékelési rendszert. (2) A program irányító hatósága és a Monitoring Bizottság a folyamatos értékeléssel: a) megvizsgálja a programnak a célokhoz viszonyított előrehaladását eredmény- és — adott esetben — a hatásmutatók révén;

5. Félidei és utólagos értékelés b) javítja a programok és végrehajtásuk minőségét; c) megvizsgálja a programok lényeges változtatásaira vonatkozó javaslatokat; d) felkészül a félidei és az utólagos értékelésre.”

6. Értékelési jelentés A rendelet 86. cikkének (3), (4) és (5) bekezdése szerint a programért felelős hatóságok 2008-tól elkészítik a folyamatos értékelési tevékenységükről szóló jelentést. A rendelet 82. cikke (2) bekezdésének megfelelően a jelentés összegzését csatolni kell az éves időközi jelentéshez.

7. A 2009. évi értékelési munka

8. Félidei értékelés előkészítése • A félidei értékelés (MTE) előfeltételeinek biztosítása (indikátorok köre, adatbázisok azonosítása, adatok biztosítása, értékelhetőség) • Feladat meghatározása (ToR) • Félidei értékelés közbeszereztetése • Képzések

9. MTE - Feladatmeghatározás • MÉRT Egyesület etikai normáinak és szakmai standardjainak megismerése és alkalmazása • Az összeférhetetlenség szabályozása • Konkrét hatásvizsgálati módszertanok bekérése és előírása (kontrolcsoportok) • Vezető szakértők minősítése

10. Kapacitásépítés • Képzések – Pénzügyi és Monitoring Osztály (PMO), tengelyenkénti (értékelés) felelősök • Módszertani műhelyrendezvények (NFÜ Fejlesztéspolitikai Akadémia) – PMO, MVH munkatársak • Európai Értékelési Hálózat, tagállami jó gyakorlat – PMO és külső szakértők

11. Indikátorok • Bázis- és célértékek, adatforrások teljes felülvizsgálata befejeződött • Folyamatos adatbekérés a támogatottaktól (output és eredmény indikátorok), adatbekérés definiálása • Monitoring és folyamatos értékelés szoros összefonódása

12. Felmerült problémák, további munka • Félidei értékelés feszes ütemezésben • Értékelési terv végrehajtása • Folyamatos (tematikus) értékelések • Belső kapacitások, munkatársak képzése • Együttműködés MVH-val, adatok biztosítása, átadása • Nyilvánosság, hasznosulás

13. A félidei értékelés a folyamatos értékelés rendszerében

14. Értékelés – félidei értékelés Az értékelés stratégiai folyamat, amely a program megvalósítását, eredményeit és hatásait vizsgálja. Az ÚMVP félidei értékelése az EMVA források eddigi hasznosítását tekinti át, különös tekintettel annak hatékonyságára és a program céljainak, a közösségi prioritásoknak a teljesülésére. Hangsúlyt kapnak ezen felül a végrehajtás kérdései és a végrehajtás sikereit, kudarcait befolyásoló tényezők.

15. Félidei értékelés – folyamatos értékelés A félidei értékelés a folyamatos értékelés szerves része. „Ongoingevaluationactivitiesareexpectedtoprovide a solidgroundforahighquality MTE; in turn, theoutcomes of the MTE willfeedintotheactivitiesto be carried out uptothepreparation of the ex post evaluation”. Guidancenote B, "Evaluationguidelines", in Annex 1 of the

16. Handbook on the CMEF: http://ec.europa.eu/agriculture/rurdev/eval/guidance/note_a_en.pdf

17. Értékelési rendszerek • Nem ad hoc, hanem – szisztematikusan -tervezett értékelések • Elemek: (1) értékelési szükségletek módszeres feltárása (2) értékelések rendszerezett végrehajtása és (3) eredményeinek előre meghatározott módon történő felhasználása

18. ÚMVP értékelési rendszere 2008-ban sikerült lerakni a rendszer alapköveit: • Igényfelmérés • Többéves értékelési terv • Kapacitásépítés • Együttműködés (NFÜ, Magyar Értékelők Szövetsége) • Egységes - minőségi - elvárások

19. Szakmai elvárások, bizottsági útmutatás, minőségbiztosítás

20. Értékelési alapelvek • Külső, pártatlan és független értékelők • Nyilvánosság • Partnerség • Magas szakmai színvonal • Új módszertani elvárások (ld.Melléklet) • Eredmények hasznosulása

21. Az eredmények hasznosulása • Az értékelés eredményei megalapozhatják a program minőségének, hatékonyságának és végrehajtásának javítását célzó lépéseket, és a szakpolitikai következtetéseket. • A félidei értékelés a futó program adaptációját és a készülő jövőbeli programok előkészítését is szolgálja. • Nyilvánosság és hasznosulás összefüggései

22. Az értékelések nyilvánossága Az értékelések nyilvánossá tételével a támogatáspolitika felelőse (ÚMVP IH) a szakmai és szélesebb közvélemény felé is „elszámol” a közpénzek elköltéséről, annak indokoltságáról, hatékonyságáról, eredményeiről, hasznosságáról. Egyben biztosít minőségi kontrollt is.

23. Minőségi elvárások a hazai értékelési gyakorlatban • Vezető értékelők minősítése • Részletes feladatmeghatározás, magas módszertani elvárások • Pártatlanság, függetlenség • Nyilvánosság és minőség kapcsolata • Minőségbiztosítás

24. Bizottsági útmutatás Útmutatók megtalálhatóak a http://ec.europa.eu/agriculture/rurdev/eval/index_en.htm (European Commission > >Agriculture and Rural Development > >Rural Development policy 2007-2013 > > Monitoring and evaluation) oldalon

25. Vonatkozó útmutatók I. • Vidékfejlesztés 2007–2013, KÉZIKÖNYV • A KÖZÖS FELÜGYELETI ÉS ÉRTÉKELÉSI KERETSZABÁLYOZÁSRÓL, Útmutató dokumentum • A. útmutató magyarázat – A mutatók kiválasztása és használata • B. útmutató magyarázat – Értékelési iránymutatás

26. Vonatkozó útmutatók II. • Annex 2 – Programming and measure guidance • D – Hierarchy of Objectives [pdf] • E – Measure Fiches [pdf] • Annex 3 – Indicator guidance • F – Common indicator list [pdf] • G – Baseline indicators fiches [pdf] • H – Output Indicator Fiches [pdf]

27. Vonatkozó útmutatók III. • I – Result Indicator Fiches [pdf] • J – Impact Indicator Fiches [pdf] • K – Examples of additional indicators [pdf] • Annex 4 – Other guidanceL – Frequently Asked Questions [pdf] • M – The Rural Development Evaluation network [pdf]

28. Vonatkozó útmutatók IV. • N - Glossary of Terms [pdf] • O – Useful Reading [pdf] • Additional guidance • Working Paper on "Approaches for assessing the impacts of the RDPs in the context of multiple intervening factors" Text - [pdf], Interactive version - [pdf]

29. Vonatkozó útmutatók V. (03/2010) • Guidelines on the Mid-Term Evaluation of the Rural Development Programmes [pdf] (07/2009) • Guidance Document on the Application of the High Nature Value Impact Indicator: Text [pdf] - Annexes [pdf] (11/2008)

30. Melléklet Új elvárások a 2020-as programidőszak értékeléseivel kapcsolatban, bizottsági munkaanyag (kohéziós politika)

31. Új elvárások „DGs and Member States up to now use mostly qualitative methods in addition to presentation and analysis of administrative data (financial and physical). More rigorous quantitative (counterfactual) methods are being tested in the 2007-2013 period.

32. Folyt. Atpresentprogrammes are often driven by an almost exclusive focus on expenditure, financial management and audit. The objective is to make best use of limited resources by being accountable and having a focus on policy learning and continuous improvement. One particular area for development is the organisation of data collection for

33. Folyt. quantitative evaluation methods based on counterfactual methods. Such methods need to be designed at the very beginning of a programme. Member States will need to accept the obligation to create such data and set the necessary means aside.” Forrás: Cohesion Policy post 2013 - monitoring and evaluation