Evaluacija u projektima istra živanja prevencije . Primjer

1. Evaluacija u projektima istraživanja prevencije. Primjer Krzysztof Ostaszewski Institut za psihijatriju i neurologiju u Varšavi, Poljska

2. Evaluacija. Zašto? • Evaluacija može biti vrlo koristan i važan alat za razvoj učinkovite strategije i programa prevencije te njihovog širenja u škole ili zajednice • Važnost evaluacije u projektiva istraživanja prevencije Institute of Psychiatry and Neurology, Warsaw

3. Što radimo? • Provodimo pred interventno istraživanje • Razvijamo programe prevencije za djecu i mlade • Ocjenjujemo njihovu učinkovitost • Podučavamo učitelje kako da ih upotrebljavaju • Dijelimo materijale za podučavanje • Nadziremo rutinsku provedbu Oko 3- 5 godina Institute of Psychiatry and Neurology, Warsaw

4. Definicija evaluacije programa “Sistematsko prikupljanje, analiza i tumačenje podataka s ciljem određivanja vrijednosti društvene politike ili programa (…)” - Moberg 1984 Upotreba dobivenih podataka: Za ocjenjivanje učinkovitosti programa i za pružanje informacija zašto bi ovaj program mogao ili ne funkcionirati Sumativna ili zaključna evaluacija Pri procesu donošenja odluka o politici ili programu npr. za planiranje, poboljšanje, razvoj itd. Formativna evaluacija Institute of Psychiatry and Neurology, Warsaw

5. Naš primjer • Prilagodba američkog programa prevencije različitih kultura poljskim školama Institute of Psychiatry and Neurology, Warsaw

6. The Slick Tracy Home Team Program je bio odabran za prilagodbu Program je razvijen na Sveučilištu Minnesota kao dio projekta Northland (Williams et al.1995) Institute of Psychiatry and Neurology, Warsaw

7. Slick Tracy Program Ima kao cilj sprječavanje maloljetničke konzumacije alkohola Sastoji se od sastanka vođenog od strane učitelja u kombinaciji s aktivnostima unutar vlastitog doma koje pomažu: • olakšati komunikaciju roditelj-dijete o alkoholu, • uspostaviti obiteljska pravila o konzumiranju alkohola, • pružiti informacije primjerene za tu dob o reklamiranju alkohola, pritisku vršnjaka, posljedicama konzumacije alkohola Institute of Psychiatry and Neurology, Warsaw

8. Brošure o aktivnostima Postoje četiri brošure za rad kod kuće tokom svakog tjedna Institute of Psychiatry and Neurology, Warsaw

9. Aktivnosti roditelj-dijete Brošure su dizajnirane kako bi olakšale komunikaciju roditelj-dijete i kako bi uspostavile obiteljska pravila za bavljenje maloljetničkom konzumacijom alkohola Institute of Psychiatry and Neurology, Warsaw

10. Tri faze projekta • Pilot studija fokusirana na prilagodbu među različitim kulturama • Evaluacija rezultata poljske verzije programa • Širenje i nadzor rutinskog uvođenja provedbe u škole Institute of Psychiatry and Neurology, Warsaw

11. Faza I.Prilagodba programa • Program je bio testiran u dvije škole u Varšavi od strane učitelja uvježbanih za ocjenjivanje izvedivosti programa • Evaluacija se sastojala od: • promatranja, • Analize programske dokumentacije, • Intervjua između fokus grupe i učitelja, • Telefonskog intervjua s roditeljima, • Upitnika za studente. Institute of Psychiatry and Neurology, Warsaw

12. Rezultati: suradnja učitelj-roditelj • U Poljskoj je podjela odgovornosti između učitelja i roditelja bilo jedno vrlo novo iskustvo pri predstavljanju programa prevencije • Kao rezultat je došlo do nekoliko promjena za poboljšanje suradnje učitelj-roditelj Institute of Psychiatry and Neurology, Warsaw

13. Rezultati evaluacije: Učitelji su ispitivali da li roditelji vrše aktivnosti s brošurama i da li ih čitaju Učitelji su željeli imati mnogo veću kontrolu nad onime što studenti uče Promjene: Novi sadržaj je bio dodan učiteljskom priručniku kao bi se objasnila uloga roditelja i učitelja unutar programa Podučavanje učitelja je bilo prerađeno kao bi se naglasio roditeljski angažman Predložilo se odobrenje roditelja Promjene za poboljšanje suradnje učitelj-roditelj Institute of Psychiatry and Neurology, Warsaw

14. Rezultati: slabo sudjelovanje djece izložene riziku • Evaluacija je utvrdila da oko 7% studenata nije sudjelovalo u domaćim aktivnostima • Svi ti studenti su pokazali niske akademske uspjehe • Po riječima učitelja slabo sudjelovanje tih studenata bilo je povezano s problemima konzumacije alkohola unutar njihovih obitelji Institute of Psychiatry and Neurology, Warsaw

15. Promjene za poboljšanje sudjelovanja djece izložene riziku • Evaluacija je pomogla utvrđivanju da će neka djeca izložena riziku trebati posebnu pažnju • Poduka učitelja je bila prilagođena kako bi naglasila potrebe djece izložene riziku • Djeca čiji roditelji ne sudjeluju u programskim aktivnostima dobivaju individualnu pomoć od strane učitelja te, po potrebi od “zamjenskog roditelja” Institute of Psychiatry and Neurology, Warsaw

16. Faza II. Evaluacija rezultata • Evaluacija je bila usmjerena na trenutačne rezultate • Škole su odabrane nasumice a prihvatile su zadatak da budu ili intervencijska ili kontrolna grupa • Kvaliteta iznošenja programa je također bila kontrolirana Institute of Psychiatry and Neurology, Warsaw

17. Rezultati evaluacije ishoda Institute of Psychiatry and Neurology, Warsaw

18. Pozitivni rezultati Dozvoljeni : • Preporučiti program • Privući škole i lokalne ustanove • Započeti sa širenjem programa Institute of Psychiatry and Neurology, Warsaw

19. Rezultati procesa evaluacije • Od 10 uključenih razreda, studenti iz 3 razreda su imali mnogo niži omjer sudjelovanja i zadovoljstva • Što je utjecalo na kvalitetu izlaganja? • Slaba suradnja • Nedovoljna prihvaćenost od strane roditelja • Neki nedostaci pri izvedbi programa Institute of Psychiatry and Neurology, Warsaw

20. Razlike u izlaganju programa(Ostaszewski et al. 2000, Okulicz-Kozaryn et al. 2000) Institute of Psychiatry and Neurology, Warsaw

21. Faza III. Širenje • Rezultati evaluacije dozvolili su stvaranje minimalnih standarda za rutinsku provedbu programa Institute of Psychiatry and Neurology, Warsaw

22. U skladu s rezultatima proučavanja Najmanje 80% - svih kućanskih aktivnosti 50% - večeri roditelja i obitelji 60% - učenici su zadovoljili “pragove” Minimalni stupanj provedbe potreban za postizanje željenih rezultata Institute of Psychiatry and Neurology, Warsaw

23. Zaključak • Evaluacija je bila doista bitna: • Kako bi se razvio i prilagodio program sukladan određenoj kulturi • Kako bi se dokazala njegova učinkovitost i zadobio interes • Kako bi se ustanovio kriterij za rutinsku provedbu i nadzor Institute of Psychiatry and Neurology, Warsaw

24. Literatura • Ostaszewski K, Bobrowski K, Borucka A., Okulicz-Kozaryn K., Pisarska A. Evaluating innovative drug-prevention programmes: Lessons learned (in:) EMCDDA Scientific Monograph Series No 5. Evaluation: a key tool for improving drug prevention.Luxembourg: Office for Official Publications of the European Communities, 2000, 75-85. • Williams C., Perry C., Dudovitz B., Veblen-Mortenson S., Anstine P., Komro K.A., Toomey T.L. (1995a): A Home-Based Prevention Program for Sixth-Grade Alcohol Use: Results from Project Northland. The Journal of Primary Prevention, Vol,16 No.2;125-147. Institute of Psychiatry and Neurology, Warsaw