Sesiunea 4 (I): Pla nificarea evaluării

1. Sesiunea 4 (I):Planificarea evaluării

2. Planificarea procesului de evaluare Cine solicită evaluarea? Cît timp avem? Întrebările? Care sunt capacitățile? Scopul? Avem oare suficienți bani? Care este structura evaluării? Pe cine să implicăm în proces? Sau totuși cantitative? Instrumente calitative?

3. Cum începem? Clienţii şi factorii interesaţi stabilesc întrebarea utilizată pentru evaluare Întrebarea pentru evaluare ne dă un indiciu asupra modului în care să alcătuim o echipă de evaluare Echipa de evaluare împreună cu factorii interesaţi analizează situaţia actuală şi alege cea mai bună abordare pentru evaluare Teoria ne oferă nenumărate modalităţi, dar în realitate, nu putem obţine întotdeauna cel mai bun plan din punct de vedere metodologic

4. Abordările în procesul de evaluare Metodologia Orientarea • Descriptivă • Cauzală • Formativă • Sumativă

5. Evaluarea descriptivă Analizează diferita caracteristici ale grupului țintă Relevă dacă programul se desfășoară conform planului Generează feedback despre serviciile care sunt oferite Determină dacă programul generează tipurile de rezultate așteptate și impactul scontat

6. Evaluările cauzale • Analizează gradul de implementare a programului sau politicii: • Au fost rezultatele și impactul scontat realizate? De ce? • Analizează impactul politicii și cauzele: • A avut programul un rol important în realizarea rezultatelor și a impactului scontat?

7. Evaluările formative vs. Evaluările sumative • Formative – evaluează procesul • Analiza nevoilor, analiza procesului • Sumative – examinează efectele şi sintetizează consecinţele • Evaluarea rezultatelor programelor educaţionale

8. Cînd bucătarul gustă supa, evaluarea este formativă; Cînd invitaţii gustă supa, aceasta este sumativă. Robert Stakes

9. Evaluarea formativă • Evaluarea formativă caută să fortifice sau să îmbunătățească o politică sau un program prin examinarea: • Desfășurarea (implementarea) programului, • Calitatea implementării acestuia • Contextul organizațional, personalul, structura și procedurile.

10. Întrebări şi metode pentru evaluările formative • Care este definiţia şi obiectul problemei? • Brainstorming, focus grupuri, metoda Delphi (grup de experți), analiza factorilor interesaţi • Unde este problema şi cât de serioasă este? • Analiza nevoilor: analiza datelor existente, interviuri ale grupului ţintă şi ale focus grupurilor

11. Evaluările sumative • Evaluarea sumativă analizează valoarea politicii sau a progrmaului la sfîrșitul perioadei de implementare lor prin examinarea: • Impactul politicii sau a programului • Relația cauză - efect • Schimbările survenite de-a lungul timpului

12. Întrebări şi metode pentru evaluările sumative • Cât de eficient a fost programul? • Observare, modele experimentale şi cvasi-experimentale • Care este impactul net al programului? • Analiza eficienţei costurilor şi analiza cost-beneficiu, studii de caz

13. Principalele abordări în cadrul evaluării cauzale Modelul experimental Cvasi-experimental Non-experiment

14. Modelul experimental “Standard de aur” Grupuri de program şi de control selectate în mod aleatoriu Validitate internă puternică Controversat din punct de vedere etic Scump Dificil de implementat în evaluarea de politici

15. Modelele cvasi-experimentale Lipsa caracterului aleatoriu Utilizarea grupurilor de comparaţie formate în mod natural Deşi nu asigură o validitate internă foarte puternică, sunt uşor de implementat.