Evalueringsmetoder

1. Evalueringsmetoder

2. Program Kvantitative metoder Kvalitative metoder Blandede metoder Valg af metoder ved evaluering med programteori: Generelle betragtninger Egen case Jeres cases

3. Hvad er kvantitative metoder? Alt der kan tælles Spørgeskema Registerdata – fx udlånsdata Statistisk analyse Videnskabsteoretisk baggrund : Positivisme

4. Styrker ved kvantitative metoder Velegnet til: Håndtere store mængder data Finde forskelle og mønstre i data Sammenligninger Dokumentation

5. Begrænsninger ved kvantitative metoder Kræver ofte meget data Nemt at misbruge Man skal vide præcis hvad man vil undersøge Man kan overse vigtige ting

6. Statistik er som et miniskørt. Det giver gode ideer, men skjuler det vigtigste Side 6 22. september 2014

7. Hvad er kvalitative metoder? Alt der ikke tælles Interview Fokusgruppeinterview Observation Kvalitativ analyse (fokus på mening) Videnskabsteoretisk baggrund: anti-postivisme

8. Styrker ved kvalitative metoder Velegnet til: Dybdegående viden Områder, der ikke kan måles Udvikling i processen

9. Begrænsninger ved kvalitative metoder Ingen viden i bredden Ikke godt til dokumentation Ikke godt til sammenligninger

10. ..og så det blandede Åbne spørgsmål i et spørgeskema? Interview med lukkede spørgsmål? Observation med helt fast observationsguide? Triangulering

11. Hvordan bør man vælger man metode?(Ifølge Nete) Evalueringsspørgsmålet overvej begrebet ”tegn” Anvendelse Praktikaliteter

12. Hvad skal man undersøge i sin programteori? De vigtigste aktiviteter De vigtigste resultater Nødvendige for teorien Lavt overlap til andre teorier Strategiske valg

13. Case: Projekt tværfaglig sundhedsinnovation Side 13

14. Hvad var projektet/indsatsen? 5 grupper på det tværprofessionelle sundhedsfaglige modul 5 ..og deres undervisere Tilfældigt udvalgt Bundet opdrag Solution camp Løsning på reelt problem Fremlæggelse i praksis Side 14

15. Hvad var formålet? Udbredelse af innovativ tilgang i Metropol Mere innovative studerende Side 15

16. Hvordan opstille programteorien? Læse projektbeskrivelsen Samtale med projektleder Udkast på teorien til projektleder Færdig programteori Side 16

17. Programteori Underviserne lærer at tilrettelægge, gennemføre og evaluere studier med opgaveløsning/nytænkning via en innovativ didaktiks forståelse Kurser til undervisere Underviserne udbreder deres læring til kolleger og/eller øvrig praksis Viden om sundhedsinnovation bliver mere udbredt i Metropol Opdrag fra praksis Studerende bliver professionelle, som skaber bedre løsninger for borgerne Studerende lærer at tænke kreativt og nyskabende Uddannelse af studerende, som kan tænke innovativt og skabe kreative løsninger Solution camps for studerende, undervisere og værtssteder Muligvis reelle løsninger for praksis Side 17

18. Hvordan evaluere? Evaluering med de studerende Fokusgruppeinterview med undervisere Telefoninterview med værtssteder Fokusgruppeinterview med underviserne

19. Hvordan evaluere? En boks ad gangen – hvordan ved vi om det er sket? Grundlæggende kvalitativ metode Fokusgruppeinterview med klyngevejledere Instant survey med de studerende Telefoninterview med værtsstederne Databearbejning, som følger boksene Side 19

20. Resultater Meget var sket som forudsagt Enkelte steder er kæden dog ikke helt som forudsagt Vigtig positiv bieffekt fundet Anbefaling: behold indsatsen, men revider forventninger og/eller indsatsen enkelte steder Side 20

21. ”Reel” programteori Underviserne lærer at tilrettelægge, gennemføre og evaluere studier med opgaveløsning/nytænkning via en innovativ didaktiks forståelse Kurser til undervisere Underviserne udbreder deres læring til øvrig praksis Uddannelse af studerende, som kan tænke innovativt og skabe kreative løsninger Studerende bliver professionelle, som skaber bedre løsninger for borgerne Opdrag fra praksis Studerende lærer at tænke kreativt og nyskabende Solution camps for studerende og undervisere (Øget læring og studieglæde for de studerende) Studerende bliver rystet sammen med hinanden og underviserne Side 21 Muligvis reelle løsninger for praksis

22. Hvad med jeres programteorier?Fredensborg: opholdsrum Observation og registrering af tidsforbrug og måske anvendelse af tid. Spørgeskema om tidsforbrug, anvendelse af tid, lyst til at komme på biblioteket og tilhørsforhold. Fokusgruppeinterview om betydningen af det nye opholdrum

23. Allerød: it-netværk og kurser Spørge ansatte: Forstår du hvad netværket går ud på? Vidste du at xx er meningen med it-netværket? Hvad er efter din mening pointen med netværket (åbent)? Synes du netværket er en god ide? Har du talt med nogle om netværket (kolleger, borgere, samarbejdspartnere)? Spørge deltagere Kender du x, x og x? Har du fået kendskab til noget nyt? Vil du bruge det i fremtiden? (eksempler) Er det sjovt at arbejde med?

24. Rudersdal: lytteklub Den faciliterende medarbejder observerer og registrerer: hvor mange deltagere prøver det, hvor selvstændige er de, virker de trygge og glade mv Spørge den konkrete deltager: hvordan var oplevelsen? Hvad fik du ud af det? Spørge de andre deltagere: hvordan var det, fik du selv lyst, fik du mere lyst til at komme andre gange?

25. Litteratur Andersen, Lotte, Kasper Møller Hansen og Robert Klemmensen (red): Metoder i statskundskab, Hans Reitzels Forlag, 2010 Om observation: Kristiansen, S. og H.K. Krogstrup (1999): Deltagende observation - Introduktion til en forskningsmetodik. København. Hans Reitzels Forlag. Om evaluering med programteori: Dahler-Larsen Peter & Krogstrup, Hanne Kathrine Nye veje i evaluering,Systime, 2003 Om tegn: Andersen, Frode Boye (2008), Tegn er noget vi bestemmer, VIA forlag Tegn på læring (2007) http://www.eva.dk/projekter/2007/tegn-paa-laering

26. Side 26