1 / 25

Utvärderingens delar

Utvärderingens delar. - Exempel från Folkhälsoenhetens utvärderingar. Disposition. Utvärderingsobjekt Syfte och användning Design och datainsamling Bedömning och värdering Analys och slutsatser. Utvärderingsobjektet. Programlogik och struktur Förförståelse och antaganden Programteori

caelan
Download Presentation

Utvärderingens delar

An Image/Link below is provided (as is) to download presentation Download Policy: Content on the Website is provided to you AS IS for your information and personal use and may not be sold / licensed / shared on other websites without getting consent from its author. Content is provided to you AS IS for your information and personal use only. Download presentation by click this link. While downloading, if for some reason you are not able to download a presentation, the publisher may have deleted the file from their server. During download, if you can't get a presentation, the file might be deleted by the publisher.

E N D

Presentation Transcript

  1. Utvärderingens delar - Exempel från Folkhälsoenhetens utvärderingar

  2. Disposition • Utvärderingsobjekt • Syfte och användning • Design och datainsamling • Bedömning och värdering • Analys och slutsatser

  3. Utvärderingsobjektet

  4. Programlogik och struktur • Förförståelse och antaganden • Programteori • Två utvärderingar: • Slututvärdering av Folkhälsokommitténs satsning på projekt för utsatta grupper i Västra Götaland 1999-2001 • Nationell utvärdering av FaR

  5. Konkretisera utvärderingsobjektet • Vad är det som ska utvärderas? • Exempel: - utvärdering av satsningen på projekt riktade till utsatta grupper. 1: satsningen som helhet 2: de enskilda projekten 3: satsningen som helhet samt de enskilda projekten

  6. Hur ser logiken i utvärderingsobjektet ut? • Tänkbara effekter och mål? • Hur uppnås dessa? • Verktyg: programteori • Eventuella avgränsningar • Utvärderingsobjektet avgörande för hur syftet formuleras – Bestämmer således hela utvärderingens upplägg

  7. Ex. från FaR-utvärdering: Min rekonstruktion:

  8. Syfte och användning

  9. Syfte • Utvecklaverksamheten • Kontrolleraverksamheten • Genyakunskaperomverksamheten • Legitimeraverksamheten • Manipuleraverksamheten

  10. Användning • Instrumentell användning - Rekommendationer från utvärderingen omsätts i verkligheten. • Konceptuell användning - Utvärderingen påverkar inställning/ attityd. Inga konkreta förändringar. • Legitimerande användning - Utvärderingen används för att legitimera legitimera ett projekt eller aktivitet för en redan intagen ställning. • Strategisk användning - Utvärderingen används för att vinna tid eller undvika ansvarsutkrävande. En utvärdering är tillsatt vilket tyder på att något görs. • Processanvändning - Utvärderingsprocessen leder till förändring.

  11. Design och datainsamling • Konsten att välja rätt verktyg

  12. Vad är metod? • Kvalitativ • Fördjupning, ej det generella • Intervjuer, fokusgrupper, mindre urval • Kvantitativ • Generella resultat, frekvens • Enkäter, stort urval

  13. Urval • Vad frågar man efter? • Hur många tycker…? • Representativitet • Hur många elever har uppmärksammat kampanjen om klamydiatester? • Vad tycker elever om kampanjen?

  14. Varför är metod viktigt? • Ge värde till resultaten • Tillförlitliga resultat • Tillförlitligt underlag för beslut • Ge styrka till föreslagna förbättringar • Stöd till utvärderaren • Underlag för diskussion & förståelse av utvärderingen

  15. Bedömning och värdering

  16. Vad är värdering och varför är det viktigt? • Exempel • Konkretisera visionära mål • Verksamheter är i sig själva aldrig värderingsfria

  17. Fundera mera! • Målgruppskonstruktion • Diskussion • Konstruktion av värderingar

  18. Avslutning • Positivt med våra utvärderingar

  19. Analys och slutsatser

  20. Vad ska analysen och slutsatserna innehålla? • "Knytaihoppåsen", gesvarpåfrågeställningarnaiutvärderingen • Återkoppla till generellamål med utvärdering • Varprogrammet en framgångenligtkriteriernasomdetutvärderas mot? • Vilkaförändringarharobserveratssomettresultatavprogrammet? • Vadkundegjortsbättre? • Vadkan man tänkapåiframtiden?

  21. Trovärdighet och generaliserbarhet • Representativturval • Exempel: Familjeverkstan: Liteturval, blandningmellankvantitativaochkvalitativametoder, modifieratgenom-förande • Kan man baseratpådennautvärderinggeneraliseraochsägaatt “Familjeverkstan” sommodellärlyckad? • Slutsatsermåstevarabaseradepåanalysenochempirinochvararimligaiförhållande till denna • Transparens: Hurhar man kommitfram till slutsatserna? • Objektivitet • Intealltidmöjligt/eftersträvansvärtattkunnageneralisera

  22. Vanliga programbrister som påverkar möjligheterna till goda slutsatser • Genomförandefel: Feligenomförandetavprogrammet • Teorifel: En policy harintemöjligheterattpåverkaproblemet • Har en policy/idéförutsättningarattlösadetbakomliggandeproblemet?

  23. Att tänka på: • Godaslutsatserfrån en utvärderinggerrådomfaktorersomgårattpåverkaföranvändarna • Skahelstgesvarpåevidensfrågan • Slutsatsernaskapresenteraspåettsättsommaximeraranvändningenavutvärderingen • Slutligenhandlarvärdetiutvärderingomdessnytta, i form avlärandeochanvändbarhet

  24. Tack för att ni har lyssnat! Julia Andrén My Ekrelius Alexander Westerberg Johanna Almgren Daniel Hallberg Mattias Fyhr Karin Rhodin Marta Rivelis Linnea Löfström Engdahl Maria Bergman Linn Sandberg

More Related