effektmåling hvad og hvordan
TRANSCRIPT
EFFEKTMÅLING: HVAD
OG HVORDAN?
Mette Deding
21-05-2015 2
VI HAR BRUG FOR VIDEN OM EFFEKTER
Fordi vi gerne vil vide, om de indsatser vi sætter i værk, rent faktisk virker Og fordi vi gerne vil sikre os, at indsatserne ikke har en skadelig virkning.
EFFEKTMÅLING: HVAD OG HVORDAN
EVIDENS HANDLER OM EFFEKT:
Effektmåling besvarer spørgsmål om kausalitet:
Hvordan går det (i gennemsnit)
personer, der modtager en specifik indsats, i forhold til hvordan det ville være gået, hvis de ikke havde modtaget indsatsen?
21-05-2015 EFFEKTMÅLING: HVAD OG HVORDAN 3
MEN EVIDENS HANDLER OGSÅ OM MEGET ANDET END EFFEKT • Viden om sociale problemers
karakter og udbredelse • Viden om målgruppens
karakteristika og adfærdsmønstre • Viden om hvilke indsatser der
anvendes • Viden om ressourceforbrug ved
hidtidig indsats • Viden om effekter af forskellige
former for indsatser • …
21-05-2015 EFFEKTMÅLING: HVAD OG HVORDAN 4
TILFREDSHEDSUNDERSØGELSER OG EFTERMÅLINGER
90% af dem, der modtog behandlingen var tilfredse eller meget tilfredse…
…men det siger ikke noget om effekten 75% af dem, der trænede havde et kondital på 40… … men hvad var deres kondital før træningsprogrammet? Kan ikke bruges til effektmålinger
21-05-2015 EFFEKTMÅLING: HVAD OG HVORDAN 5
FØR-EFTERMÅLINGER
Man måler inden man starter indsatsen (førmåling) og når indsatsen er udført (eftermåling) for hele målgruppen. Nok det mest anvendte undersøgelsesdesign – og noget som vi alle bruger.
21-05-2015 EFFEKTMÅLING: HVAD OG HVORDAN 6
FØR-EFTERMÅLING AF LÆSE INTERVENTION
80
85
90
95
100
105
Før Efter
IndsatsKontrol
Statistisk signifikant forskel p < 0.001
21-05-2015 EFFEKTMÅLING: HVAD OG HVORDAN 7
FØR-EFTERMÅLING AF LÆSE INTERVENTION
80
85
90
95
100
105
110
Før Efter
IndsatsKontrol
Forskel mellem grupper er IKKE signifikant
21-05-2015 EFFEKTMÅLING: HVAD OG HVORDAN 8
KAUSAL EFFEKT
FORMÅL MED EFFEKTMÅLING: At finde den kausale effekt af indsats på udfaldsmål
21-05-2015 EFFEKTMÅLING: HVAD OG HVORDAN 9
EFFEKTMÅLING: HVAD OG HVORDAN 10
21-05-2015
KAUSAL EFFEKT – HVAD KAN GÅ GALT?
Enkelt at undersøge, om der er en sammenhæng eller korrelation mellem indsats og udfaldsmål En sådan sammenhæng kan imidlertid ikke nødvendigvis fortolkes som en kausal effekt – at det er netop A der giver B Eksempler: Antal storke og børnefødsler Alkoholindtagelse og lungecancer
21-05-2015 EFFEKTMÅLING: HVAD OG HVORDAN 11
EFFEKT STIGEN
EFFEKTMÅLING: HVAD OG HVORDAN 12
21-05-2015
HVEM KAN MÅLE EFFEKT?
Effektmåling handler om: • Systematik • Tankegang • Opfølgning • Analyse Der er både brug for ‘hverdags’-effekt og ‘forsker’-effekt (og
alting ind imellem)
21-05-2015 EFFEKTMÅLING: HVAD OG HVORDAN 13
PROGRESSION VS. EFFEKT
Måske en strid om ord… Men fokus både på de kortsigtede delmål for at opnå de mere
langsigtede effekter Eksempel: Effekt på uddannelse for udsatte unge kræver fx at de lærer at
stå op om morgenen
21-05-2015 EFFEKTMÅLING: HVAD OG HVORDAN 14
SPØRGSMÅL OG
KOMMENTARER?!
EFFEKTMÅLING: HVAD OG HVORDAN 15
21-05-2015