26
Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd RANDOMISEREDE FORSØG: HVORFOR & HVORDAN?

Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

  • Upload
    others

  • View
    3

  • Download
    0

Embed Size (px)

Citation preview

Page 1: Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

Helle HansenVIVE – Det Nationale Forsknings- og Analysecenter for Velfærd

RANDOMISEREDE FORSØG:

HVORFOR & HVORDAN?

Page 2: Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

2

Page 3: Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

HVORFOR RCT?

• Det bedste design til effektmåling• Pga. den tilfældige tildeling af indsats• Sikrer at grupperne er ens på både målbare og ikke-

målbare faktorer• Kan håndtere kompleksitet• Kræver færrest deltagere

Hvis indsatsgruppe klarer sig bedre/dårligere end kontrolgruppen så kan vi konkludere at det er på grund af indsatsen

3

Page 4: Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

• 1061: Ben Cao Tu Jing – Ginseng eller ej i forhold til at løbe• 1753: Sir James Lind, læge i den engelske flåde – Skørbug

− Citron og appelsin overfor æblevin, fortyndet svovlsyre, havvand, eddike og urteblanding

• 1900erne uddannelsesområdet i USA • 1920erne R. A. Fischer inden for landbruget• 1930erne socialområdet i USA – Cambridge Sommerville• 1944 England - Patulin mod hoste

• 1990erne især sundhedsområdet – Cochrane Collaboration

• 2005- Campbell Collaboration: uddannelse, kriminologi, socialområdet

4

RCT HISTORISK SET

Page 5: Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

5

A B

Indsats

Randomisering

Måle udfald

RCT DESIGN

Page 6: Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

6

• Penge ved besvarelser af spørgeskemaer • Billede på bøder• SMS notifikation inden aftaler• Videoinformation ved rekruttering• Formuleringer i informationsbreve− Skatteindrivelse i England

EKSEMPLER PÅ MULIGE RCT-STUDIER

Page 7: Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

DESIGN AF RANDOMISEREDE KONTROLLEREDE FORSØG

Fire elementer:1. Målgruppe2. Randomisering3. Indsats/kontrol4. Måling/analyse

7

Page 8: Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

8

A B

Indsats

Randomisering

Måle udfald

Page 9: Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

DESIGN AF RCT: MÅLGRUPPE

Individ: • Enkelt personer randomiseres til intervention eller kontrol

Gruppe/Cluster randomisering:• Når den naturlige enhed at randomisere på er gruppen (fx

skole, klasse, praktiserende læge, hjemmeplejeenhed, kommune)

9

Page 10: Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

REKRUTTERING

• Så mange med som muligt! Overvej tiltag der kan tilskynde deltagelse

• Hvis målgruppen er lille, kan det blive svært at rekruttere nok deltagere

• Få realistisk billede af, hvor mange der kan rekrutteres inden for det tidsrum man har valgt

10

Page 11: Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

MÅLGRUPPEN

• Deltagergruppen har betydning i forhold til generaliserbarheden af studiet. Om resultaterne kan overføres til andre grupper.

• Du kan reelt kun sige noget sikkert om effekten på den gruppe man har undersøgt.

• Men man kan så måske formode at dette også vil gælde for andre grupper.

11

Page 12: Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

12

A B

Indsats

Randomisering

Måle udfald

Page 13: Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

INDSATS/INTERVENTION

Indsatsen skal være:• Afgrænset • Velbeskrevet • Gerne teoretisk funderet

Så vi ved, hvad vi måler på!

13

Page 14: Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

KONTROLGRUPPE

Hvad får kontrolgruppen?

• Anden form for specifik behandling• Anden almindelig behandling – Usual Care• Venteliste til samme behandling

Der kan være for lille en forskel mellem behandlingen i indsatsgruppen og kontrolgruppen til at man kan finde en forskel. Det betyder ikke nødvendigvis at der ikke er en effekt, vi kan bare ikke se den.

14

Page 15: Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

ANTAL DELTAGERE

Hvor mange personer vi skal have med i forsøget hænger sammen med den effektstørrelse vi forventer at finde:

• Jo større effektstørrelse jo større styrke/power.

• Jo større effektstørrelse jo færre personer behøver vi for at kunne vise en forskel

• Jo mindre effektstørrelse jo flere personer skal vi bruge

15

Page 16: Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

FRAFALD

Der er næsten altid nogen, der falder fra undervejs Rekrutter lidt flere end der er brug for

Er dem der falder fra anderledes? Risiko for forskellige grupper, der ikke kan sammenlignes.

16

Page 17: Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

17

A B

Indsats

Randomisering

Måle udfald

Page 18: Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

DESIGN AF RCT: RANDOMISERING

• Almindelig lodtrækning: Der er en gruppe, der passer til indsatsen og alle kan randomiseres med det samme.

• Venteliste: Der er en venteliste til et tilbud/kursus, hvor man kan randomisere hvem der modtager tilbuddet/kurset nu og hvem, der skal vente til næste runde.

• Løbende rekruttering/randomisering: Rekrutteringen sker løbende og derfor sker randomiseringen ligeledes løbende efter en på forhånd fastlagt procedure.

18

Page 19: Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

RANDOMISERING

Randomisering skal være uforudsigelig og uafhængig af dem, der er indblandet i forsøget.

Det har vist sig at der snydes med det, når det er muligt• Åbne konvolutterne • Røntgenfotografere konvolutter• Bytte om på rækkefølgen

Mange metoder til randomisering• Individniveau eller gruppeniveau (cluster)• Behøver ikke altid være 1:1• Brug simpel randomisering hvis muligt

19

Page 20: Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

RANDOMISERING

• Simpel randomisering – lodtrækning, liste med tilfældige tal

• Blok randomisering – fx blokke af 4 eller 6

• Parvis randomisering – når man har to

• Matching – man matcher et par, fx alder eller køn

• Minimisering – man udvælger nogle karakteristika som har betydning (fx alder, køn, problemniveau) – især når man har få deltagere.

20

Page 21: Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

DESIGN AF RCT

Venteliste:• Kontrolgruppen står på venteliste• Alle får indsats• Ikke muligt med langtidsopfølgning

Stepped wedge:• Bruges ved udrulning af indsats. Individer eller grupper randomiseres

til at begynde indsats på forskellige tidspunkter.• Alle får indsatsen men på forskelligt tidspunkt.• Ikke muligt med langtidsopfølgning

21

Page 22: Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

STEPPED WEDGE

22

Page 23: Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

ETISKE PROBLEMSTILLINGER

Er det uetisk at en lodtrækning afgør om man skal have behandling eller ej?

Argumenter FOR randomisering på sociale område:• Store regionale forskelle i behandling/tilbud• Ikke enighed om, hvad der bør tilbydes • Meget sjældent at kontrolgruppen ikke bliver tilbudt nogen

behandling/tilbud overhovedet (oftest standard behandling)• Ofte kan det man tilbyder indsatsgruppen kan betragtes som noget

ekstra oven i standard behandlingen.

23

Page 24: Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

ETISKE FORHOLD

• Mundtlig og skriftlig information om studiet til forældre• Skriftligt samtykke• Kan trække sig ud til hver tid• Fortrolighed • Datatilsyn• Etisk godkendelse• Forsøgsprotokol registreres

24

Page 25: Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

25

Har du nogen projekter, hvor det er muligt at randomisere?

SPØRGSMÅL:

Page 26: Helle Hansen VIVE – Det Nationale Forsknings- og ...Helle Hansen VIVE – Det Nationale Forsknings- og Analysecenter for Velfærd Author Helle Hansen Created Date 11/28/2018 9:25:17

RCT OPSAMLING

• RCT er det design, der egner sig bedst til at måle effekt• Man kan udtale sig om kausalitet – at A medfører B• Randomiser hvis I overhovedet har mulighed for det• Det behøver ikke at være så svært…• Men alt skal planlægges FØR i går i gang• Start i det små…

26