randomiserede forsøg
TRANSCRIPT
RANDOMISEREDE
FORSØG: HVAD, HVORFOR & HVORDAN?
HELLE HANSEN
EFFEKTSTIGEN
21-05-2015 DET RANDOMISEREDE KONTROLLEREDE FORSØG 2
HVORFOR RCT?
• Det bedste design til effektmåling • Pga. den tilfældige tildeling af indsats • Sikrer at grupperne er ens på både målbare og ikke-målbare
faktorer • Kan håndtere kompleksitet • Kræver færrest deltagere Hvis indsatsgruppe klarer sig bedre/dårligere end
kontrolgruppen så kan vi konkludere at det er på grund af indsatsen
21-05-2015 DET RANDOMISEREDE KONTROLLEREDE FORSØG 3
RCT HISTORISK SET
• 1061: Ben Cao Tu Jing – Ginseng eller ej i forhold til at løbe • 1753: Sir James Lind, læge i den engelske flåde – Skørbug -Citron og appelsin overfor æblevin, fortyndet svovlsyre,
havvand, eddike og urteblanding • 1900erne uddannelsesområdet i USA • 1920erne R. A. Fischer inden for landbruget • 1930erne socialområdet i USA – Cambridge Sommerville • 1944 England - Patulin mod hoste
• 1990erne især sundhedsområdet – Cochrane Collaboration
• 2005- Campbell Collaboration: uddannelse, kriminologi, socialområdet
21-05-2015 DET RANDOMISEREDE KONTROLLEREDE FORSØG 4
21-05-2015 DET RANDOMISEREDE KONTROLLEREDE FORSØG 5
A B
Indsats
Randomisering
Måle udfald
DESIGN AF RANDOMISEREDE KONTROLLEREDE FORSØG
Fire elementer: 1. Målgruppe 2. Randomisering 3. Indsats/kontrol 4. Måling/analyse
21-05-2015 DET RANDOMISEREDE KONTROLLEREDE FORSØG 6
21-05-2015 DET RANDOMISEREDE KONTROLLEREDE FORSØG 7
A B
Indsats
Randomisering
Måle udfald
DESIGN AF RCT: MÅLGRUPPE
Individ: Enkelt personer randomiseres til intervention eller kontrol Gruppe/Cluster randomisering: Når den naturlige enhed at randomisere på er gruppen (fx skole,
klasse, praktiserende læge, hjemmeplejeenhed, kommune)
21-05-2015 DET RANDOMISEREDE KONTROLLEREDE FORSØG 8
REKRUTTERING
Så mange med som muligt! -overvej tiltag der kan tilskynde deltagelse Hvis målgruppen er lille kan det blive svært at rekruttere nok
deltagere Få realistisk billede af, hvor mange der kan rekrutteres inden for
det tidsrum man har valgt
21-05-2015 DET RANDOMISEREDE KONTROLLEREDE FORSØG 9
INDSATS/INTERVENTION
Indsatsen skal være: • Afgrænset • Velbeskrevet • Gerne teoretisk funderet Så vi ved, hvad vi måler på!
21-05-2015 DET RANDOMISEREDE KONTROLLEREDE FORSØG 10
KONTROLGRUPPE
Hvad får kontrolgruppen? • Anden form for specifik behandling • Anden almindelig behandling – Usual Care • Venteliste til samme behandling Der kan være for lille en forskel mellem behandlingen i
indsatsgruppen og kontrolgruppen til at man kan finde en forskel. Det betyder ikke nødvendigvis at der ikke er en
effekt, vi kan bare ikke se den.
21-05-2015 DET RANDOMISEREDE KONTROLLEREDE FORSØG 11
INTERN/EKSTERN VALIDITET
Deltagergruppen har betydning i forhold til generaliserbarheden af studiet. -Om resultaterne kan overføres til andre grupper. Oftest kan man kun sige noget sikkert om effekten på den gruppe man har undersøgt. Men man kan så måske formode at dette også vil gælde for andre grupper.
21-05-2015 DET RANDOMISEREDE KONTROLLEREDE FORSØG 12
ANTAL DELTAGERE
Hvor mange personer vi skal have med i forsøget hænger sammen med den effektstørrelse vi forventer at finde: • Jo større effektstørrelse jo større styrke/power.
• Jo større effektstørrelse jo færre personer behøver vi for
at kunne vise en forskel
• Jo mindre effektstørrelse jo flere personer skal vi bruge
21-05-2015 DET RANDOMISEREDE KONTROLLEREDE FORSØG 13
ANTAL DELTAGERE
Tommelfingerregler (ikke absolut!): Stor effekt: 25 personer i hver gruppe (Cohen’s d=0.80) Moderat effekt: 64 personer i hver gruppe (Cohen’s d=0.50) Lille effekt: 400 personer i hver gruppe (Cohen’s d=0.20) Generelt siger vi gerne 100-150 i alt
21-05-2015 DET RANDOMISEREDE KONTROLLEREDE FORSØG 14
FRAFALD
For det meste er der nogen der falder fra undervejs - Rekrutter lidt flere end der er brug for Ofte er der flere i kontrolgruppen der falder fra end i interventionsgruppen. Det er vigtigt at undersøge om dem, der falder fra er anderledes end dem, der fortsætter. Ellers kan man ende med forskellige grupper, der ikke kan sammenlignes.
21-05-2015 DET RANDOMISEREDE KONTROLLEREDE FORSØG 15
21-05-2015 DET RANDOMISEREDE KONTROLLEREDE FORSØG 16
A B
Indsats
Randomisering
Måle udfald
DESIGN AF RCT: RANDOMISERING
• Almindelig lodtrækning: Der er en gruppe, der passer til indsatsen og som kan randomiseres.
• Venteliste: Der er en venteliste til et tilbud/kursus, hvor man
kan randomisere hvem der modtager tilbuddet/kurset nu og hvem der skal vente til næste runde. • Løbende rekruttering/randomisering: Rekrutteringen
sker løbende og derfor sker randomiseringen ligeledes løbende efter en på forhånd fastlagt procedure.
21-05-2015 DET RANDOMISEREDE KONTROLLEREDE FORSØG 17
DESIGN EKSEMPLER
Individ: • DUÅ Baby: Familier randomiseres til DUÅ Baby eller TAU Cluster: • Kræver en del clustre gerne 40 - minimum 12 • Skoleklasser (fx klasseledelse) • Daginstitutioner (fx sprogstimulering) • Sagsbehandler QRCT – quasi-randomiseret: ikke tilfældig/randomiseret fordeling men næsten…. Naturligt forekommende opdeling fx fødselsår, dag i uge man henvender sig…
21-05-2015 DET RANDOMISEREDE KONTROLLEREDE FORSØG 18
DESIGN AF RCT
Venteliste: • Kontrolgruppen står på venteliste • Alle får indsats • Ikke muligt med langtidsopfølgning Stepped wedge: • Bruges ved udrulning af indsats. Individer eller grupper
randomiseres til at begynde indsats på forskellige tidspunkter. • Alle får indsatsen men på forskelligt tidspunkt. • Ikke muligt med langtidsopfølgning
21-05-2015 DET RANDOMISEREDE KONTROLLEREDE FORSØG 19
STEPPED WEDGE
21-05-2015 DET RANDOMISEREDE KONTROLLEREDE FORSØG 20
RANDOMISERING
Randomisering skal være uforudsigelig og uafhængig af dem,
der er indblandet i forsøget.
Det har vist sig at der snydes med det, når det er muligt • Åbne konvolutterne • Røntgenfotografere konvolutter • Bytte om på rækkefølgen Mange metoder til randomisering • Individniveau eller gruppeniveau (cluster) • Brug simpel randomisering hvis muligt • Behøver ikke altid være 1:1
21-05-2015 DET RANDOMISEREDE KONTROLLEREDE FORSØG 21
RANDOMISERING
• Simpel randomisering – lodtrækning, liste med tilfældige tal
• Blok randomisering – fx blokke af 4 eller 6
• Parvis randomisering – når man har to
• Matching – man matcher et par, fx alder eller køn
• Minimisering – man udvælger nogle karakteristika som har betydning (fx alder, køn, problemniveau).
21-05-2015 DET RANDOMISEREDE KONTROLLEREDE FORSØG 22
ETISKE PROBLEMSTILLINGER
Er det uetisk at en lodtrækning afgør om man skal have behandling eller ej? Argumenter FOR randomisering på sociale område: • Store regionale forskelle i behandling/tilbud • Ikke enighed om, hvad der bør tilbydes • Meget sjældent at kontrolgruppen ikke bliver tilbudt nogen
behandling/tilbud overhovedet (oftest standard behandling) • Ofte kan det man tilbyder indsatsgruppen kan betragtes som
noget ekstra oven i standard behandlingen.
21-05-2015 DET RANDOMISEREDE KONTROLLEREDE FORSØG 23
ETISKE OVERVEJELSER
RCT-studier skal gerne kunne bidrage med væsentlig ny viden til
at forbedre forholdene for borgerne i vores samfund. Målet er at maksimere sandsynligheden for at få et brugbart resultat af undersøgelsen samtidigt med at vi minimerer besværet for undersøgelsesdeltagerne.
21-05-2015 DET RANDOMISEREDE KONTROLLEREDE FORSØG 24
ETISKE FORHOLD
• Mundtlig og skriftlig information om studiet til forældre • Skriftligt samtykke • Kan trække sig ud til hver tid • Fortrolighed • Datatilsyn • Videnskabsetiske komitesystem • Forsøgsprotokol registreres
21-05-2015 25
Bedre Familiebehandling
21-05-2015 DET RANDOMISEREDE KONTROLLEREDE FORSØG 26
RCT OPSAMLING
RCT er det design, der egner sig bedst til at måle effekt Man kan udtale sig om kausalitet – at A medfører B Randomiser hvis I overhovedet har mulighed for det Det behøver ikke at være så svært… Men alt skal planlægges FØR i går i gang Start i det små…
21-05-2015 DET RANDOMISEREDE KONTROLLEREDE FORSØG 27
21-05-2015 DET RANDOMISEREDE KONTROLLEREDE FORSØG 28