spørgeskemaer og psykologiske test
DESCRIPTION
Maiken Pontoppidans oplæg ved temadage om effektmåling, SFI, oktober 2013TRANSCRIPT
SPØRGESKEMAER OG PSYKOLOGISKE TEST
MAIKEN PONTOPPIDAN
METODE
Hvad gør jeg, hvis jeg gerne vil måle på de borgere, der får en socialpolitisk indsats?
• Kvantitativ måling • Målgruppe • Indsats
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 2
DISPOSITION
Spørgeskema generelt Psykologiske test Eksempler på test
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 3
SPØRGESKEMA
Afklar undersøgelsens problemstillinger og begreber Hvad er det vi vil undersøge helt præcist og hvordan måler vi
det? – er der nogen der har målt det før på en GOD måde? Se hvad andre har brugt – stjæl/genbrug
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 4
SPØRGESKEMA - OVERVEJELSER
Længde af spørgeskema/test batteri Ofte max 1 time eller ca. 200 spørgsmål Kun et spørgsmål ad gangen Kan spørgsmålene forstås af målgruppen? Pilottest Hvor mange gange vil man rykke for svar? Belønning/kompensation eller ej?
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 5
SPØRGESKEMA - INDSAMLINGSMETODE
Hvordan skal målingen udføres? Besøgsinterview: • Muligt med lange og mere komplicerede spørgeskemaer • Motivation, mere tæt på den interviewede • Tidskrævende, dyrt • Høj svarprocent
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 6
SPØRGESKEMA - INDSAMLINGSMETODE
Telefoninterview: • Bedre end besøg ved personfølsomme spørgsmål • Relativ anonymitet • Tidsbesparende, billigere end besøg • Kortere spørgsmål og færre svarkategorier, • Lavere svarprocent end besøg
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 7
SPØRGESKEMA - INDSAMLINGSMETODE
Postspørgeskema og computerbaserede test: • Mulighed for åbne spørgsmål • Anonymitet • Moderate omkostninger, tidsbesparende • Sprogligt enkle spørgsmål • Risiko for manglende svarmotivation • Laveste svarprocent
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 8
SPØRGESKEMA - INDSAMLINGSMETODE
Nye medier: • SMS • IPAD Tænk kreativt…
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 9
BORTFALD
Bortfald ved efterfølgende/opfølgende måling Hvad mindsker bortfald? Indhold/emne har interesse Emnet er vigtigt at undersøge Indre motivationsknapper (intrinsic motivation) Incentives/ motivationsfremmende foranstaltninger Penge, information, egne resultater, ekstra undersøgelser Ydre motivation (extrinsic motivation)
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 10
SPØRGESKEMA - SPØRGSMÅLSTYPER
Faktuelle spørgsmål: • Forhold i den ydre verden, fx adfærd og hændelser, som i
princippet kan efterprøves
Holdningsspørgsmål: • Mentale fænomener, som ikke kan efterprøves
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 11
SPØRGESKEMA - OPBYGNING
Hvad skal stå hvor? • Det vigtigste først Baggrundsspørgsmål: • Er der altid brug for • fx alder, køn, uddannelse, husstandssammensætning,
arbejdsmarkedstilknytning • Skal de stå først eller senere?
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 12
PSYKOLOGISKE TEST
Hvad er en psykologisk test? Med formål at beskrive og/eller måle psykiske egenskaber hos
den enkelte, for eksempel intelligens eller personlighed. Bygger på teori Kineserne var de første til at bruge test for 4000 år siden i
forbindelse med udvælgelse til job vej kejseren
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 13
PSYKOLOGISKE TEST
Mange navne: Test (kun hvis rigtigt/forkert svar) Instrument/måleinstrument Måleskala Spørgeskema Psykometrisk … Screeningsinstrument Indikator
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 14
TEST
Meget kendte: IQ test, projektive test, personlighedstest. Der var i 80’erne og 90’erne en ret kritisk holdning til brug af test i Danmark, men det har ændret sig I dag er der større interesse for test
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 15
TEST
I dag fx: • APGAR score ved fødsel • Nationale test i skolen • Personlighedstest ved jobsamtale • Ved psykiatriske problemer og sygdomme Et område hvor psykologiske test bruges meget er i voksen- og børnepsykiatrien
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 16
TEST
Med den øgede brug af test følger der selvfølgelig risiko for ukritisk brug og misbrug af test I dag kan et testresultat betyde meget Derfor er det rigtig vigtigt, at de er udviklet ordentligt og bliver brugt ordentligt
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 17
PSYKOLOGISKE TEST
• Måler egenskaber/tilstande som ikke kan måles direkte • -> proxy mål, evt. samlet skala score • fx færdighed, viden, kompetence eller adfærd • Kvantitativ måde (med tal)
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 18
PSYKOLOGISKE TEST
Hvorfor skal vi bruge dem? Fordi: • Det er undersøgt og dokumenteret, at de måler det, vi gerne
vil måle på en god måde • Vi kan få en score/et niveau for borgeren • Vi kan sammenligne resultater – over tid og med andre
Men selvfølgelig KUN hvis testen måler præcis det vi gerne vil måle og på samme måde for forskellige grupper (fx alder, køn)
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 19
HVAD ER EN GOD TEST?
Hvad er forskellen imellem en ugeblads ”test” (Er du en god kæreste?) og en rigtig og veludviklet psykologisk test? • Konstruktion • Reliabilitet • Validitet
• Standardisering
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 20
KONSTRUKTION
Videnskabeligt rationale/teorier for: • Hvad der måles • Udvælgelse og sammensætning af spørgsmål eller opgaver • Valg af svarformat Standardiseret procedure for administration af test Detaljer om kodning Vejledning om fortolkning
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 21
RELIABILITET
Testens målepræcision og pålidelighed God reliabilitet: Tilfældige og ukendte faktorers indflydelse er begrænset Dårlig reliabilitet: tilfældig variation
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 22
RELIABILITET
Undersøges fx med test-retest, Cronbachs Alpha koefficient, split half-reliabilitet Hvis man måler den samme person gentagne gange skal man gerne få det samme svar Reliabilitet vil være angivet i manual eller lignende
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 23
Cronbach's alpha Internal consistency α ≥ 0.9 Excellent (High-Stakes testing) 0.7 ≤ α < 0.9 Good (Low-Stakes testing) 0.6 ≤ α < 0.7 Acceptable 0.5 ≤ α < 0.6 Poor α < 0.5 Unacceptable
VALIDITET
Testens gyldighed, troværdighed Om man måler det man gerne vil måle og ikke alt muligt andet Er grundlæggende og afgørende for testens kvalitet Fx facevaliditet, indholdsvaliditet, kriterievaliditet, begrebsvaliditet
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 24
RELIABILITET OG VALIDITET
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 25
STANDARDISERING
Hvad har man brug for at svare på? Hvor god læser? Hvor god læser i forhold til klassetrin? Normtal på stort antal respondenter Data om præcision og usikkerheder (fx gennemsnit, standard afvigelse) Kan lave grupperinger af høje og lave værdier, kritiske værdier, normtal for særlige grupper mm.
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 26
VALG AF MÅLESKALA/TEST
• Test til forskning eller klinisk brug? • Til screening eller opfølgning over tid? • Hvem skal administrere testen? • Skal man være uddannet for at administrere testen? • Er der rettigheder? – koster det penge at bruge testen? • Til børn eller voksne – forskellige test, tilrettet alder • Hvem skal udfylde? Forældre, unge, sagsbehandler, lærer? Anbefalinger fra Socialstyrelsen 11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 27
KONTEKST
Findes testen på dansk? Hvis ikke, giver det mening at oversætte den? Passer den i en dansk kontekst? Regler for oversættelse: Oversæt til dansk Ekspertgruppe Oversæt tilbage til originalsprog Tilret Valideringsstudium
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 28
TEST TYPER
Der er uendeligt mange test IKKE udtømmende liste Fokus på følgende: • Relevans (børn, udsatte, ældre…) • Selvrapportering • Ikke uddannet tester
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 29
NEUROPSYKOLOGISKE TEST
Funktioner i hjernen • Opmærksomhed, koncentration, hukommelse, læring,
sprogfunktion, spatial, eksekutive funktioner, alkohol forbrug, ældres mentale status og mange flere
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 30
NORMBASEREDE TEST
Personlighedstest: Meyers-Briggs Type Indicator (MBTI) -144/126/93 spg NEO Personality Inventory-Revised - NEO-PIR 240 spg • The big five (Neuroticisme, Ekstroversion, Venlighed,
Samvittighedsfuldhed, Åbenhed) Begge bruges meget i organisationspsykologi - HR
• Kreativitet, optimisme, følelsesmæssig intelligens, humor,
taknemmelighed 11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 31
INTELLIGENS - FÆRDIGHEDER
Wechsler Adult Intelligence Scale (WAIS) • Tester 15 områder • Bruges meget over hele verden • Findes også til børn og unge (WPPSI og WISC) • Standardiseres så der er gennemsnit på 100 og standard
afvigelse på 15 • Normbaseret
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 32
PSYKISK TILSTAND - DEPRESSION Major Depression Inventory (MDI10) 12 spørgsmål – 10 kategorier Symptoms hyppighed seneste 14 dage Hele tiden
Det meste af tiden
Lidt mere end halvdelen af tiden
Lidt mindre end halvdelen af tiden
Lidt af tiden
På intet tidspunkt
1. Har du følt dig trist til mode, ked af det?
2. Har du manglet interesse for dine daglige gøremål?
3. Har du følt at du manglede energi og kræfter?
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 33
PSYKISK TILSTAND - DEPRESSION
Beck Depression Index (BDI) • 84 spg • Tilstand for øjeblikket
Hamilton Rating Scale for Depression (HRSD) Hamilton Depression Rating Scale (HDRS) HAM-D • 6/17 spg.
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 34
PSYKISK TILSTAND - ANGST Angst Symptom Spørgeskemaet (ASS) 10 spg. Igennem de sidste to uger, hvor stor del af tiden
har du: Hele tiden
Det meste af tiden
Lidt over halvdelen af tiden
Lidt under halvdelen af
tiden
Lidt af tiden
På intet tidspunkt
Været nervøs, anspændt eller følt indre uro? 5 4 3 2 1 0
Været meget bekymret over selv de mindste ting i din dagligdag? 5 4 3 2 1 0 Være nødt til at undgå visse ting, steder eller aktiviteter, fordi de er angstprovokerende? 5 4 3 2 1 0 Haft gentagende ubehagelige tvangstanker, du ikke kan få ud af hovedet? 5 4 3 2 1 0
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 35
PSYKISK TILSTAND Symptom Checklist (SCL) • Fuld udgave 90 spg • Reviderede udgaver 5,6,9,10,11,18,25,27,53 spg • Med forskelligt fokus
Patient Health Questionnaire (PHQ-9) • Psykisk helbred, depression, 9 spg
Sådan er jeg – 32/72 spg • Psykisk trivsel for 7-16 årige
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 36
LIVSKVALITET
QoL (quality of life) test Der findes rigtig mange QoL test da de bruges i medicinsk forskning Noget af det sværeste at måle – kvalitet derefter
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 37
LIVSKVALITET
Børn – KIDSCREEN – 10/27/52 spg. • Børn i alderen 8-18 år WHO Quality of Life Scale (WHOQOL) – 100 spg • Fysisk dimension, psykologisk dimension,
uafhængighedsdimension, social dimension, miljømæssig dimension, spirituel dimension
Oswestry (IDO) – 60 spg • Funktion i forhold til: Smerter, personlig pleje, løfte, gå,
sidde, stå, sove, sexliv, socialt liv, rejse
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 38
LIVSKVALITET
I de sidste 2 uger… Hele tiden Det meste af tiden
Lidt mere end halvdelen af tiden
Lidt mindre end halvdelen af tiden
Lidt af tiden
På intet tidspunkt
1 .. har jeg været glad og i godt humør 5 4 3 2 1 0
2 .. har jeg følt mig rolig og afslappet 5 4 3 2 1 0
3 .. har jeg følt mig aktiv og energisk 5 4 3 2 1 0
4 .. er jeg vågnet frisk og udhvilet 5 4 3 2 1 0 5 .. har min dagligdag været fyldt med ting der interesserer mig 5 4 3 2 1 0
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 39
WHO5- dansk udviklet • 5 spg. • Meget brugt, gratis • Måler det øjeblikkelige psykiske velbefindende
FUNKTIONSEVNE
The Short-Form-36 Health Survey (SF-36) • Findes også i en 12 og 8 spg. udgave (SF-12, SF-8)
Pas på med at bruge SF36/12/8 på normalgruppe -fungerer ikke Børn: • PEDI Pediatric Evaluation of Disability Inventory • PEDI-CAT (ny udgave), 0-20 år, 15 min.
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 40
Work and social adjustment scale (WSAS)
Kort – 5 spg.
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 41
ADFÆRD – BØRN OG UNGE
Child Behavior Check List (CBCL) – 118 spg
• Måler adfærd (fx externaliseret, internaliseret, afvigende adfærd)
• 1½ år-35 • Achenbach System of Empirically Based Assessments (ASEBA)
Version til forældre (CBCL), lærere/pædagoger (TRF) og til unge (YSR)
• Meget brugt i studier af børn og unge med adfærdsproblemer • Nu også 19 spg. udgave Brief Problem Monitor (BPM)
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 42
ADFÆRD – BØRN OG UNGE Strenghts and Difficulties Questionnaire (SDQ) – 25 spg
• Kortere, med positiv skala (sociale styrker) • Version til forældre, lærere og ung (fra 11 år) • Meget brugt til screening i psykiatrien og i større
undersøgelser (fx Børneforløbsundersøgelsen SFI, Bedre Sundhed for Mor og Barn)
• Ny dansk oversættelse på vej? En del af DAWBA (Development and Well-Being Assessment) Større diagnostisk spørge/interviewskema
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 43
ADFÆRD – BØRN OG UNGE SDQ
Når du tænker på de seneste 6 måneder, hvor godt passer følgende på barnet Passer ikke Passer delvist Passer godt
Er hensynsfuld og betænksom overfor andre.
Er rastløs, ’overaktiv’, har svært ved at holde sig i ro i længere tid
Har ofte raserianfald eller bliver let hidsig
Er lidt af en enspænder, leger mest alene
Gør for det meste, hvad der bliver sagt
Bekymrer sig om mange ting, virker ofte bekymret
Prøver at hjælpe, hvis nogen slår sig, er kede af det eller skidt tilpas
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 44
BØRN UDVIKLING
Sprogtest – 3 årige Ages and Stages Questionnaire (ASQ) ca 30 spg. 1-66 mdr. 5-15 (FTF), 181 spg., børn 5-15 år 8 domæner: motoriske færdigheder, eksekutive funktioner,
perception, hukommelse, sprog, indlæring, sociale færdigheder og emotionelle/adfærdsmæssige problemer.
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 45
FORÆLDRE
STRESS: Parental Stress Scale (PSS) – 18 spg. Oplevelse af forældreskab forældre til 0-18 årige Parenting Stress Index (PSI) – 120/36 spg. forældre til 0-12 årige FORÆLDREKOMPETENCE: Parenting sense of competence (PSOC) – 18 spg, 4-9 år
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 46
ANDRE
ÆLDRE: Bergs balanceskema Senior fitness test – fx TUG - Timed up and go PTSD: HTQ-IV - Harvard Trauma Questionnaire MISBRUG: ASI - Addiction Severity Index
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 47
GENERELT
SAMMENHÆNGSKRAFT: Sense of Coherence (SOC) 3,6,7,9,10,11,12,13,16,29 spg. SELF-ESTEEM: Rosenberg self-esteem scale, 10 spg. SELVKONTROL: Baumeister self-control scale, 36 spg.
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 48
GENERELT
General self-efficacy scale Passer slet ikke
Passer en smule
Passer nogenlunde
Passer præcist
Jeg kan altid løse vanskelige problemer, hvis jeg prøver ihærdigt nok
Hvis nogen modarbejder mig, finder jeg en måde til at opnå det, jeg vil
Det er let for mig at holde fast ved mine planer og realisere mine mål
Jeg er sikker på, at jeg kan håndtere uventede hændelser
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 49
SELF-EFFICACY: The general self efficacy scale, 10 spg.
FIT – FEEDBACK INFORMED TREATMENT
Scott Miller ORS – outcome rating scale SRS – session rating scale 4 simple spørgsmål
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 50
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 51
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 52
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 53
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 54
FORANDRINGSKOMPASSET
Københavns Kommune For at kunne følge borgerens udvikling Hver 3. måned Bygger på Outcomes star Hjemløse området Triangle Consulting Social Enterprise Ltd.
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 55
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 56
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 57
10 UDGAVER
• Udsatte børn – 0-5 år • Udsatte børn – 6-12 år • Udsatte unge – 13-23 år • Børn med handicap • Voksne med handicap • Voksne med handicap (med særligt svære
funktionsnedsættelser) • Misbrugere • Sindslidende • Hjemløse (herberg og plejetilbud) • Kvinder på krisecentre
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 58
HUSK
Test er rigtig godt at bruge og kan give jer en fornemmelse af borgernes udvikling over tid
Men…. testresultater afhænger af: • Kvalitet • Administration • Borgerens besvarelse Kast jer ud i det Spørg hvor I kan
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 59
OVERSKRIFT I HVID PÅ FARVET BAGGRUND
Baggrundsfarven kan frit vælges blandt farverne i standardfarvepaletterne, men brug kun én farve ud over hvid og evt. en gråtone i hver præsentation.
11-10-2013 SPØRGESKEMAER OG PSYKOLOGISKE TEST 60