student analytics en aansluiting vo-ho – een verkenning van de mogelijkheden - theo bakker -...
DESCRIPTION
Titel: Student Analytics en aansluiting VO-HO – een verkenning van de mogelijkheden Spreker: Theo Bakker Ochtendsessie Zaal 26TRANSCRIPT
Student
Analytics
en aansluiting
VO-HO
Een
verkenning
van de
mogelijkheden
22 mei 2014
STUDIE-
SUCCES
&
ANALYTICS
GEGEVENSANALYSE
© 2014 Deloitte The Netherlands
Wat willen we leren vandaag?
1
TRENDS
Welke trends zijn er in
digitalisering van onderwijs en
studentbegeleiding?
ANALYSE
Hoe kunnen we deze gegevens
analyseren?
INZICHTEN
Hoe zijn nieuwe inzichten vervolgens
in de praktijk te gebruiken en voor
wie?
GEGEVENS
Welke gegevens zijn beschikbaar
en met elkaar te verbinden?
VERZILVERING
Hoe kunnen VO en HO elkaar en de
student zo informeren dat deze
nieuwe inzichten daadwerkelijk
ontstaan en verzilverd kunnen
worden?
STUDIE-
SUCCES
&
ANALYTICS
GEGEVENSANALYSE
Trends
STUDIE-
SUCCES
&
ANALYTICS
GEGEVENSANALYSE
© 2014 Deloitte The Netherlands
LinkedIn voorbeeld
d.d. 21-05-2014
• Harvard Open Courses
• edX
• Udemy
• Udacity
• Muse University
• Coursera
• MIT Open Courseware
• Stanford Online
• Khan Academy
• UC Berkeley
• Duke
• UCLA
• Open Yale
• Carnegie Mellon
4https://www.linkedin.com/today/post/article/20140520115703-10999323-design-your-own-master-s-degree-in-7-easy-steps?trk=tod-home-art-list-small_1
© 2014 Deloitte The Netherlands
De behoefte aan goede (stuur)informatie schuift naar voren in de keten van
HO naar VO
5
© 2014 Deloitte The Netherlands
“Traditionele” BI versus Analytics
Van achteruit kijken en verklaren, naar vooruitkijken en voorspellen
6
Prestaties meten en rapporteren
Data extractie & integratie
Data exploratie
Segmentatie / statisch
clusteren
Voorspellende modellen
Optimalisatie, simulatie &
scenario analyseAnalytics
Traditionele BI
Verkennen en ontdekken,
toekomst voorspellen,
actiegerichte inzichten
Feiten begrijpen,
rapportage verleden en
huidige prestatie
Gegevens, analyse en inzichten
STUDIE-
SUCCES
&
ANALYTICS
GEGEVENSANALYSE
© 2014 Deloitte The Netherlands
Studentfactoren die bijdragen aan studiesucces in het Hoger Onderwijs
8
OpleidingOpleiding
Capaciteiten
Omgevingsfactoren
Student Capaciteiten
• Vooropleiding
• Intelligentie
• Plannen, coördineren, time-management
• Motivatie
• Vermogen om sociale relaties aan te gaan
• Vermogen om hulp te zoeken
Omgevingsfactoren: persoonlijke achtergrond
• Achtergrond gezin (1e generatie student of niet, broers /
zussen die studeren, inkomen, etc.)
• Achtergrond woonplaats (mate van verstedelijking, kwaliteit
van de school)
• Geslacht, leeftijd
• Andere verplichtingen naast de studie
Omgevingsfactoren: Overheid
• Wet- en regelgeving
• Studiefinanciering
© 2014 Deloitte The Netherlands
Data is gecombineerd van 17.000 studenten uit verschillende bronnen
waarover analyses op uitval en studieduur zijn uitgevoerd
9
Eerstejaars Inschrijvingen
SIS / Extract 1
/ Extract 2
CRM x
Data ware
house
Extern: CBS,
DUO
Rooster-
systeem
Intake
gegevens
Analyses op uitval en studieduur
© 2014 Deloitte The Netherlands
Studenten met een VWO vooropleiding hebben een kleinere kans op uitval,
maar studeren gemiddeld wel iets langer
10
VWO
92%
HAVO/VWO
2%
HAVO
6%
31
31
33
32
29
27
28
25
35302520151050
Cijfer Engels <7
Cijfer Wiskunde <7
Cijfer Nederlands <7
Gem. cijfer middelbare school <7
Nee
Ja
Effect van middelbare schoolcijfers op uitval
Verdeling van vooropleidingen
Survival grafiek van matig presterende scholieren
• Een VWO vooropleiding betekent minder kans op
uitval tijdens of na het eerste jaar (30% tov 34%).
• Cijfers hebben een verwachte invloed op zowel
uitval als studieduur.
• Er kan het beste gekeken worden naar het
gemiddelde cijfer van de middelbare school.
• Mensen met een diploma van een middelbare
school uit een stedelijk gebied hebben meer kans op
uitval (38% tov 28%).
Advies: Differentieer op gemiddeld cijfer middelbare
school en stedelijkheid middelbare school.
Op
leid
ingsfa
cto
ren
© 2014 Deloitte The Netherlands
Studenten die bewust kiezen voor een opleiding hebben meer studiesucces
11
Motivatiekeuzes* • Studenten die gemotiveerd zijn door de inhoud
van het curriculum hebben een lagere kans op uitval
(24% tov 31%).
• Studenten die aangeven te studeren omdat hun
vrienden er studeren hebben een hogere kans op
uitval (32% tov 26%).
• Het is belangrijk dat de student zelf inschat meer
dan 35 uur per week te gaan studeren (27% tov
33%).
Adviezen: 1) Differentieer studiebegeleiding op
basis van getoond commitment en specifieke vormen
van motivatie (mn. vanwege vrienden). 2) Richt
vragenlijsten faculteitsbreed gelijk in.
21,0
22,0
29,0
31,0
32,0
31,0
35302520151050
Meeloopdag
Voorlichtingsevenement
Voorlichtingsbrochure
Effect van voorlichting op uitvalskansen
Nee
Ja
Effect van voorlichting op studieduur
* Motivatievragen worden gesteld bij departementen x, y en z.
24
26
27
28
28
32
31
26
26
26
25
26
0 5 10 15 20 25 30 35
Vanwege de studie
Vanwege de stad x
Het is dichtbij
Aangeraden hier te studeren
Vanwege de Master
Mijn vrienden studeren er
Stu
dentfa
cto
ren
© 2014 Deloitte The Netherlands
Studenten die op latere leeftijd (>21) aan hun opleiding beginnen hebben
meer kans op uitval
12
Percentage uitval per leeftijdscategorie Leeftijdsverdeling
43
47
104
89
117
159
237
373
644
886
656<=17
3,864
18 3,968
30 - 35
29
28
27
26
35 - 40
4,0003,0002,0001,0000
40 - 45
25
24
23
19
22
1,719
1,314
2,443
21
20
28
30
43
47
38
43
38
39
42
36
35
30
26
25
25
27
35 3050 10 5 01525 204045
Advies: Differentieer in studiebegeleiding voor studenten 17-21 en >21. Houd hierbij rekening met diverse redenen voor een
instroom op latere leeftijd: HBO-achtergrond versus studenten die langer over het middelbaar onderwijs hebben gedaan.
Stu
dentfa
cto
ren
© 2014 Deloitte The Netherlands
Eerdere of andere studies hebben veel invloed op uitval en vertraging
13
• Vooral eerdere en gelijktijdige bachelors komen vaker
voor en leiden tot hoge uitval en juist korte studieduur.
• Dit laatste wordt mogelijk gemaakt door vrijstellingen.
Advies: Differentieer op basis van nevenstudies. Maak
daarbij onderscheid tussen BA studenten die minder
presteren of juist beter. Breng bij de laatste groep
Excellentieprogramma’s onder de aandacht.
Overweeg studenten die al eerder een master hebben
gevolgd af te raden een BA opleiding te gaan volgen.
Percentage uitval van studenten met meerdere opleidingen
Studieduur van studenten met meerdere opleidingen Studieduur van studenten met meerdere opleidingen
35
49
66
52
34
31
31
31
30
30
706050403020100
Tweede studie tijdens eerste*
Master gelijktijdig
Eerdere master
Bachelor gelijktijdig
Eerdere bachelor
3,2
3,2
4,2
3,6
3,7
3,7
3,7
3,8
543210
Tweede studie tijdens eerste*
Master gelijktijdig
Bachelor gelijktijdig
Eerdere bachelor
Nee
Ja
* Een studie met een startdatum die binnen de duur van
een andere studie aan de universiteit valt
Stu
dentfa
cto
ren
© 2014 Deloitte The Netherlands
De resultaten van het eerste semester zijn het meest bepalend voor kans op
uitval en studieduur
14
27
42
46
43
50
15
13
17
10
16
50454035302520151050
Niet Cum Laude
Slagingspercentage <75%
Eerste cijfer onvoldoende
<20 studiepunten
Gemiddeld onvoldoende• Het allereerste tentamen cijfer blijkt al doorslaggevend
voor de kans op uitval.
• Een gemiddeld onvoldoende cijfer leidt tot uitval in 50%
van de gevallen.
• Deze factoren correleren sterk met elkaar.
• De resultaten hebben ook zonder uitval veel invloed op
de verwachte studieduur van studenten.
Kans op uitval per eerste semester statistiek
% Survival curve voor studenten met een eerste
onvoldoende tov de rest
3,8
4,1
4,1
4,1
4,3
3,4
3,5
3,6
3,5
3,6
43210 5
Eerste cijfer onvoldoende
<20 studiepunten
Gemiddeld onvoldoende
Niet Cum Laude
Slagingspercentage <75%
Gemiddelde studieduur per eerste semester statistiek
Nee
Ja
Advies: Baseer interventies consistent op het 1e
tentamencijfer en herhaal dit na ieder blok.
Stu
dentfa
cto
ren
© 2014 Deloitte The Netherlands
De verschillende opleidingen kennen een soortgelijke verdeling voor
verwachte studieduur met een aantal interessante uitschieters
15
* Deze grafiek bevat een selectie op studenten met minimaal 180 studiepunten en geen vrijstelling
Studieduur
Verdeling van de studieduur per opleiding
Advies: Classificeer opleidingen naar studieduur en voer hiervoor gericht beleid in (i.c. opleiding a,b,c,d).
Stuur aan op minder langstudeerders en versneld afstuderen van langstudeerders.
70% diploma in 4 jaar
Op
leid
ingsfa
cto
ren
© 2014 Deloitte The Netherlands
Een aantal opleidingen met een hoge uitval heeft een kortere studieduur.
Een aantal opleidingen met een lage uitval heeft een langere studieduur.
16
Verdeling van uitval en studieduur per opleiding
Advies: Het is van belang dat het eerste tentamencijfer over alle opleidingen even representatief is voor de gehele opleiding.
Dit lijkt nu nog niet overal de praktijk.
15
20
25
30
35
40
45
50
55
2,9 3,0 3,1 3,2 3,3 3,4 3,5 3,6 3,7 3,8 3,9 4,0 4,1 4,2 4,3 4,4 4,5 4,6
Opleiding 4
Opleiding 3
Opleiding 2
Opleiding 1
Perc
enta
ge U
itval
Gemiddelde studieduur
Opleiding 27
Opleiding 26
Opleiding 25
Opleiding 24
Opleiding 23
Opleiding 22
Opleiding 21Opleiding 20
Opleiding 19
Opleiding 18
Opleiding 17
Opleiding 16Opleiding 15
Opleiding 14
Opleiding 13
Opleiding 12
Opleiding 11
Opleiding 10
Opleiding 9
Opleiding 8
Opleiding 7
Opleiding 6Opleiding 5
CoH F
CoH E
CoH D
CoH C
CoH B
CoH A
70% diploma in 4 jaar
23% uitval
Op
leid
ingsfa
cto
ren
© 2014 Deloitte The Netherlands
Er lijkt hier deels een verband met het eerste tentamen als representatief
selectie-instrument
17
Verdeling van de eerste resultaten van studenten per opleiding ten opzichte van uitval
Advies: Het is van belang dat het eerste tentamencijfer over alle opleidingen even representatief is voor de gehele opleiding.
Dit is nu nog niet overal de praktijk.
15
20
25
30
35
40
45
50
55
13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53
Perc
enta
ge o
nvold
oendes e
ers
te t
enta
men
Percentage uitval
Opleiding 27
Opleiding 26
Opleiding 25
Opleiding 24
Opleiding 23
Opleiding 22
Opleiding 21
Opleiding 20
Opleiding 19
Opleiding 18
Opleiding 17
Opleiding 16
Opleiding 15
Opleiding 14
Opleiding 13
Opleiding 12
Opleiding 11
Opleiding 10
Opleiding 9
Opleiding 8
Opleiding 7
Opleiding 6
Opleiding 5
Opleiding 4
Opleiding 3
Opleiding 2
Opleiding 1
CoH F
CoH E
CoH D
CoH C
CoH B
CoH A
23% uitval
Op
leid
ingsfa
cto
ren
© 2014 Deloitte The Netherlands
Welke gegevens zijn er nog
meer beschikbaar voor
analyses?
• Bespreek met je buurman/buurvrouw
aan welke gegevens je nog meer
denkt om te gebruiken?
• Waar moeten die gegevens vandaan
komen?
• Zijn die gegevens vrij beschikbaar?
• Kunnen ze gemakkelijk gekoppeld
worden aan een leerling / student?
18
OpleidingOpleiding
Student
© 2014 Deloitte The Netherlands
Om verder in te zoomen op verschillende type studenten gebruiken we een
geavanceerde visuele segmentatie techniek: de Self Organizing Map
19
Stel je voor dat alle studenten van de FGw op het
grasveld van de Amsterdam Arena staan...
De opdracht:
Ga naast de personen staan op wie je het meest lijkt
qua:
• studieresultaten in het eerste semester
• middelbare school cijfers en vooropleiding
• genoten voorlichting
• motivatie om te studeren
Tot diep in de nacht discussiëren de studenten en
groepen beginnen zich steeds meer te vormen.
Laat in de ochtend worden gekleurde vlaggen
uitgedeeld, een helicopter stijgt op, en wordt er een
vraag gesteld:
Wat was het cijfer voor jouw eerste tentamen?
© 2014 Deloitte The Netherlands
De 16.666 studenten zijn vervolgens op basis van studiegedrag
ingedeeld in 12 groepen
20
7) HBO niet-Nederlands
HBO-vooropleiding, niet-
Nederlands (#1.671)
4) Contractanten
Studeren als hobby,
contractanten (#299)
3) De harde werkers
Divers segment met
hoge cijfers en kans op
uitval (#824)
2) Trage voorlichtingslozen
Hadden geen voorlichting nodig voor hun studiekeuze,
en halen slechts rond de 10 studiepunten in het eerste
semester (#1.310)
1) Snelle uitvallers
Lage cijfers bij 1e tentamen
(#1.821)
9) Slechte starters
Al iets oudere studenten die
waarschijnlijk uitvallen,
vaker uit gemeentes met
laag inkomen (#753)
8) Hakken over de sloters
Lage cijfers middelbare
school, kans op uitval en
studievertraging (#901)
11) HBO propedeusers
HBO propedeuse met
kans op een slechte start
(#1.117)
12) Stapelaars
Lang over
middelbare school
gedaan (#676)
10) Goede VWO-ers
Goede en excellente
studenten (#3.803)
6) Plattelanders
Van het platteland
naar de stad met hoge
cijfers (#764)
5) De middenmoters
Geen hoge cijfers, maar
vallen over het algemeen
niet uit (#2.742)
1
2 34
5
67
8
9
1110
12
Speciaal beleid tegen uitval Potentie voor differentiatie ten gunste van hogere resultaten
Stu
dentfa
cto
ren
© 2014 Deloitte The Netherlands
Uitval groepeert zich aan de linkerkant van de kaart in segment 1, 9 en een
gedeelte van 8 en 3
21
Uitval binnen of na één jaar
Uitval over de gehele studieJaren tot examen
• (1,3,8,9) Uitval speelt zich af op meerdere
gebieden; dit duidt erop dat de redenen
voor uitval verschillen.
• (idem) Uitval en vertraging in jaren na het
eerste jaar lijken sterk op de uitval in het
eerste jaar.
12 3
4
5
6 7
8
9
11 1012
12 3
4
5
6 7
8
9
11 1012
12 3
4
5
6 7
8
9
11 1012
Stu
dentfa
cto
ren
© 2014 Deloitte The Netherlands
De statistieken van de SOM kunnen we ook aggregeren naar segment niveau
22
Percentage studenten per segment
12 3
4
5
67
8
9
1110
12
0 2 4 6 8 10 12 14 16 18 20 22 24
5) De middenmoters 16
5
10
6) Plattelanders
7) HBO niet-Nederlands
4) Contractanten 2
3) Harde werkers 5
2) Trage voorlichtingslozen 8
1) Snelle uitvallers 11
12) Stapelaars
5
5
23
7
4
8) Hakken over de sloters
9) Slechte starters
10) Goede VWO-ers
11) HBO propedeusers
Uitval of Switch
Overig
17
30
15
63
40
19
11
22
32
37
26
68
0 10 20 30 40 50 60 70
12) Stapelaars
11) HBO propedeusers
2) Trage voorlichtingslozen
1) Snelle uitvallers
8) Hakken over de sloters
3) Harde werkers
10) Goede VWO-ers
5) De middenmoters
6) Plattelanders
9) Slechte starters
4) Contractanten
7) HBO niet-Nederlands
Percentage uitval per segmentPercentage studenten per segment
• De goede VWOers (10) en de
middenmoters (5) zijn 39% van de
populatie.
• De HBO segmenten (7 en 11) tellen op tot
17%.
• 25% van de uitval valt onder het segment
snelle uitvallers.
Stu
dentfa
cto
ren
© 2014 Deloitte The Netherlands
Snelle uitvallers (segment 1) – 1/2 – kans op uitval 68%
23
Gemiddeld cijfer hele bachelor
1
2 34
5
67
8
9
1110
12
VWO vooropleiding Verstedelijking rond middelbare school
12 3
4
5
6 7
8
9
1110
12
Gemiddeld cijfer bij middelbare school
1
2 34
5
67
8
9
1110
12
1
2 34
5
67
8
9
1110
12
Stu
dentfa
cto
ren
© 2014 Deloitte The Netherlands
Snelle uitvallers (segment 1) – 2/2 – kans op uitval 68%
24
Leeftijd bij middelbare school examenVrouw
12 3
4
5
6 7
8
9
11 1012
Voorlichtingsbrochure
12 3
4
5
67
8
9
1110
12
Voorlichtingsevenement
12 3
4
5
67
8
9
1110
12
Stu
dentfa
cto
ren
© 2014 Deloitte The Netherlands
Welke extra inzichten zijn
er mogelijk als meer gegevens
uit het VO gebruikt worden?
• Stel dat we meer gegevens uit het
VO kunnen gebruiken, welke extra
inzichten verwacht je dan?
• In welke mate wissel je nu al
gegevens uit met het HO c.q. VO en
met welke doel?
25
OpleidingOpleiding
Student
Verzilvering
STUDIE-
SUCCES
&
ANALYTICS
GEGEVENSANALYSE
© 2014 Deloitte The Netherlands27
4. Hoofdfaseverdieping
3. Hoofdfase voorbereiding
verdieping
2. Propedeuse
Voorlichting
Voorlichting en inschrijving
vanuit het perspectief van de student
Inschrijving
Studieadvies
Toegang stage, minor
Diploma
F
F
F
F
Heel veel keuzes
Wat kan
en moet
ik kiezen?
Voorlichting en begeleiding
1. Voorlichting Jr 1
Jr 2
Jr 3+4
Vervolgopleiding
F = formeel, procedureel proces – aan regels gebonden
Kennismaking op schoolOpen dag Verkeerde keuze?
Website
Studielink
Collegekaart
Introductie
StudiefinancieringOV-jaarkaartDigiD
Thuis wonen of op kamers? Intakegesprek
Diploma
HAVO/VWO
halen
Dyslexie, etc.Vrienden maken
Wat kan ik worden?
Taal- en
wiskundetoets
Wat wil ik?Wat kan ik?
Bijbaantje of lenen?
Hier of ergens anders?Student-ID
StudiekeuzetrajectMeeloopdag
Wat vinden mijn ouders?
Wat zijn de regels? SLB
Collegegeld
Aanmaning
Versnippering
Ter illustratie
© 2014 Deloitte The Netherlands
Hoe kunnen extra inzichten
verzilverd worden?
• Welke bestaande interventies kun je
aanpassen zodat ze meer effect
hebben?
• Welke nieuwe interventies zie je en
wanneer vinden die plaats?
• Wat is de doelgroep van deze
interventies en waarom?
28
OpleidingOpleiding
Student
© 2014 Deloitte The Netherlands
Meer informatie
29
Theo BakkerSenior Manager Onderwijs
Deloitte Consulting
06-10999307
© 2014 Deloitte The Netherlands
Deloitte refers to one or more of Deloitte Touche Tohmatsu Limited, a UK private company limited by guarantee, and its network of member firms,
each of which is a legally separate and independent entity. Please see www.deloitte.com/about for a detailed description of the legal structure of
Deloitte Touche Tohmatsu Limited and its member firms.
Deloitte provides audit, tax, consulting, and financial advisory services to public and private clients spanning multiple industries. With a globally
connected network of member firms in more than 150 countries, Deloitte brings world-class capabilities and deep local expertise to help clients
succeed wherever they operate. Deloitte's approximately 170,000 professionals are committed to becoming the standard of excellence.
This publication contains general information only, and none of Deloitte Touche Tohmatsu Limited, its member firms, or their related entities
(collectively, the “Deloitte Network”) is, by means of this publication, rendering professional advice or services. Before making any decision or
taking any action that may affect your finances or your business, you should consult a qualified professional adviser. No entity in the Deloitte
Network shall be responsible for any loss whatsoever sustained by any person who relies on this publication.