inzichten uit data keynote door bart sigger
TRANSCRIPT
Wat kunt u met uw data?Inzichten uit de praktijk
November ‘14
1
Copyr
ight
© 2
014 b
y T
he B
osto
n C
onsultin
g G
roup,
Inc.
All
rights
reserv
ed.
Doelen van vandaag
Illustreren wat voor inzichten er zitten verscholen in uw data
Discussiëren hoe zulke inzichten uw beslissingen kunnen beïnvloeden
Bespreken hoe (makkelijk) u dit kunt toepassen
2
Copyr
ight
© 2
014 b
y T
he B
osto
n C
onsultin
g G
roup,
Inc.
All
rights
reserv
ed.
Enige context
Ontwikkelmodel School aan Zet en BCG
• Vijf algemene aspecten, waaronder ‘Goede differentiatie’
Vraag vanuit een school
• Wat betekent 'Goede differentiatie' concreet?
Als strategie consultant doen waar we goed in zijn
• Inzichten uit data halen
‘Betere differentiatie’ concreet maken
• Eenvoudige reproduceerbare analyses
Impact op beslissingen o.b.v. data bespreken
• Vanuit ons alleen suggesties
Aanleiding
Het
onderzoek
3
Copyr
ight
© 2
014 b
y T
he B
osto
n C
onsultin
g G
roup,
Inc.
All
rights
reserv
ed.
De achterliggende logica: doel-middel ontwarring
Uiteindelijke
doel:
Betere
differentiatie
Resultaat:
Potentie van
leerlingen
benut
Een effect:
Minder
afstroom
Middel:
Leerling op
de juiste plek
Interventies:
- Instroomniveau
- Profielkeuze
Middel:
Leerling goed
ondersteunen
Interventies:
- Extra begeleiding
- Docenten van
elkaar laten leren
=
⊃
I
II
III
IV
4
Copyr
ight
© 2
014 b
y T
he B
osto
n C
onsultin
g G
roup,
Inc.
All
rights
reserv
ed.
Opbouw van de presentatie
Analyse
Uitkomst analyse op
basis van data uit
Magister
Discussie
Voorgestelde actie(s) op
basis van analyses
Slechts drie analyses
Eindeloos meer mogelijk!
Volgende Analyse
Etc.
5
Copyr
ight
© 2
014 b
y T
he B
osto
n C
onsultin
g G
roup,
Inc.
All
rights
reserv
ed.
Agenda
Leerlingen op de juiste plek krijgen
• Passende instroomniveau kiezen
• Passende profiel (helpen) selecteren
Leerlingen goed ondersteunen
• Vroegtijdig risicogroep ondersteunen
• Docenten van elkaar laten leren
Zo kunt u dit toepassen
Appendix: overzicht eerste analyses
6
Copyr
ight
© 2
014 b
y T
he B
osto
n C
onsultin
g G
roup,
Inc.
All
rights
reserv
ed.
Cito of basisschooladvies?
BasisschooladviesCito
0
500
1.000
1.500
Aantal leerlingen
79%
21%
20%
Doorstroom
Afstroom
‘Boven' adviesOp advies
80%
0
500
1.000
1.500
Aantal leerlingen
18%
76%
82%
Doorstroom
Afstroom
‘Boven’ adviesOp advies
24%
I
7
Copyr
ight
© 2
014 b
y T
he B
osto
n C
onsultin
g G
roup,
Inc.
All
rights
reserv
ed.
Ter discussie:
Op niveau volgens basisschooladvies indelen, want…
• 1,5 keer kleinere kans op afstroom
Boven niveau volgens basisschooladvies indelen, want…
• 3 van de 4 haalt het!
Cito blijven volgen, want…
• Objectiever en klein verschil
Hoe voorkom je tweede orde effect?
• Gaan basisscholen advies aanpassen?
• Feedback-loop naar basisscholen inbouwen?
I
8
Copyr
ight
© 2
014 b
y T
he B
osto
n C
onsultin
g G
roup,
Inc.
All
rights
reserv
ed.
Is NT het makkelijkste profiel?
1 2 3 4 5 6
100
105
95
110
0
Index (cijfer in jaar 1 = 100%)
Leerjaar
NT
NG
EM
CM
100%
1 2 3 4 5
0
95
100
105
NT
Index (cijfer in jaar 1 = 100%)
Leerjaar
CM
EM
NG
100%
HAVO
VWO
0
200
400
600
Aantal leerlingen
NTNGEMCM
17%
48%
13%21%
II
0
100
200
300
Aantal leerlingen
NGEM NT
21%
41%
18%21%
CM
9
Copyr
ight
© 2
014 b
y T
he B
osto
n C
onsultin
g G
roup,
Inc.
All
rights
reserv
ed.
In 1e hebben toekomstige leerlingen zelfs laagste cijfer!
HAVO
VWO
Profiel Leerjaar 1 2 3 4 5
CM 6,95 6,75 6,58 6,21 6,32
EM 6,83 6,67 6,47 6,24 6,28
NG 6,76 6,66 6,58 6,27 6,22
NT 6,70 6,79 6,60 6,37 6,45
Profiel Leerjaar 1 2 3 4 5 6
CM 7,11 7,12 6,69 6,48 6,54 6,39
EM 6,83 6,82 6,63 6,30 6,49 6,45
NG 6,99 6,81 6,65 6,48 6,51 6,41
NT 6,77 7,11 7,00 6,78 6,63 6,72
10
Copyr
ight
© 2
014 b
y T
he B
osto
n C
onsultin
g G
roup,
Inc.
All
rights
reserv
ed.
II
Ter discussie: juiste profiel helpen kiezen
Hypothese: N&T omgeving stimuleert leerlingen
• Is er binnen andere profielen sprake van een andere sfeer?
• Hoe kijken docenten naar de leerlingen?
Kan een school meer leerlingen aansporen om voor N&T te kiezen?
• Bv. leerlingen zonder voorkeur ‘standaard’ naar N&T
• Bv. er op wijzen dat N&T, zeker met economie, meer keuzevrijheid geeft voor studies?
11
Copyr
ight
© 2
014 b
y T
he B
osto
n C
onsultin
g G
roup,
Inc.
All
rights
reserv
ed.
Agenda
Leerlingen op de juiste plek krijgen
• Passende instroomniveau kiezen
• Passende profiel (helpen) selecteren
Leerlingen goed ondersteunen
• Vroegtijdig risicogroep ondersteunen
• Docenten van elkaar laten leren
Zo kunt u dit toepassen
Appendix: overzicht eerste analyses
12
Copyr
ight
© 2
014 b
y T
he B
osto
n C
onsultin
g G
roup,
Inc.
All
rights
reserv
ed.
Sommige vakken voorspellen beter dan andere
Vak Afstroom t/m VWO 4Geen afstroom
Wiskunde
Verschil
...
Biologie
Gemiddeld cijfer eerste jaar leerlingen
Frans
Totaal
7,3
(range: 5,4 – 9,1)
7,2
(range: 4,4 – 9,5)
7,1
(range: 5,2 – 8,9)
...
Gem.: 7,4
(range: 7,1 – 7,7)
6,0
(range: 4,4 – 8,7)
5,9
(range: 4,1 – 8,6)
5,8
(range: 4,0 – 8,5)
...
Gem.: 6,7
(range: 5,6 – 7,3)
1,3
1,3
1,3
...
Gem.: 0,7
Informatica7,6
(range: 6,4 – 8,7)
7,3
(range: 6,7 – 8,2)
0,3
Lichamelijke
opvoeding7,2
(range: 6,3 – 8,1)
7,1
(range: 6,6 – 7,8)
0,1
Handvaardigheid7,5
(range: 5,6 – 9,0)
7,3
(range: 5,7 – 8,2)
0,1
13
Copyr
ight
© 2
014 b
y T
he B
osto
n C
onsultin
g G
roup,
Inc.
All
rights
reserv
ed.
III
Ter discussie: vroegtijdig ingrijpen
Kan een school leerlingen tijdig en effectief begeleiden?
• Welke mogelijkheden zijn er om leerlingen (individueel) te begeleiden?
• Kan de begeleiding één van de drie benodigde vaardigheden verbeteren?
Hoe voorkom je missers?
• Liever ‘false negatives’ dan ‘false positives’
14
Copyr
ight
© 2
014 b
y T
he B
osto
n C
onsultin
g G
roup,
Inc.
All
rights
reserv
ed.
Met welke leerlingen werkt welke docent
het best?
Goed met alle leerlingen
Goed met matige
leerlingenGoed met sterke
leerlingen
Verschil in cijfer t.o.v. voorgaand jaar
Type leerling
Gem. >7Gem
>6, <7
Gem. <6
Type leerling
Gem. >7Gem
>6, <7
Gem. <6
Verschil in cijfer t.o.v. voorgaand jaar Verschil in cijfer t.o.v. voorgaand jaar
Type leerling
Gem. >7Gem
>6, <7
Gem. <6
Type
docent
Effect
op types
leerling
IV
Hypothese:
didactisch
sterke docent
Hypothese:
vakinhoudelijk
sterke docent
15
Copyr
ight
© 2
014 b
y T
he B
osto
n C
onsultin
g G
roup,
Inc.
All
rights
reserv
ed.
IV
Ter discussie: omgaan met verschillende type docenten
Kunnen alle docenten goed worden met elke leerling?
• Hoe worden docenten opgeleid, nadat ze bij een school zijn gestart?
• Staan docenten open voor meer samenwerking om van elkaar te leren?
Kan een school leerlingen en docenten beter aan elkaar koppelen?
• Bv. klassen indelen op niveau en de 'juiste' docent voor de 'juiste' klas te zetten?
• Bv. verschillende docenten voor één klas te zetten?
• Bv. mentoren geen gewone klas te geven, maar een 'mentorklas' met 1 type leerling?
• Bv. leerlingen individueel begeleiden door het juiste type docent?
16
Copyr
ight
© 2
014 b
y T
he B
osto
n C
onsultin
g G
roup,
Inc.
All
rights
reserv
ed.
Agenda
Leerlingen op de juiste plek krijgen
• Passende instroomniveau kiezen
• Passende profiel (helpen) selecteren
Leerlingen goed ondersteunen
• Vroegtijdig risicogroep ondersteunen
• Docenten van elkaar laten leren
Zo kunt u dit toepassen
Appendix: overzicht eerste analyses
17
Copyr
ight
© 2
014 b
y T
he B
osto
n C
onsultin
g G
roup,
Inc.
All
rights
reserv
ed.
Hoe u inzichten uit data kunt halen
Deze analyses kunnen binnen 2 uur voor u worden uitgevoerd
• Benodigdheden: mijn Excel sheets + Magister-gebruiker
Meer algemeen: wat is er voor nodig
• Uzelf de vraag stellen ‘wat zou ik willen weten’?
• Een behulpzame ‘nerd’ benaderen
• Harde data als puzzelstukje zien, niet als heilige graal
Ter overweging: toekomstmuziek
• Integratie in een softwarepakket?
• Data-analyse als standaard docenten-vaardigheid?
18
Copyr
ight
© 2
014 b
y T
he B
osto
n C
onsultin
g G
roup,
Inc.
All
rights
reserv
ed.
Agenda
Leerlingen op de juiste plek krijgen
• Passende instroomniveau kiezen
• Passende profiel (helpen) selecteren
Leerlingen goed ondersteunen
• Vroegtijdig risicogroep ondersteunen
• Docenten van elkaar laten leren
Zo kunt u dit toepassen
Appendix: overzicht andere analyses
19
Copyr
ight
© 2
014 b
y T
he B
osto
n C
onsultin
g G
roup,
Inc.
All
rights
reserv
ed.
Een aantal van de voorgestelde analyses (I)
Doel Hypothese
Wiskundecijfer is een betere
voorspeller van afstroom dan
andere vakken
Meer jongens stromen af dan
meisjes
Jongens stromen af o.b.v. lage
cijfers/ tekortpunten voor
andere vakken dan meisjes
Verzuim tijdens lessen is een
voorspeller van afstroom
Aantal verwijderingen per jaar
is een voorspeller van afstroom
Initiële analyse
Gemiddelde cijfers in 1e jaar
per vak voor afgestroomde/
niet-afgestroomde ll-en
% afstroom voor jongens vs
meisjes
%'s van vakken met laagste
cijfer bij afstroom voor
jongens/ meisjes
Aantal verzuim voor
afstroom/niet-afstroom
Aantal verwijderingen voor
afstroom/niet-afstroom
Priori
-teit?
Ja?
Ja?
Ja?
Nee?
Nee?
Afstroom
minima-
liseren
Potentieel
benutten
Nut
Focus op cijfers van wiskunde
(of ander vak) voor bepalen
interventies
Bepalen of meer aandacht aan
J/M gegeven dient te worden
Extra focus op bepaalde
vakken voor jongens/meisjes
Extra aandacht voor leerlingen
met veel verzuim
Extra aandacht voor leerlingen
met veel verwijderingen
Ervaren leraren hebben meer
toegevoegde waarde
Kwartielenanalyse: relatief
rankingverschil van leer-
lingen per leraar (verband
met jaren leservaring)
Ja? Bijv.: onervaren docenten
extra laten coachen door
ervaren docenten
Initiële analyses hebben
tot doel vervolganalyses
en prioriteiten te bepalen
Niet voldoende data beschikbaar
20
Copyr
ight
© 2
014 b
y T
he B
osto
n C
onsultin
g G
roup,
Inc.
All
rights
reserv
ed.
Een aantal van de voorgestelde analyses (II)
Doel Hypothese
Cito-score is een voor-
speller van doorstroom
Cito-score is een betere
voorspeller van
schoolsucces dan
basisschooladvies
Initiële analyse
Gemiddelde Cito-scores
doorstroom/niet-doorstroom
Telling diploma/afstroom
voor juistheid Cito-score vs
basisschooladvies
Priori-
teit
Nee?
Nee?
Elke
leerling
op de
juiste
plek
Betere
aanslui-
ting met
vervolg-
onderwijs
Nut
Indicatie hoe erg gekeken dient
te worden naar Cito-scores
Indicatie of meer gekeken dient
te worden naar Cito-scores of
basisschooladvies voor bepalen
instroom per schoolniveau
Initiële analyses hebben
tot doel vervolganalyses
en prioriteiten te bepalen
Streven
naar Fase
4 Ontwik-
kelmodel
Beter georganiseerde
secties scoren relatief
beter
Relatieve gem. CE-cijfers
per vak vs rest van NL –
koppeling met kwalitatieve
beoordeling van hoeveel-
heid kennisdeling per sectie
Nee?Bijv.: minder georganiseerde
secties beter organiseren
(samen leerlingdata analyseren,
groepsplannen maken, etc.)
Potentieel
benutten
Zesjescultuur is vooral een
jongensprobleem
% jongens versus meisjes
met net een voldoende
Nee?Identificeren van leerlingen die
extra uitgedaagd dienen te
worden
Er is een correlatie tussen
succes in vervolgonderwijs
en cijfers voor gerelateerde
vakken op VO
Correlaties cijfers
vervolgonderwijs en
gerelateerde vakken op VO
Nee?Leerlingen met lage cijfers voor
gerelateerde VO-vakken extra
goed begeleiden naar
vervolgonderwijs
Thank you
bcg.com | bcgperspectives.com