metodološke značilnosti mednarodnih raziskav
DESCRIPTION
A. B. C. Metodološke značilnosti mednarodnih raziskav. Posvet: Mednarodne raziskave znanja učencev in dejavnosti za izboljšanje pismenosti učencev. Mojca Štraus , Pedagoški inštitut. Organizator: Pedagoški inštitut 7. junij 2011. - PowerPoint PPT PresentationTRANSCRIPT
Metodološke značilnosti Metodološke značilnosti mednarodnih raziskavmednarodnih raziskav
Mojca Štraus, Pedagoški inštitut
Raziskava PISA 2009 je del aktivnosti projekta 'Ugotavljanje in zagotavljanje kakovosti v izobraževanju in usposabljanju – Evalvacija vzgoje in izobraževanja na podlagi mednarodno priznanih metodologij‘ , ki ga omogoča sofinanciranje Evropskega socialnega sklada Evropske unije in Ministrstva za šolstvo in šport.
Ljubljana, 7. 6. 2011 Ljubljana, 7. 6. 2011
CBA
Posvet: Mednarodne raziskave znanja učencev in dejavnosti za izboljšanje pismenosti učencev
Organizator: Pedagoški inštitut7. junij 2011
Mednarodne raziskaveMednarodne raziskave
PISAPISA 2012, 2009, 2006, 2003, 2000 2012, 2009, 2006, 2003, 2000
BRA, MAT, NAR; 15-letniki (1.l SŠ)BRA, MAT, NAR; 15-letniki (1.l SŠ)
TIMSSTIMSS 2011, 2007, …1995, TIMSS-Adv 2008 2011, 2007, …1995, TIMSS-Adv 2008
MAT, NAR; 4.r in 8.r OŠ MAT, NAR; 4.r in 8.r OŠ MAT, NAR 4.l MAT, NAR 4.l
spl.maturaspl.matura
PIRLSPIRLS 2011, 2006, 2001 2011, 2006, 2001
BRA; 4.r OŠBRA; 4.r OŠ
ICCS 2009: ICCS 2009: državljanska vzgoja, 8.r in 9.r.državljanska vzgoja, 8.r in 9.r.
TALIS 2008: TALIS 2008: učitelji 7.-9.r OŠ učitelji 7.-9.r OŠ
ESLCESLC 2011: 2011: ANG, NEM 9.r OŠANG, NEM 9.r OŠ
SITES 2006, ICILS 2013: SITES 2006, ICILS 2013: IKT; 8.rIKT; 8.r
CBA
22
Populacije učencevPopulacije učencev
33
PISAPISA TIMSSTIMSS PIRLSPIRLS ICCSICCS 15-letniki15-letniki 4. razred 4. razred 4. 4.
razred razred 8. in 9. 8. in 9.
razred razred (večinoma (večinoma dijaki 1. dijaki 1. letnikov letnikov srednjih šol)srednjih šol)
8. razred8. razred
TIMSS za TIMSS za maturante, maturante, 2008: zadnji 2008: zadnji letnik letnik gimnazijskih gimnazijskih programovprogramov
CBA
Ciklično zbiranje podatkovCiklično zbiranje podatkov
44
PISAPISA TIMSSTIMSS PIRLSPIRLS ICCSICCS2000: branje2000: branje2003: mat2003: mat2006: nar2006: nar2009: branje2009: branje2012: mat2012: mat……
1995 1995 mat+narmat+nar 1999 1999 mat+narmat+nar 2003 2003 mat+narmat+nar 2007 2007 mat+narmat+nar 2011 2011 mat+narmat+nar……
(1991 RL)(1991 RL) 2001 2001 branjebranje 2006 2006 branjebranje 2011 2011 branjebranje……
19991999 2009 2009 državljanskdržavljanska vzgojaa vzgoja
CBA
55
Instrumenti za zbiranje Instrumenti za zbiranje podatkovpodatkov
Naloge na merjenem področju
v različnih delovnih zvezkih – široko pokritje področja
na računalnikih
Vprašalniki o spremljajočih dejavnikih za šolo (ravnatelja)
za učenca
za učitelje
za starše
za tehnično osebje (uporaba računalnikov)
CBA
66
Vzorčenje šol in učencevVzorčenje šol in učencevDvostopenjskoDvostopenjsko vzorčenje vzorčenje
1. stopnja1. stopnja: vzorčenje šol: vzorčenje šol
min št. šol je običajno 150min št. šol je običajno 150
2. stopnja2. stopnja: vzorčenje učencev na izbranih : vzorčenje učencev na izbranih šolahšolah
določeno število učencev ne glede na razred (PISA)določeno število učencev ne glede na razred (PISA)
celoten oddelek ali več oddelkov učencev celoten oddelek ali več oddelkov učencev izbranega razreda (TIMSS, PIRLSizbranega razreda (TIMSS, PIRLS, ICCS, ICCS))
CBA
Verjetnostni model sklepanja o znanju
CBA
77
Lestvica dosežkov
1. naloga
Učenec Az nizkimi
kompetencami
Učenec B s srednjimi
kompetencami
Učenec C z visokimi
kompetencami
Naloge z razmeroma
nizko težavnostjo
Naloge s srednjo težavnostjo
Naloge z razmeroma
visoko težavnostjo
2. naloga 3. naloga 4. naloga 5. naloga 6. naloga
Pričakujemo, da učenec A na 2. do 6. nalogo ne bo odgovoril pravilno in da je tudi zelo malo verjetno, da bo odgovoril pravilno na 1. nalogo.
Pričakujemo, da bo učenec B pravilno odgovoril na 1. do 3. nalogo, manj verjetno bo odgovoril pravilno na 4. nalogo, na 5. in 6. nalogo pa najverjetneje ne bo odgovoril pravilno.
Pričakujemo, da bo učenec C pravilno odgovoril na 1. do 5. nalogo in verjetno tudi na 6. nalogo.
CA B
88
Lestvica dosežkov
pod 1. ravnjo
1. raven 2. raven 3. raven 4. raven 5. raven 6. raven
334,9 točke
409,5 točke
484,1 točke
558,7 točke
633,3 točke
707,9 točke
KISLI DEŽ5.2 vprašanje (717)(pravilen odgovor)
GENSKO SPREMENJENA HRANA
3. vprašanje (421)
ZAŠČITA PRED SONCEM
4. vprašanje (574)2. vprašanje (588)
OBLAČILA1. vprašanje (567)
KISLI DEŽ5.1 vprašanje (513)
(delni odgovor)
ZAŠČITA PRED SONCEM
3. vprašanje (499)
VELIKI KANJON7. vprašanje (458)
UČINEK TOPLE GREDE
5. vprašanje (709)(pravilen odgovor)
KISLI DEŽ2. vprašanje (506)
TELOVADBA1. vprašanje (545)
TELOVADBA5. vprašanje (583)KISLI DEŽ
3. vprašanje (460)
UČINEK TOPLE GREDE
3. vprašanje (529)
UČINEK TOPLE GREDE
4.1 vprašanje (568)(delni odgovor)
ZAŠČITA PRED SONCEM
5.2 vprašanje (629)(pravilen odgovor)
5.1 vprašanje (616)(delni odgovor)
UČINEK TOPLE GREDE
4.2 vprašanje (659)(pravilen odgovor)
OBLAČILA2. vprašanje (399)
TELOVADBA3. vprašanje (386)
VELIKI KANJON5. vprašanje (411)
MARY MONTAGU2. vprašanje (436)3. vprašanje (431)
VELIKI KANJON3. vprašanje (451)
MARY MONTAGU4. vprašanje (507)
Verjetnostni model sklepanja o znanju
Naravoslovne naloge PISA 2006
CBA
Učenci z dosežki na 5. ravni lahko prepoznavajo naravoslovnoznanstvene komponente različnih
zapletenih življenjskih situacij. V njih uporabljajo tako naravoslovne pojme kot znanje o naravoslovnih znanostih. Lahko primerjajo, izbirajo in vrednotijo
ustrezne naravoslovnoznanstvene dokaze, podatke in preverjena dejstva za odzivanje v življenjskih
situacijah. Učenci z dosežki na tej ravni uporabljajo visoko razvite sposobnosti raziskovanja, ustrezno
povezujejo svoje znanje in prinašajo kritične vpoglede v te situacije. Temelječ na kritični analizi
dokazov, podatkov in preverjenih dejstev lahko sestavijo razlage ter utemeljitve. 99
Lestvica dosežkov
pod 1. ravnjo
1. raven 2. raven 3. raven 4. raven 5. raven 6. raven
334,9 točke
409,5 točke
484,1 točke
558,7 točke
633,3 točke
707,9 točke
Učenci z dosežki na 1. ravni imajo zelo omejeno
naravoslovno znanje, ki ga uporabljajo le v maloštevilnih
situacijah, ki so jim blizu. Lahko ponudijo znanstvene razlage, ki so očitne in ki
neposredno izhajajo iz danih podatkov oziroma dokazov.
Učenci z dosežki na 6. ravni zanesljivo prepoznavajo, razlagajo in uporabljajo naravoslovno znanje ter znanje o naravoslovnih znanostih v različnih zapletenih življenjskih
situacijah. Lahko povezujejo različne vire informacij in razlag ter podatke iz teh virov uporabljajo za utemeljevanje
svojih odločitev. Jasno in zanesljivo izkazujejo napredno naravoslovnoznanstveno mišljenje ter utemeljevanje in so
pripravljeni svoje razumevanje uporabiti za podporo rešitvam v novih naravoslovnoznanstvenih ter tehnoloških situacijah. Učenci z dosežki na tej ravni lahko uporabljajo naravoslovno znanje in izpeljujejo utemeljitve za podporo priporočilom in odločitvam, ki so osredotočene na osebne,
družbene in globalne situacije.
Učenci z dosežki na 4. ravni lahko učinkovito delujejo v situacijah in pri
vprašanjih, ki lahko vključujejo pojave, pri katerih morajo sklepati o vlogi
naravoslovnih znanosti ter tehnologije. Lahko izbirajo in združujejo razlage iz različnih naravoslovnih ali tehnoloških
disciplin ter te razlage neposredno povezujejo z življenjskimi situacijami. Učenci z dosežki na tej ravni lahko
razmišljajo o svojih dejanjih in sporočajo svoje odločitve z uporabo naravoslovnega
znanja, dokazov ter podatkov.
Učenci z dosežki na 2. ravni imajo zadovoljivo naravoslovno
znanje, da lahko ponudijo mogoče razlage v kontekstih, ki so jim blizu ali izpeljejo sklepe iz
preprostih raziskav. Lahko neposredno utemeljujejo in
dobesedno interpretirajo rezultate
naravoslovnoznanstvenih raziskav ali reševanja tehnoloških
problemov.
Učenci z dosežki na 3. ravni lahko prepoznavajo jasno opisana
naravoslovna vprašanja v različnih kontekstih. Lahko izbirajo dejstva in
znanje za razlage pojavov ter uporabijo preproste modele ali raziskovalne pristope. Učenci z
dosežki na tej ravni lahko interpretirajo naravoslovne pojme iz različnih disciplin in jih neposredno uporabljajo. Z uporabo podatkov lahko sestavijo kratke izjave in sprejmejo odločitev na podlagi
naravoslovnega znanja.
OECD SVN
94,8 %97,2 %
80,8 %86,1 %
56,7 %63,0 %
29,3 %35,4 %
9,0 %12,9 %
1,3 %2,2 %
Verjetnostni model sklepanja o znanju
Območja dosežkov pri NPZObmočja dosežkov pri NPZ CBA
1010
Kaj vse gre lahko narobe?Kaj vse gre lahko narobe?
VzorčenjeVzorčenje
Odzivnost vzorca Odzivnost vzorca
Sestava instrumentov, primernost vprašanjSestava instrumentov, primernost vprašanj
Izvedba, motivacija odgovarjajočihIzvedba, motivacija odgovarjajočih
Tehnična obdelava podatkovTehnična obdelava podatkov
Statistične analize: Statistične analize: povprečje je le indikator (kot povprečje je le indikator (kot
lučke na armaturni plošči avtomobila)lučke na armaturni plošči avtomobila)
Težko je sklepati o vzročnosti povezav; Težko je sklepati o vzročnosti povezav;
vzroke za probleme in ukrepe za rešitve je vzroke za probleme in ukrepe za rešitve je
treba iskati v širšem kontekstu treba iskati v širšem kontekstu (nižji dosežki ne (nižji dosežki ne
pomenijo nujno slabšega dela šol in učiteljev)pomenijo nujno slabšega dela šol in učiteljev)
CBA
1111