pragodata consulting, s.r.o
DESCRIPTION
Testování a jistota, nové chování testů Moodle 2.1 Bohumil Havel. PragoData Consulting, s.r.o. Hlavní změny ve verzi 2. 1. Vylepšení Navigace a bloky Souborový systém Motivy Studijní materiály Workshop Testy Administrace Import kurzů M 1.9. Nové funkce Repozitáře a portfolia - PowerPoint PPT PresentationTRANSCRIPT
![Page 1: PragoData Consulting, s.r.o](https://reader035.vdocuments.pub/reader035/viewer/2022062217/568158f4550346895dc62e7a/html5/thumbnails/1.jpg)
PragoData Consulting, s.r.o.
Testování a jistota,
nové chování testů Moodle 2.1
Bohumil Havel
PragoData Consulting, s.r.o.
![Page 2: PragoData Consulting, s.r.o](https://reader035.vdocuments.pub/reader035/viewer/2022062217/568158f4550346895dc62e7a/html5/thumbnails/2.jpg)
PragoData Consulting, s.r.o.
Hlavní změny ve verzi 2.1
Vylepšení• Navigace a bloky• Souborový systém• Motivy• Studijní materiály• Workshop• Testy• Administrace • Import kurzů M 1.9
Nové funkce• Repozitáře a portfolia• Podmíněné aktivity• Globální skupiny• Komentáře• Web services• Community Hubs• Podpora mobilních
zařízení
S využitím materiálů Davida Mudráka
PragoData Consulting, s.r.o.
![Page 3: PragoData Consulting, s.r.o](https://reader035.vdocuments.pub/reader035/viewer/2022062217/568158f4550346895dc62e7a/html5/thumbnails/3.jpg)
PragoData Consulting, s.r.o.
Změny testů 2.0 a 2.1
• Navigace v testu, signalizace, vlaječky s stavem
• Uživatelské přenastavení• Skupinová přenastavení• Rozlišení skupin se speciálními
vzdělávacími potřebami2.1• Rozšířené vlastnosti Chování testů• Měření „jistoty“ odpovědi
PragoData Consulting, s.r.o.
![Page 4: PragoData Consulting, s.r.o](https://reader035.vdocuments.pub/reader035/viewer/2022062217/568158f4550346895dc62e7a/html5/thumbnails/4.jpg)
PragoData Consulting, s.r.o.
Navigace
• Navigace v testu, signalizace, vlaječky se stavem
PragoData Consulting, s.r.o.
![Page 5: PragoData Consulting, s.r.o](https://reader035.vdocuments.pub/reader035/viewer/2022062217/568158f4550346895dc62e7a/html5/thumbnails/5.jpg)
PragoData Consulting, s.r.o.
Změny testů 2.0 a 2.1
• Navigace v testu, signalizace, vlaječky s stavem
• Uživatelské přenastavení• Skupinová přenastavení• Rozlišení skupin se speciálními
vzdělávacími potřebami2.1• Rozšířené vlastnosti Chování testů• Měření „jistoty“ odpovědi
PragoData Consulting, s.r.o.
![Page 6: PragoData Consulting, s.r.o](https://reader035.vdocuments.pub/reader035/viewer/2022062217/568158f4550346895dc62e7a/html5/thumbnails/6.jpg)
PragoData Consulting, s.r.o.
Přenastavení
PragoData Consulting, s.r.o.
![Page 7: PragoData Consulting, s.r.o](https://reader035.vdocuments.pub/reader035/viewer/2022062217/568158f4550346895dc62e7a/html5/thumbnails/7.jpg)
PragoData Consulting, s.r.o.
Chování testů
• Adaptivní režim• Adaptivní režim (bez penalizace)• Odložený výsledek s mírou jistoty• Odložený výsledek• Okamžitý výsledek s mírou jistoty• Okamžitý výsledek• Interaktivní s více pokusy• Ruční známkování
PragoData Consulting, s.r.o.
![Page 8: PragoData Consulting, s.r.o](https://reader035.vdocuments.pub/reader035/viewer/2022062217/568158f4550346895dc62e7a/html5/thumbnails/8.jpg)
PragoData Consulting, s.r.o.
Jistota a testy
• Co je míra jistoty (nejistoty, důvěry)
• Zavedení záporného bodování úloh• Penalizace chybných odpovědí• Snaha odstranit hádání (náhodnost)
PragoData Consulting, s.r.o.
![Page 9: PragoData Consulting, s.r.o](https://reader035.vdocuments.pub/reader035/viewer/2022062217/568158f4550346895dc62e7a/html5/thumbnails/9.jpg)
PragoData Consulting, s.r.o.
Jistota a výstup
• Výchozí tabulka dle jistoty
Úroveň jistoty C=3 (vysoká)
C=2 (střední)
C=1 (nízká) Bez odpovědi
Bodování správných odpovědí 3 2 1 0
Bodování chybných odpovědí -6 -2 0 0
PragoData Consulting, s.r.o.
![Page 10: PragoData Consulting, s.r.o](https://reader035.vdocuments.pub/reader035/viewer/2022062217/568158f4550346895dc62e7a/html5/thumbnails/10.jpg)
PragoData Consulting, s.r.o.
Jistota a výstup
• Graf dle jistoty
PragoData Consulting, s.r.o.
![Page 11: PragoData Consulting, s.r.o](https://reader035.vdocuments.pub/reader035/viewer/2022062217/568158f4550346895dc62e7a/html5/thumbnails/11.jpg)
PragoData Consulting, s.r.o.
Příklad - model
• Záporné body snižují celkový počet bodů, ale zvětšují rozdíl mezi těmi, kdo umí a těmi, kdo neumí.
• Příklad je modifikace ze SCIO [2].
25 úloh výběr 1 ze 415 úloh - student zná odpovědi6 úloh - zná nesprávnou odpověď (rozezná distraktor)4 úlohy hádá
PragoData Consulting, s.r.o.
![Page 12: PragoData Consulting, s.r.o](https://reader035.vdocuments.pub/reader035/viewer/2022062217/568158f4550346895dc62e7a/html5/thumbnails/12.jpg)
PragoData Consulting, s.r.o.
Příklad – běžná varianta
• Zisk studenta je 54 bodů
skore Počet Kladné Celkem Zasloužené 15 15 x 3 45 Napůl zasloužené 6 (6 x 1/3 )x3 6 Nezasloužené 4 4x 1/4 x 3 3Celkem bodů 54Maximum 75Výsledek 72%Dolní mez 0Horní mez 75
PragoData Consulting, s.r.o.
![Page 13: PragoData Consulting, s.r.o](https://reader035.vdocuments.pub/reader035/viewer/2022062217/568158f4550346895dc62e7a/html5/thumbnails/13.jpg)
PragoData Consulting, s.r.o.
Příklad – varianta CBM
• Zisk studenta je 12 bodů (je to moc nebo málo?)
skore Počet Varianty Celkem Zasloužené 15 15 x 3 45Napůl zasloužené 6 (6 x 1/3 )x3 6
Penalizace 4x -6 -24Nezasloužené 4 4x 1/4 x 3 3
Penalizace 3x -6 -18Celkem bodů 12Maximum 75Výsledek 72%Dolní mez -150Horní mez 75
PragoData Consulting, s.r.o.
![Page 14: PragoData Consulting, s.r.o](https://reader035.vdocuments.pub/reader035/viewer/2022062217/568158f4550346895dc62e7a/html5/thumbnails/14.jpg)
PragoData Consulting, s.r.o.
Příklad – varianta „nejistý“
• Zisk studenta je 28 bodů
skore Počet Varianty Celkem Zasloužené 15 10x2 + 5x1 25Napůl zasloužené 6 (6 x 1/3 )x1 2
Penalizace 4x-0 0Nezasloužené 4 4x 1/4 x 1 1
Penalizace 3x -0 0Celkem bodů 28Maximum 75Výsledek 79%Dolní mez -150Horní mez 75
PragoData Consulting, s.r.o.
![Page 15: PragoData Consulting, s.r.o](https://reader035.vdocuments.pub/reader035/viewer/2022062217/568158f4550346895dc62e7a/html5/thumbnails/15.jpg)
PragoData Consulting, s.r.o.
Co doporučují jiní
• Záporné body nejsou doporučovány• Pořadí studentů se nemění• Odráží osobnost studenta (riskování)• Není považováno za férové• Nutno dobře vysvětlit důsledky
???
PragoData Consulting, s.r.o.
![Page 16: PragoData Consulting, s.r.o](https://reader035.vdocuments.pub/reader035/viewer/2022062217/568158f4550346895dc62e7a/html5/thumbnails/16.jpg)
Jistota v testu
PragoData Consulting, s.r.o.
![Page 17: PragoData Consulting, s.r.o](https://reader035.vdocuments.pub/reader035/viewer/2022062217/568158f4550346895dc62e7a/html5/thumbnails/17.jpg)
Výsledky testerů
• Záporné výsledky jsou zapsány jako 0
PragoData Consulting, s.r.o.
![Page 18: PragoData Consulting, s.r.o](https://reader035.vdocuments.pub/reader035/viewer/2022062217/568158f4550346895dc62e7a/html5/thumbnails/18.jpg)
PODĚKOVÁNÍ
Na závěr bych chtěl poděkovat svému testovacímu týmu za spolupráci.
PragoData Consulting, s.r.o.
![Page 19: PragoData Consulting, s.r.o](https://reader035.vdocuments.pub/reader035/viewer/2022062217/568158f4550346895dc62e7a/html5/thumbnails/19.jpg)
Děkuji za pozornost.
www.moodlecon.cz
www.moodlemoot.cz
PragoData Consulting, s.r.o.PragoData Consulting, s.r.o.