Van papieren naar digitale tentamens Angela Peters, stafmedewerker toetsing, IOO 16 oktober 2014
1.Waarom digitaal toetsen? 2.Stand van zaken 3.Voorbeeldtoets 4.Toekomst
Waarom digitaal toetsen? Meer mogelijkheden: diverse vraagvormen & multimedia beter aansluiten op leerdoelen & authentieke situaties
Meerkeuzevraag (met plaatjes)
Matchingvraag
Sleepvraag
Invulvraag
Multiple-responsevraag
Waarom digitaal toetsen? Belangrijkst: kan de begripsvaliditeit verhogen Daarnaast: - ‘met de tijd mee’ / digitalisering - snelle verwerking resultaten - directe feedback student - geen papier meer nodig
Stand van zaken 2013 – 2014jaar – 2015jaar 1 + jaar – 2016jaar 1 + jaar 2 + jaar 3
Aanpak Voorbereiding: Semesteroverleg en docentbijeenkomsten Voorbeeldvragen Scoringssystematiek: dichotoom Analysetool ontwikkeld door VU Ontwikkeling toets: Ondersteuning (advies vraagvorm, bewerken afbeeldingen, etc.) 20%-59% nieuwe vraagvorm Afname: In TenT en in computerruimte
Toetsresultaten -Slagingspercentages wisselend als normaal, geen afwijkingen (66-%-88%) -Betrouwbaarheid (KR-20) iets hoger (0,58-0,78) -Verschil meerkeuze en andere vraagvormen andere vraagvormen soms iets slechter gemaakt, maar hoger onderscheidend vermogen (Rir-waarde)
Cursusevaluaties ‘De toets sloot goed aan op de inhoud van de cursus.’ ‘De toetsvragen vormden een goede graadmeter van mijn kennis.’ ‘De toetsvragen vormden een goede graadmeter van mijn begrip.’ 5 punts-schaal 3 cursussen met gemiddeld ≥0,4 hoger dan gemiddelde voorgaande 3 jaren 1 cursus met gemiddeld ≥0,4 lager
Ervaringen Ontwikkeling toets: Docenten kunnen goed overweg met nieuwe vraagvormen Cuco’s enthousiast over nieuwe mogelijkheden Aandachtspunt: aanlevertermijn Afname toets: Vrijwel vlekkeloos Aandachtspunt: capaciteit TenT Beoordeling en verwerking: Analysetool werkt prima Aandachtspunt: uitleg analysetool + resultaten blijven monitoren
Voorbeeldtoets Link Blackboard-module Huid en afweer
Open vragen (Leren Dokteren) Essaytoets (Praktijkcursus Gezondheidszorg) ?? Andere toetsvormen
Toekomst: audio en video Voor toepassingsgerichte vragen Authentieke situaties, zoals: –Anamnese –Lichamelijk onderzoek –Aanvullend onderzoek –Medische gespreksvoering Maar ook bijvoorbeeld animaties van fysiologische & biochemische processen
Toekomst: nieuwe versie QMP Highlight en strike-through
Vragen? Angela Peters Monique DiksGezamenlijk adres: 20
Toetsresultaten
Mogelijkheden -Meerkeuzevraag -Sleepvraag -Invulvraag -Matching -Ranking -Matrixvraag -Multiple response -Afbeeldingen (foto’s, tekeningen, schema’s) -Audio -Video