Digitaal Toetsen/Digitale Toetszaal

Digitaal Toetsen/Digitale Toetszaal
silvester draaijer

Een korte persoonlijke geschiedenis
ir. Industrieel Ontwerpen Eigen ontwerpbureau & Docent op de HHS bij IPO Een digitale vragenbank gemaakt met collega Eerste digitale beeldschermtoetsen zelf afgenomen Mechanica tentamens Tempo+/Presto+ van de TU-Delft Windows Applicatie Samen met Harry van der Pas en collega’s Alle valkuilen zelf meegemaakt Daarna afgedwaald … Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Digitaal toetsen bij de VU
Questionmark Perception Tests ~ /jr Blackboard Tests ~ /jr Digitale Toetszaal ~ – /jr Turnitin ~2300/mnd, ~520 docenten SURF Special Interest Group Digitaal Toetsen: Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Waarom hou ik van Digitaal Toetsen?
Toetsen heeft een directe impact op leren en studeren (Snyder 1971) ICT biedt nieuwe mogelijkheden ICT leidt tot veel problemen die er om roepen om opgelost te worden Het is complex, ill defined Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Welke valkuilen zijn er zoal?
Het kost meer tijd dan gedacht Het kost meer dan gedacht Er zijn irreeele verwachtingen (rendementen omhoog? Eerst vragenbanken maken dan pas denken aan toetsen afnemen?) De servers gaan down Studenten kunnen afkijken Studenten klagen dat het te warm is en dat het kijken op het scherm vermoeiend is Studenten kunnen niet inloggen Collega’s klagen dat het surveilleren zoveel tijd kost Resultaten raken kwijt De uitvoering zorgt ervoor dat meer studenten zakken dan nodig Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Technology Acceptance
Teachers regard online testing as useful, but find it difficult to realize it technically and logistically (Schoonenboom, 2012) Schoonenboom, J. (2012). The use of technology as one of the possible means of performing instructor tasks: Putting technology acceptance in context. Computers & Education, 59(4), 1309–1316. doi: /j.compedu Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Middelen Visie Geld Infrastructuur Menskracht Organisatiekracht Kennis
Communicatie en verwachtingsmanagement Draaijer, S., Gastel, L. V., Peeters, V., Frinking, P., & Reumer, C. (2004). Flexibilisering van Toetsing. (No. 204A.PROD.082.). Utrecht: Digitale Universiteit. Retrieved from Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Institutional take-up of CAA
Warburton (2009) Warburton, B. (2009). Quick win or slow burn: modelling UK HE CAA uptake. Assessment & Evaluation in Higher Education, 34(3), 257–272. doi: / Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Institutional take-up of CAA
Warburton (2009) Warburton, B. (2009). Quick win or slow burn: modelling UK HE CAA uptake. Assessment & Evaluation in Higher Education, 34(3), 257–272. doi: / Positive drivers Negative drivers Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Toetsings utopie? Vergezichten rondom (digitaal) toetsen gaan verder dan mijn horizon … Twee tegengestelde ontwikkelingen Divergentie: Wiki’s, Games, Virtual Worlds, Websites, Group Work, Simulation, Authentic tasks, Portfolio’s, Badges etc. Convergentie: Legal Defensibility, Accreditation, Comply or Explain, Numerous Boards, Reliability … See presentations of Masterclass New Forms of Assessment by Herco Fonteijn, FPN, UM Crisp, G. T. (2007). The e-assessment handbook. Continuum. Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Open Badges: http://openbadges.org/
Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Quickstart http://bit.ly/eff-inzet-dig-toetsen

Break – naar de Digitale Toetszaal of iets over Quizzing?

Formatief Toetsen - Online Quizzing
Perfect om studenten ‘huiswerk’ te geven en perfect voor data-verzamelen en op basis daarvan acties uit te zetten. Een demonstratie … Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Feedback Digitale Toetszaal VU - Haagse Onderwijsdag 2013
Butler, A. C., & Roediger, H. L. (2008). Feedback enhances the positive effects and reduces the negative effects of multiple-choice testing. Memory & Cognition, 36(3), doi: /MC Roediger III, H. L., & Marsh, E. J. (2005). The positive and negative consequences of multiple-choice testing. Journal of Experimental Psychology: Learning, Memory, and Cognition, 31(5), 1155. Hattie, J., & Timperley, H. (2007). The Power of Feedback. Review of Educational Research, 77(1), 81–112. doi: / Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Learning through testing – Testing Effect
Mcdaniel, M. A. et al. (2007) Karpicke, J. D., & Roediger, H. L. (2008), Roediger, H. L. I., & Karpicke, J. D. (2006, 2008) Recall test (Short Answer) have stronger effects than recognition tests (MCQ). E-assessment by design, Nicol, D (2007) Roediger, H. L., & Karpicke, J. D. (2006). Test-Enhanced Learning. Psychological Science, 17(3), 249–255. doi: /j x (image also from that article) Karpicke, J. D., & Roediger, H. L. (2008). The Critical Importance of Retrieval for Learning. Science, 319(5865), 966–968. doi: /science Larsen, D. P., Butler, A. C., & Roediger III, H. L. (2009). Repeated testing improves long-term retention relative to repeated study: a randomised controlled trial. Medical Education, 43(12), 1174–1181. doi: /j x Gates, A. I. (1917). Recitation as a factor in memorizing. Archives of Psychology, 6, No. 40. Roediger, H. L. I., & Karpicke, J. D. (2006). The Power of Testing Memory. Basic Research and Implications for Educational Practice. Association for Psychological Science, 1(3), Mcdaniel, M. A., Roediger, H. L., & Mcdermott, K. B. (2007). Generalizing test-enhanced learning from the laboratory to the classroom. Psychonomic Bulletin & Review, 14(2), 200–206. doi: /BF Nicol, D. (2007). E‐assessment by design: using multiple‐choice tests to good effect. Journal of Further and Higher Education, 31(1), 53–64. doi: / Johnson, M. T. (2008). Impact of Online Learning Modules on Medical Student Microbiology Examination Scores. Journal of Microbiology & Biology Education, 9(1). doi: /jmbe.v9.91 Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Correlational Effects Quizzing on Exam Scores
Correlation between participation rate and exam scores High correlation: Kibble and others (2007, 2008, 2011) Positive effect between quiz promotion and participation Kibble, J.D. (2011) Correlation between credit given and participation Mcdaniel, M. A., Roediger, H. L., & Mcdermott, K. B. (2007). Generalizing test-enhanced learning from the laboratory to the classroom. Psychonomic Bulletin & Review, 14(2), 200–206. doi: /BF Kibble, J. (2007). Use of unsupervised online quizzes as formative assessment in a medical physiology course: effects of incentives on student participation and performance. Advances in Physiology Education, 31(3), 253–260. Kibble, J. D., Johnson, T. R., Khalil, M. K., Nelson, L. D., Riggs, G. H., Borrero, J. L., & Payer, A. F. (2011). Insights Gained from the Analysis of Performance and Participation in Online Formative Assessment. Teaching and Learning in Medicine, 23(2), 125–129. doi: / Cliff, W., Freeman, S., Hansen, P. A., Kibble, J. D., Peat, M., & Wenderoth, M. P. (2008). Is formative assessment an effective way to improve learning? A symposium at Experimental Biology Advances in Physiology Education, 32(4), 337 –338. doi: /advan Andrews, T. M., Leonard, M. J., Colgrove, C. A., & Kalinowski, S. T. (2011). Active Learning Not Associated with Student Learning in a Random Sample of College Biology Courses. CBE-Life Sciences Education, 10(4), 394–405. doi: /cbe Kibble, J. D. (2011). Voluntary participation in online formative quizzes is a sensitive predictor of student success. Advances in Physiology Education, 35(1), 95–96. doi: /advan Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Analytics – acting on the data
Selection and timing of questions to answer Repeated practice Within minutes/hours/days/weeks/months? Drop-off rate of succesfully recalled answers Images: Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Timing of feedback – Based on Correct-Incorrectness and Speed Per question Answer again Per group of questions Per test as a whole Directly after, longer and even longer Image from Assessment Feedback Settings Sakai CLE Image from Sally Jordan Blog: Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Analytics Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Variations - A Distributed Learning – Spacing Effect
Ebbinghaus (1885)! Kerfoot et al. (2007, 2009, 2010) Collaborative Testing Giuliodori, M. J., (2008), Kapitanoff, S. H. (2009), Rao, S. P., et al. (2002), Slusser, S. R., & Erickson, R. J. (2006). Question generation by students Denny, P., Hanks, B., & Simon, B. (2010), Fellenz, M. R. (2004). Ebbinghaus, Hermann (1885) (in German). Über das Gedächtnis. Untersuchungen zur experimentellen Psychologie [Memory: A Contribution to Experimental Psychology]. Trans. Henry A. Ruger & Clara E. Bussenius. Leipzig, Germany: Duncker & Humblot. Kerfoot, B. P. (2009). Learning benefits of on-line spaced education persist for 2 years. The Journal of Urology, 181(6), 2671–2673. doi: /j.juro Kerfoot, B. P., DeWolf, W. C., Masser, B. A., Church, P. A., & Federman, D. D. (2007). Spaced education improves the retention of clinical knowledge by medical students: a randomised controlled trial. Medical Education, 41(1), 23–31. doi: /j x Kerfoot, B. P., Fu, Y., Baker, H., Connelly, D., Ritchey, M. L., & Genega, E. M. (2010). Online spaced education generates transfer and improves long-term retention of diagnostic skills: a randomized controlled trial. Journal of the American College of Surgeons, 211(3), 331–337.e1. doi: /j.jamcollsurg Kerfoot, B. P., Kearney, M. C., Connelly, D., & Ritchey, M. L. (2009). Interactive spaced education to assess and improve knowledge of clinical practice guidelines: a randomized controlled trial. Annals of Surgery, 249(5), 744–749. doi: /SLA.0b013e31819f6db8 Giuliodori, M. J., Lujan, H. L., & DiCarlo, S. E. (2008). Collaborative group testing benefits high- and low-performing students. Advances in Physiology Education, 32(4), 274 –278. doi: /advan Kapitanoff, S. H. (2009). Collaborative testing. Active Learning in Higher Education, 10(1), 56–70. Rao, S. P., Collins, H. L., & DiCarlo, S. E. (2002). Collaborative testing enhances student learning. Advances in Physiology Education, 26(1), 37 –41. Slusser, S. R., & Erickson, R. J. (2006). Group Quizzes: An Extension of the Collaborative Learning Process. Teaching Sociology, 34(3), 249 –262. doi: / X Denny, P., Hanks, B., & Simon, B. (2010). Peerwise: replication study of a student-collaborative self-testing web service in a u.s. setting. Proceedings of the 41st ACM technical symposium on Computer science education, SIGCSE ’10 (pp. 421–425). New York, NY, USA: ACM. doi: / Fellenz, M. R. (2004). Using assessment to support higher level learning: the multiple choice item development assignment. Assessment & Evaluation in Higher Education, 29(6), 703 – 719. Mazur, E., & Crouch, C. H. (2001). Peer Instruction: Ten Years of Experience and Results. American Journal of Physics., 69(9), 970–977. Caldwell, J. E. (2007). Clickers in the large classroom: current research and best-practice tips. CBE-Life Sciences Education, 6(1), 9–20. Draper, S. W. (2009). Catalytic assessment: understanding how MCQs and EVS can foster deep learning. British Journal of Educational Technology, 40(2), 285–293. doi: /j x Answer Untill Correct (AUC) – test-taker selects answer, then receives feedback if correct or not, if not –> test-takers selects next answer etc.: Discrete Option Multiple Choice (DOMC) - test-taker is only shown one answering option of an mc question at a time, student must select correct answer when it is displayed: Certainty Based Marking (CBM) – test-taker must provide certainty level of being correct for each option in an mc question: NEW! Confidence Based Marking – seems an interesting variant of Certainty Based Marking (but uses the old term of Gardner-Medwin for it unfortunately) – first, the test-takers only sees the stimulus, then rates confidence of being able to answer correctly, then is presented all options and then selects the correct option: Number right elimination testing (NRET) - a variant of elimination testing (ET) - mark incorrect answers, mark correct answer and provide certainty level for it: Liberal (Free-Choice) Multiple-Choice Tests – test-taker may select any option of an mc question but correct option is awarded 3 points, any incorrect selected option is awarded -1 point. Main idea: System discourages guessing: try it at Jordan, S., & Mitchell, T. (2009). e-Assessment for learning? The potential of short-answer free-text questions with tailored feedback. British Journal of Educational Technology, 40(2), 371–385. Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Variations - B Lecture Clickers and other Response Systems
For example Mazur, E., & Crouch, C. H. (2001), Caldwell (2007), Draper (2009) - Catalytic assessment, Ipsative Assessment Question Formats Various MCQ formats tive-multiple-choice-in-formative-tests/ Short Answer formats Quizzing before or after lecturing Enhancing engagement in lectures or tutorial meetings Providing opportunity to direclty apply knowledge Ebbinghaus, Hermann (1885) (in German). Über das Gedächtnis. Untersuchungen zur experimentellen Psychologie [Memory: A Contribution to Experimental Psychology]. Trans. Henry A. Ruger & Clara E. Bussenius. Leipzig, Germany: Duncker & Humblot. Kerfoot, B. P. (2009). Learning benefits of on-line spaced education persist for 2 years. The Journal of Urology, 181(6), 2671–2673. doi: /j.juro Kerfoot, B. P., DeWolf, W. C., Masser, B. A., Church, P. A., & Federman, D. D. (2007). Spaced education improves the retention of clinical knowledge by medical students: a randomised controlled trial. Medical Education, 41(1), 23–31. doi: /j x Kerfoot, B. P., Fu, Y., Baker, H., Connelly, D., Ritchey, M. L., & Genega, E. M. (2010). Online spaced education generates transfer and improves long-term retention of diagnostic skills: a randomized controlled trial. Journal of the American College of Surgeons, 211(3), 331–337.e1. doi: /j.jamcollsurg Kerfoot, B. P., Kearney, M. C., Connelly, D., & Ritchey, M. L. (2009). Interactive spaced education to assess and improve knowledge of clinical practice guidelines: a randomized controlled trial. Annals of Surgery, 249(5), 744–749. doi: /SLA.0b013e31819f6db8 Giuliodori, M. J., Lujan, H. L., & DiCarlo, S. E. (2008). Collaborative group testing benefits high- and low-performing students. Advances in Physiology Education, 32(4), 274 –278. doi: /advan Kapitanoff, S. H. (2009). Collaborative testing. Active Learning in Higher Education, 10(1), 56–70. Rao, S. P., Collins, H. L., & DiCarlo, S. E. (2002). Collaborative testing enhances student learning. Advances in Physiology Education, 26(1), 37 –41. Slusser, S. R., & Erickson, R. J. (2006). Group Quizzes: An Extension of the Collaborative Learning Process. Teaching Sociology, 34(3), 249 –262. doi: / X Denny, P., Hanks, B., & Simon, B. (2010). Peerwise: replication study of a student-collaborative self-testing web service in a u.s. setting. Proceedings of the 41st ACM technical symposium on Computer science education, SIGCSE ’10 (pp. 421–425). New York, NY, USA: ACM. doi: / Fellenz, M. R. (2004). Using assessment to support higher level learning: the multiple choice item development assignment. Assessment & Evaluation in Higher Education, 29(6), 703 – 719. Mazur, E., & Crouch, C. H. (2001). Peer Instruction: Ten Years of Experience and Results. American Journal of Physics., 69(9), 970–977. Caldwell, J. E. (2007). Clickers in the large classroom: current research and best-practice tips. CBE-Life Sciences Education, 6(1), 9–20. Draper, S. W. (2009). Catalytic assessment: understanding how MCQs and EVS can foster deep learning. British Journal of Educational Technology, 40(2), 285–293. doi: /j x Answer Untill Correct (AUC) – test-taker selects answer, then receives feedback if correct or not, if not –> test-takers selects next answer etc.: Discrete Option Multiple Choice (DOMC) - test-taker is only shown one answering option of an mc question at a time, student must select correct answer when it is displayed: Certainty Based Marking (CBM) – test-taker must provide certainty level of being correct for each option in an mc question: NEW! Confidence Based Marking – seems an interesting variant of Certainty Based Marking (but uses the old term of Gardner-Medwin for it unfortunately) – first, the test-takers only sees the stimulus, then rates confidence of being able to answer correctly, then is presented all options and then selects the correct option: Number right elimination testing (NRET) - a variant of elimination testing (ET) - mark incorrect answers, mark correct answer and provide certainty level for it: Liberal (Free-Choice) Multiple-Choice Tests – test-taker may select any option of an mc question but correct option is awarded 3 points, any incorrect selected option is awarded -1 point. Main idea: System discourages guessing: try it at Jordan, S., & Mitchell, T. (2009). e-Assessment for learning? The potential of short-answer free-text questions with tailored feedback. British Journal of Educational Technology, 40(2), 371–385. Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Digitale Toetszaal VU (DigiTenT)

Heb je een digitale toetszaal nodig?
Exams are outdated, is it not? Read your own OER and check your current ‘studiegids’ With computers, students can take their exam at any moment of their liking, is it not? Traditional Higher Education system in NL is cohort based Students can taken an exam at home, is it not? Security and Integrity of data and achievement cannot be guaranteed Students can bring their own (any) device to the exam hall, is it not? Power Network Security and Integrity of data and achievement We can use the regular computerrooms, is it not? Reliability of computers is poor Very poor ergonomic conditions Very poor defference of fraud JA! dus Digitale Toetszaal VU - Haagse Onderwijsdag 2013

En heb je een grote zaal nodig?
Digitaal toetsen heeft het meeste efficiëntie voordeel bij grote cohorten Efficiënt omgaan met grote cohorten Tentamens Deeltentamens Tussentoetsen Ja, je hebt een grote nodig ICTO-21 plan van werkgroep Onderwijs en ICT (onder PCU, CvB) geeft aan: digitalisering van toetsing heeft prioriteit Vraag naar digitaal toetsen afgelopen jaren toegenomen Studenten aan de bal houden (Richtlijn Bacherloronderwijs (1/9/2012) Er wordt zo frequent en vroegtijdig mogelijk getoetst. Hiertoe is er uiterlijk halverwege een vak een deeltoetsmoment waarop de docent de vorderingen van de student evalueert en aan hen kenbaar maakt. Toetsen stuurt het leerproces Studenten betere digitale ervaring geven op de VU Opbouw vragenbanken, zuiniger/systematischer omgaan met vragen Online toetsen, Peer-Review, Toetsen van geschreven werkstukken (Turnitin) Vraag naar efficiënter digitaal tentamineren van grote cohorten studenten Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Zijn we alleEn? + HS Leiden + Erasums + Universiteit Leiden + UvA
Digitale Toetszaal RUG – 290 plekken permanent Digitale Toetszaal TU-Delft – 2 x 225 plekken plekken, niet permanent + HS Leiden + Erasums + Universiteit Leiden + UvA + AMC + Saxion + Hogeschool Rotterdam + Hogeschool Zuyd + HS Leiden + Erasums + Universiteit Leiden + UvA + AMC Digitale Toetszaal VU – 385 plekken – permanent Digitale Toetszaal VU - Haagse Onderwijsdag 2013

WAAR KOMT DE DIGITALE TOETSZAAL?
385 plekken Digitale Toetszaal VU - Haagse Onderwijsdag 2013

MC, MR, Drag-and-Drop, Algebraic

Figuur 2 Handmatig verwerken van papieren toetsen bij RCH.

Geavanceerd digitaal nakijken - Turnitin
Geavanceerd digitaal nakijken met Turnitin – de tool voor plagiaatcontrole, beoordeling, rijke feedback, peer-review. Ook op de Tablet. Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Geavanceerd digitaal nakijken - Blackboard

Geavanceerd digitaal nakijken - Turnitin
Rubrics Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Word, PDF, SPSS, MatLab Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Welke toetsvorm levert het meeste op in de DigiTenT?
Open vragen (voorkom schrijven met de hand); Beroepssoftware; Open vragen toevoegen aan gesloten vragen; Andere vraagvormen, afbeeldingen, multimedia e.d. Verbeteren van het studiesucces Verbeteren waardering door studenten in het kader van de NSE (o.a. nakijktermijn) Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Maatwerk, specifieke software nodig Niet of beperkt mogelijk
Geschikt Maatwerk, specifieke software nodig Niet of beperkt mogelijk MC x Open vragen in tekstvorm Beroepssoftware met file bewerking en upload Beperkte wiskundige, chemische symbolen Uitgebreide wiskundige, chemische of andere structuren X (tenzij met gebruimaking van beroepssoftware) Toetsen moeten geschikt zijn om in digitale vorm aan te bieden Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Welke ondersteuning? Centrale Ondersteuning Digitaal Toetsen ICTO ondersteuner faculteit The personal touch Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Organization Faculties ED IT DigiTenT
VU Board, Faculty Boards, ICTO Advisory Board Faculties ED IT Onderwijskundig adviseur (digitaal) toetsexpert Educational Technologist Applicatiebeheer Database en OS beheer Functioneel beheer Faculteit/Docent Fac. Ondersteuner Faculteit/Docent Fac. Ondersteuner Faculteit/Docent Fac. Ondersteuner Faculteit/Docent Fac. Ondersteuner Faculteit/Docent Fac. Ondersteuner Faculteit/Docent Fac. Ondersteuner Faculteit/Docent Fac. Ondersteuner Faculteit/Docent Fac. Ondersteuner Faculteit/Docent Fac. Ondersteuner DigiTenT Centrale Ondersteuner Digitaal Toetsen Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Faculteiten zonder ICTO ondersteuning
Type toets Een nieuw te ontwikkelen toets via Blackboard of Questionmark Perception (evt. in combinatie met beroepssoftware) Ontwikkelen specifieke vraagtypes Eerder ontwikkelde toets via Blackboard of Questionmark Perception Een nieuw te ontwikkelen toets waarbij studenten met beroepssoftware worden getest Een bestaande toets waarbij studenten met beroepssoftware worden getest Pluspakket Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Roostering en actoren/ondersteuning
Alle tentamens en tussentoetsen onder regime regulier roosterproces – denk ook ‘Beheerreglement’ Tijdens tentamenweken max pogingen Aanmelden tentamens en tussentoetsen via Syllabus+ FCO probeert alles in te plannen Digitaal toetsen krijgt voorrang! Als het niet lukt op gewenst moment – zoeken naar oplossingen Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Welke organisatie en Logistiek
Wat Wie Opmerkingen Idee formuleren Docent Faculteit/Opleiding Cursuscoördinator Software hebben Centrale of facultaire ondersteuning IT-functionarissen Welke methode: online, clientsoftware Nauwkeurige toegang regelen tot Topics, Testen e.d. Toetsopzet bedenken Onderwijskundig ondersteuner Vraagtypen Volgorde van vragen Instructieschermen Feedbackschermen Cijferbekendmaking Inzage bedenken Toetsvragen bedenken Technisch ondersteuner Toetsvragen invoeren Docent (nee, liever niet) Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Welke organisatie en Logistiek (cont.)
Wat Wie Opmerkingen Toets samenstellen Technisch ondersteuner Navigatie Templates Knoppen Interactieve meldingen Toets controleren Docent Toets ter beschikking stellen aan studenten Functioneel beheer Roosteraars Curriculum ontwikkelaars Toetsafnemen onder goed gecontroleerde condities en technisch betrouwbaar Technisch beheer Applicatiebeheer Is er wel of niet een dedicated faciliteit om digitale toetsen af te nemen? Troubleshooting als de toets ter beschikking staat Functioneel beheerder Toetsresultaten downloaden, analyses plegen en scores en cijfers bepalen Psychometricus Inzage mogelijk maken Digitale Toetszaal VU - Haagse Onderwijsdag 2013

En de toekomst - 1 Accreditatie – Rubrics gebruiken over jaren en cursussen, leidend naar de afstudeerscriptie. Digitale Toetszaal VU - Haagse Onderwijsdag 2013

En de toekomst - 2 MOOC’s Large Scale Itembanking and exchange
Depent heavily on quizzing Large Scale Itembanking and exchange Publishers Collaborative efforts (SURF) Interoperability Standards such as IMS QTI v1.2/v2.1 and IMS BasicLTI Computer Adaptive Testing – also in Higher Ed Aleks, Statistiekfabriek, StudyTube Scoring related to Institutional Goals and Outcomes Online Proctoring It is technically possible But is it affordable (EUR per examinee) But is it acceptable Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Blackboard Outcomes Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Voor Meer informatie Silvester Draaijer Digitale Toetszaal VU - Haagse Onderwijsdag 2013

Digitaal Toetsen/Digitale Toetszaal

Verwante presentaties

Presentatie over: "Digitaal Toetsen/Digitale Toetszaal"— Transcript van de presentatie:

Verwante presentaties

Over het project

Feedback

Inloggen

Inloggen via een sociaal netwerk:

Digitaal Toetsen/Digitale Toetszaal

Verwante presentaties

Presentatie over: "Digitaal Toetsen/Digitale Toetszaal"— Transcript van de presentatie:

Verwante presentaties

Over het project

Feedback