K.U.Leuven | Toledoteam Implementatie en integratie van QMPerception binnen de Toledo-omgeving

K.U.Leuven | Toledoteam Overzicht QMPerception binnen Toledo Evolutie automatisering en koppeling Toledo-QMP Huidig opzet van toetsomgeving

K.U.Leuven | Toledoteam QMPerception binnen Toledo

K.U.Leuven | Toledoteam Toledo aan de K.U.Leuven Toetsen en leren doeltreffend ondersteunen Blackboard Learning System Questionmark Perception (client based)

K.U.Leuven | Toledoteam QMP aan K.U. Leuven Formatieve toetsen / oefeningen SES (semesterexamensysteem) Begeleide Zelfstudie Summatieve toetsen / examens Draaiboek Informatiesessies Technische en didactische consulting Enquêtes

K.U.Leuven | Toledoteam Ondersteuning Handleiding (didactisch / technisch) Infosessies en workshops Workshop QMPerception basiscursus Workshop QMPerception voor gevorderden Infosessie Online examens Toledo-Community (of practice) Helpdesk

K.U.Leuven | Toledoteam Admin. data instelling A instelling B instelling C instelling D instelling E instelling F tussenliggende databank Perl xml writerIMS xmlJava xml parserPerl dbi Php dbiWeb services Bb building blockBb apiWeb servicesQMWISeBb building block Webmail K.U.Loket helpdesk BLACKBOARD Bb api [Java] Php dbi docentenmodule adminmodule inschrijfmodule Bb building block QMPerception Bibliotheek Omgeving Php dbi Web servicesXSLT 5 minnacht = write = read = read/write Toledo-koppelingen Single Sign On U-Solv-IT, Idiomatic, … Wiki, weblog …

K.U.Leuven | Toledoteam Voorbeeld koppeling QMP

K.U.Leuven | Toledoteam QMP versus Blackboard Vraagtypes Vragenblokken Remediëring, tweede kans Adaptief en cumulatief toetsen Templates Layout Gevorderde mogelijkheden Rapportering

K.U.Leuven | Toledoteam 2. Studenten klikken op Begeisterung en een venster met uitleg verschijnt 3. In antwoordtabel van database wordt een record geschreven met opgevraagde woorden en hoe lang venster geopend was 1. Java-vraagtype om klikgedrag te volgen

K.U.Leuven | Toledoteam Vragenblokken Topic 1 (50) Topic 2 (50) Vragenblok1 (Alles) Vragenblok2 (5 vragen ad random pool 2)

K.U.Leuven | Toledoteam Adaptief toetsen Pool 1 (50) Pool 2 (50) Blok 1 (5 vragen ad random) Blok 2 (5 vragen ad random) + 50% - 50%

K.U.Leuven | Toledoteam Vraag 3.1Vraag 3.2Vraag 3.3Vraag 3.4 Vraag 3.1bis Vraag 3.2bis juist foutjuist fout juistfout Vraag 3.2tris fout juist Adaptief toetsen

K.U.Leuven | Toledoteam stappen juist fout: tip + tweede poging juist FB over efficiënte oplossingsstrategie einde oefening start opgave zelf stap A FB + stap B stap C stap D stap k fout Adaptief toetsen

K.U.Leuven | Toledoteam

KULeuven template

K.U.Leuven | Toledoteam Template-definities SHOW_TITLE=0 HEADER= … SEPARATOR= SUBMIT_TEXT=Invoeren WIDTH=10 FEEDBACKCOLOR=## SHOW_BLOCK_SCORE=0 TIME_LIMIT_WARNING=5

K.U.Leuven | Toledoteam Template-definities

K.U.Leuven | Toledoteam Templates en vraagtypes

K.U.Leuven | Toledoteam Sessie-variabelen U bent ingelogd als gebruiker %SESSION.USER% op %SESSION.DATE%. Het is nu %SESSION.TIME% en u hebt 2 uur om deze toets af te leggen. De toets bevat %BLOCK.NUMQUESTIONS% vragen.

K.U.Leuven | Toledoteam Soorten rapporten sessievragen student (antwoordanalyse) score listcoaching survey docent (toetsanalyse) assessment overview question statistics item analysis export for excel / ASCII

K.U.Leuven | Toledoteam Evolutie automatisering en koppeling Toledo-QMP

K.U.Leuven | Toledoteam QMP aan K.U.Leuven Academiejaar Meer dan 800 assessments Meer dan vragen Academiejaar Meer dan assessments (370 in laatste jaar) Meer dan vragen Meer dan afgelegde assessments Bijna verschillende gebruikers ( in laatste jaar)

K.U.Leuven | Toledoteam QMP aan K.U.Leuven Campuslicentie QMP Alle geïnteresseerde docenten en personeelsleden Evolutie : QMP2 via webformulier : QMP2 via PUC : QMP3 via PUC 2007-…: QMP4 via PUC (shared)

K.U.Leuven | Toledoteam Publiceren via webformulier Toetsen op eigen pc maken Question- en assessmentdatabank opsturen via webformulier Toledoteam zet databanken manueel over

K.U.Leuven | Toledoteam Publiceren via PUC Perception Upload Client Testen van assessments Publiceren van assessments Updaten van bestaande vragenpools en toetsen Template-opties toevoegen Naamconventies Toegangsrechten tot rapporttool juistzetten

K.U.Leuven | Toledoteam QMP2/3 opstelling

K.U.Leuven | Toledoteam Perception Upload Client

K.U.Leuven | Toledoteam Client Upload client Perception Upload Archive (PUA) Creëren PUA-bestand Kopie question db Kopie assessment db Verwerking QML-data Kopie afbeeldingen, multi- media materiaal, … Toevoegen van prefixen

K.U.Leuven | Toledoteam Perception Server Upload client Upload server.pua PUA-file naar Upload server

K.U.Leuven | Toledoteam graphics Preview Server questions assessments reports security Database Upload server Uitpakken op preview server Perception Upload Archive (PUA) templates

K.U.Leuven | Toledoteam graphics Preview Server questions assessments reports security Database Upload server.question graphics [copy]  u _F0301A_hebrew_fragment.gif  u _F0301A_diagram_1.gif  u _F0301A_diagram_2.gif  u _F0301A_diagram_3.gif multimedia [copy]  u _F0301A_hebrew_fragment.wav.assessment Uitpakken op preview server templates

K.U.Leuven | Toledoteam graphics Preview Server questions assessments reports security Database Upload server.question graphics [copy]  u _F0301A_hebrew_fragment.gif  u _F0301A_diagram_1.gif  u _F0301A_diagram_2.gif  u _F0301A_diagram_3.gif multimedia [copy]  u _F0301A_hebrew_fragment.wav.assessment Uitpakken op preview server templates

K.U.Leuven | Toledoteam Link naar preview server

K.U.Leuven | Toledoteam naar verstuurder

K.U.Leuven | Toledoteam Publiceren

K.U.Leuven | Toledoteam Publiceren

K.U.Leuven | Toledoteam Perception Upload Server

K.U.Leuven | Toledoteam graphics Produktie server questions assessments reports security Database Upload server.question graphics [copy]  u _F0301A_hebrew_fragment.gif  u _F0301A_diagram_1.gif  u _F0301A_diagram_2.gif  u _F0301A_diagram_3.gif multimedia [copy]  u _F0301A_hebrew_fragment.wav.assessment Uitpakken op produktie server templates

K.U.Leuven | Toledoteam Groepen creëren 1 groep entry per cursus

K.U.Leuven | Toledoteam Schedules creëren 1 schedule per assessment

K.U.Leuven | Toledoteam Schedules

K.U.Leuven | Toledoteam Admin creëren 1 cursusspecifieke admin met leesrechten op antwoord- gegevens van toetsen, verbonden aan die cursus

K.U.Leuven | Toledoteam naar verstuurder

K.U.Leuven | Toledoteam Link naar assessment Javascript link <!-- function nieuwwindowad(h) { testwin=window.open(h,'nieuwalgdid','toolbar=0,location=0,directories=0,status=0,menubar=0, scrollbars=1,resizable=1,width=800,height=600'); if(navigator.appName=='Netscape') { testwin.focus(); } } //--> <A HREF="javascript:nieuwwindowad(' 100.cc.kuleuven.ac.be/qm/qmldap.dll?GROUP=M751?assessment= ')">Click here to launch your assessment

K.U.Leuven | Toledoteam Links naar assessment QMWISe link toets

K.U.Leuven | Toledoteam Huidig opzet van de toetsomgeving

K.U.Leuven | Toledoteam Overgang naar QMP4 Voordelen QMP4 1 programma (versus question en assessment manager) Extra vraagtypes Extra ondersteuning enquêtes Shared server (samenwerken) Rechtenbeheer (geen naamconventies meer nodig) Unicode (vreemde karakters)

K.U.Leuven | Toledoteam Overgang naar QMP4 Fase 1 (voorjaar 2007) Nieuwe gebruikers starten met QMP4 op nieuwe shared servers Fase 2 (voorjaar 2008) Bestaande gebruikers kunnen vragendatabanken en toetsen overzetten naar nieuwe shared servers Fase 3 (zomer 2008) Bestaande QMP3 server wordt overgezet naar QMP4 en bevroren

K.U.Leuven | Toledoteam QMP4 opstelling Produktie Server Preview Server Shared Repository Server Perception Authoring Manager LoginPUC Docen t Stude nt Login Toledo SSO Open Login Perception Report Manager Data Link Registreren via PUC

K.U.Leuven | Toledoteam AssessmentSurveyHigh-stake exam Shared QMP4 Preview QMP4 Productie QMP4 Shared QMP4 Preview QMP4 Productie QMP4 SharedPreviewProductio n Test Develop Deploy Servers QMP (2007)

K.U.Leuven | Toledoteam Publiceren via PUC Perception Upload Client Registreren van gebruiker Aanmaken van account en workspace op shared server Testen van assessments Publiceren van assessments Updaten van bestaande vragenpools en toetsen Toegangsrechten tot rapporttool juistzetten

K.U.Leuven | Toledoteam Registreren via PUC Link naar webpagina (Shibboleth) Genereert registratiecode (uniek per gebruiker) In PUC ingeven zodat server weet wie men is Maakt account, roottopic en rootfolder aan op shared repositories en zet rechten juist Maakt accounts aan op Enterprise Manager op produktieservers

K.U.Leuven | Toledoteam Registreren via PUC

K.U.Leuven | Toledoteam Registreer

K.U.Leuven | Toledoteam Inloggen Vragen?

K.U.Leuven | Toledoteam Registratie Pagina

K.U.Leuven | Toledoteam Registratie code

K.U.Leuven | Toledoteam Registratie succesvol *****

K.U.Leuven | Toledoteam Toetsen info

K.U.Leuven | Toledoteam Doorsturen naar testserver Startpunt = lege databank PUCS kopieert hierin alle relevante data (vragen, toetsen, resources, template-referentie) PUCS maakt zip + archiveert met referentienr PUCS pakt zip uit op testserver

K.U.Leuven | Toledoteam Opsturen preview server

K.U.Leuven | Toledoteam Opsturen previewserver

K.U.Leuven | Toledoteam Uittesten preview server

K.U.Leuven | Toledoteam Publicatie aanvraag

K.U.Leuven | Toledoteam Publicatie aanvraag

K.U.Leuven | Toledoteam Publicatie aanvraag

K.U.Leuven | Toledoteam Publicatie aanvraag

K.U.Leuven | Toledoteam Doorsturen naar produktie PUCS pakt laatste zip uit op produktieserver Maakt schedules aan Maakt QMWise link aan Maakt account aan in Enterprise Manager voor groep en rechten van toets worden aan groep en auteur gehangen

K.U.Leuven | Toledoteam Problemen algemeen Editor plakken uit Word Toetstype Quiz Test Exam Survey

K.U.Leuven | Toledoteam Problemen rechtenbeheer Rechtenbeheer verder implementeren voor samenwerken Problemen met rechtenbeheer op templates (1 folder, root access nodig op volledige folder)

K.U.Leuven | Toledoteam Problemen templates Problemen met rechtenbeheer op templates (1 folder, root access nodig op volledige folder) Security issue: toegang tot alle vragen via uittesten van template Include werkt niet meer zoals in QMP3 (preview in authoring manager werkt niet met includes) Templates gegenereerd met script

K.U.Leuven | Toledoteam Problemen surveys Knowledge matrix Niet optimale layout voor enquêtevragen Probleem Excel-output Survey matrix vraag Goede layout voor enquêtevragen Probleem Excel-output Workaround MC-vragen met speciale template

K.U.Leuven | Toledoteam Verdere plannen Overzetten huidige QMP3 omgeving en gebruikers naar versie 4 Synchronisatie gebruikers Koppeling BB gradebook

K.U.Leuven | Toledoteam