K.U.Leuven | Toledoteam Implementatie en integratie van QMPerception binnen de Toledo-omgeving.

Presentatie over: "K.U.Leuven | Toledoteam Implementatie en integratie van QMPerception binnen de Toledo-omgeving."— Transcript van de presentatie:

1 K.U.Leuven | Toledoteam Implementatie en integratie van QMPerception binnen de Toledo-omgeving

2 K.U.Leuven | Toledoteam Overzicht QMPerception binnen Toledo Evolutie automatisering en koppeling Toledo-QMP Huidig opzet van toetsomgeving

3 K.U.Leuven | Toledoteam QMPerception binnen Toledo

4 K.U.Leuven | Toledoteam Toledo aan de K.U.Leuven Toetsen en leren doeltreffend ondersteunen Blackboard Learning System Questionmark Perception (client based)

5 K.U.Leuven | Toledoteam QMP aan K.U. Leuven Formatieve toetsen / oefeningen SES (semesterexamensysteem) Begeleide Zelfstudie Summatieve toetsen / examens Draaiboek Informatiesessies Technische en didactische consulting Enquêtes

6 K.U.Leuven | Toledoteam Ondersteuning Handleiding (didactisch / technisch) Infosessies en workshops Workshop QMPerception basiscursus Workshop QMPerception voor gevorderden Infosessie Online examens Toledo-Community (of practice) Helpdesk

7 K.U.Leuven | Toledoteam Admin. data instelling A instelling B instelling C instelling D instelling E instelling F tussenliggende databank Perl xml writerIMS xmlJava xml parserPerl dbi Php dbiWeb services Bb building blockBb apiWeb servicesQMWISeBb building block Webmail K.U.Loket helpdesk BLACKBOARD Bb api [Java] Php dbi docentenmodule adminmodule inschrijfmodule Bb building block QMPerception Bibliotheek Omgeving Php dbi Web servicesXSLT 5 minnacht = write = read = read/write Toledo-koppelingen Single Sign On U-Solv-IT, Idiomatic, … Wiki, weblog …

8 K.U.Leuven | Toledoteam Voorbeeld koppeling QMP

9 K.U.Leuven | Toledoteam QMP versus Blackboard Vraagtypes Vragenblokken Remediëring, tweede kans Adaptief en cumulatief toetsen Templates Layout Gevorderde mogelijkheden Rapportering

10 K.U.Leuven | Toledoteam 2. Studenten klikken op Begeisterung en een venster met uitleg verschijnt 3. In antwoordtabel van database wordt een record geschreven met opgevraagde woorden en hoe lang venster geopend was 1. Java-vraagtype om klikgedrag te volgen

11 K.U.Leuven | Toledoteam Vragenblokken Topic 1 (50) Topic 2 (50) Vragenblok1 (Alles) Vragenblok2 (5 vragen ad random pool 2)

12 K.U.Leuven | Toledoteam Adaptief toetsen Pool 1 (50) Pool 2 (50) Blok 1 (5 vragen ad random) Blok 2 (5 vragen ad random) + 50% - 50%

13 K.U.Leuven | Toledoteam Vraag 3.1Vraag 3.2Vraag 3.3Vraag 3.4 Vraag 3.1bis Vraag 3.2bis juist foutjuist fout juistfout Vraag 3.2tris fout juist Adaptief toetsen

14 K.U.Leuven | Toledoteam stappen juist fout: tip + tweede poging juist FB over efficiënte oplossingsstrategie einde oefening start opgave zelf stap A FB + stap B stap C stap D stap k fout Adaptief toetsen

15 K.U.Leuven | Toledoteam

16

17 KULeuven template

18 K.U.Leuven | Toledoteam Template-definities SHOW_TITLE=0 HEADER= … SEPARATOR= SUBMIT_TEXT=Invoeren WIDTH=10 FEEDBACKCOLOR=##006600 SHOW_BLOCK_SCORE=0 TIME_LIMIT_WARNING=5

19 K.U.Leuven | Toledoteam Template-definities

20 K.U.Leuven | Toledoteam Templates en vraagtypes

21 K.U.Leuven | Toledoteam Sessie-variabelen U bent ingelogd als gebruiker %SESSION.USER% op %SESSION.DATE%. Het is nu %SESSION.TIME% en u hebt 2 uur om deze toets af te leggen. De toets bevat %BLOCK.NUMQUESTIONS% vragen.

22 K.U.Leuven | Toledoteam Soorten rapporten sessievragen student (antwoordanalyse) score listcoaching survey docent (toetsanalyse) assessment overview question statistics item analysis export for excel / ASCII

23 K.U.Leuven | Toledoteam Evolutie automatisering en koppeling Toledo-QMP

24 K.U.Leuven | Toledoteam QMP aan K.U.Leuven Academiejaar 2004-2005 Meer dan 800 assessments Meer dan 24.000 vragen Academiejaar 2006-2007 Meer dan 1.600 assessments (370 in laatste jaar) Meer dan 54.000 vragen Meer dan 130.000 afgelegde assessments Bijna 30.000 verschillende gebruikers (10.000 in laatste jaar)

25 K.U.Leuven | Toledoteam QMP aan K.U.Leuven Campuslicentie QMP Alle geïnteresseerde docenten en personeelsleden Evolutie 2001-2002: QMP2 via webformulier 2002-2004: QMP2 via PUC 2004-2007: QMP3 via PUC 2007-…: QMP4 via PUC (shared)

26 K.U.Leuven | Toledoteam Publiceren via webformulier Toetsen op eigen pc maken Question- en assessmentdatabank opsturen via webformulier Toledoteam zet databanken manueel over

27 K.U.Leuven | Toledoteam Publiceren via PUC Perception Upload Client Testen van assessments Publiceren van assessments Updaten van bestaande vragenpools en toetsen Template-opties toevoegen Naamconventies Toegangsrechten tot rapporttool juistzetten

28 K.U.Leuven | Toledoteam QMP2/3 opstelling

29 K.U.Leuven | Toledoteam Perception Upload Client

30 K.U.Leuven | Toledoteam Client Upload client Perception Upload Archive (PUA) Creëren PUA-bestand Kopie question db Kopie assessment db Verwerking QML-data Kopie afbeeldingen, multi- media materiaal, … Toevoegen van prefixen

31 K.U.Leuven | Toledoteam Perception Server Upload client Upload server.pua PUA-file naar Upload server

32 K.U.Leuven | Toledoteam graphics Preview Server questions assessments reports security Database Upload server Uitpakken op preview server Perception Upload Archive (PUA) templates

33 K.U.Leuven | Toledoteam graphics Preview Server questions assessments reports security Database Upload server.question graphics [copy]  u0038255_F0301A_hebrew_fragment.gif  u0038255_F0301A_diagram_1.gif  u0038255_F0301A_diagram_2.gif  u0038255_F0301A_diagram_3.gif multimedia [copy]  u0038255_F0301A_hebrew_fragment.wav.assessment Uitpakken op preview server templates

34 K.U.Leuven | Toledoteam graphics Preview Server questions assessments reports security Database Upload server.question graphics [copy]  u0038255_F0301A_hebrew_fragment.gif  u0038255_F0301A_diagram_1.gif  u0038255_F0301A_diagram_2.gif  u0038255_F0301A_diagram_3.gif multimedia [copy]  u0038255_F0301A_hebrew_fragment.wav.assessment Uitpakken op preview server templates

35 K.U.Leuven | Toledoteam Link naar preview server

36 K.U.Leuven | Toledoteam E-mail naar verstuurder

37 K.U.Leuven | Toledoteam Publiceren

38 K.U.Leuven | Toledoteam Publiceren

39 K.U.Leuven | Toledoteam Perception Upload Server

40 K.U.Leuven | Toledoteam graphics Produktie server questions assessments reports security Database Upload server.question graphics [copy]  u0038255_F0301A_hebrew_fragment.gif  u0038255_F0301A_diagram_1.gif  u0038255_F0301A_diagram_2.gif  u0038255_F0301A_diagram_3.gif multimedia [copy]  u0038255_F0301A_hebrew_fragment.wav.assessment Uitpakken op produktie server templates

41 K.U.Leuven | Toledoteam Groepen creëren 1 groep entry per cursus

42 K.U.Leuven | Toledoteam Schedules creëren 1 schedule per assessment

43 K.U.Leuven | Toledoteam Schedules

44 K.U.Leuven | Toledoteam Admin creëren 1 cursusspecifieke admin met leesrechten op antwoord- gegevens van toetsen, verbonden aan die cursus

45 K.U.Leuven | Toledoteam E-mail naar verstuurder

46 K.U.Leuven | Toledoteam Link naar assessment Javascript link <!-- function nieuwwindowad(h) { testwin=window.open(h,'nieuwalgdid','toolbar=0,location=0,directories=0,status=0,menubar=0, scrollbars=1,resizable=1,width=800,height=600'); if(navigator.appName=='Netscape') { testwin.focus(); } } //--> <A HREF="javascript:nieuwwindowad('http://qm- 100.cc.kuleuven.ac.be/qm/qmldap.dll?GROUP=M751?assessment=4729568104222633')">Click here to launch your assessment

47 K.U.Leuven | Toledoteam Links naar assessment QMWISe link toets

48 K.U.Leuven | Toledoteam Huidig opzet van de toetsomgeving

49 K.U.Leuven | Toledoteam Overgang naar QMP4 Voordelen QMP4 1 programma (versus question en assessment manager) Extra vraagtypes Extra ondersteuning enquêtes Shared server (samenwerken) Rechtenbeheer (geen naamconventies meer nodig) Unicode (vreemde karakters)

50 K.U.Leuven | Toledoteam Overgang naar QMP4 Fase 1 (voorjaar 2007) Nieuwe gebruikers starten met QMP4 op nieuwe shared servers Fase 2 (voorjaar 2008) Bestaande gebruikers kunnen vragendatabanken en toetsen overzetten naar nieuwe shared servers Fase 3 (zomer 2008) Bestaande QMP3 server wordt overgezet naar QMP4 en bevroren

51 K.U.Leuven | Toledoteam QMP4 opstelling Produktie Server Preview Server Shared Repository Server Perception Authoring Manager LoginPUC Docen t Stude nt Login Toledo SSO Open Login Perception Report Manager Data Link Registreren via PUC

52 K.U.Leuven | Toledoteam AssessmentSurveyHigh-stake exam Shared QMP4 Preview QMP4 Productie QMP4 Shared QMP4 Preview QMP4 Productie QMP4 SharedPreviewProductio n Test Develop Deploy Servers QMP (2007)

53 K.U.Leuven | Toledoteam Publiceren via PUC Perception Upload Client Registreren van gebruiker Aanmaken van account en workspace op shared server Testen van assessments Publiceren van assessments Updaten van bestaande vragenpools en toetsen Toegangsrechten tot rapporttool juistzetten

54 K.U.Leuven | Toledoteam Registreren via PUC Link naar webpagina (Shibboleth) Genereert registratiecode (uniek per gebruiker) In PUC ingeven zodat server weet wie men is Maakt account, roottopic en rootfolder aan op shared repositories en zet rechten juist Maakt accounts aan op Enterprise Manager op produktieservers

55 K.U.Leuven | Toledoteam Registreren via PUC

56 K.U.Leuven | Toledoteam Registreer

57 K.U.Leuven | Toledoteam Inloggen Vragen?

58 K.U.Leuven | Toledoteam Registratie Pagina

59 K.U.Leuven | Toledoteam Registratie code

60 K.U.Leuven | Toledoteam Registratie succesvol *****

61 K.U.Leuven | Toledoteam Toetsen info

62 K.U.Leuven | Toledoteam Doorsturen naar testserver Startpunt = lege databank PUCS kopieert hierin alle relevante data (vragen, toetsen, resources, template-referentie) PUCS maakt zip + archiveert met referentienr PUCS pakt zip uit op testserver

63 K.U.Leuven | Toledoteam Opsturen preview server

64 K.U.Leuven | Toledoteam Opsturen previewserver

65 K.U.Leuven | Toledoteam Uittesten preview server

66 K.U.Leuven | Toledoteam Publicatie aanvraag

67 K.U.Leuven | Toledoteam Publicatie aanvraag

68 K.U.Leuven | Toledoteam Publicatie aanvraag

69 K.U.Leuven | Toledoteam Publicatie aanvraag

70 K.U.Leuven | Toledoteam Doorsturen naar produktie PUCS pakt laatste zip uit op produktieserver Maakt schedules aan Maakt QMWise link aan Maakt account aan in Enterprise Manager voor groep en rechten van toets worden aan groep en auteur gehangen

71 K.U.Leuven | Toledoteam Problemen algemeen Editor plakken uit Word Toetstype Quiz Test Exam Survey

72 K.U.Leuven | Toledoteam Problemen rechtenbeheer Rechtenbeheer verder implementeren voor samenwerken Problemen met rechtenbeheer op templates (1 folder, root access nodig op volledige folder)

73 K.U.Leuven | Toledoteam Problemen templates Problemen met rechtenbeheer op templates (1 folder, root access nodig op volledige folder) Security issue: toegang tot alle vragen via uittesten van template Include werkt niet meer zoals in QMP3 (preview in authoring manager werkt niet met includes) Templates gegenereerd met script

74 K.U.Leuven | Toledoteam Problemen surveys Knowledge matrix Niet optimale layout voor enquêtevragen Probleem Excel-output Survey matrix vraag Goede layout voor enquêtevragen Probleem Excel-output Workaround MC-vragen met speciale template

75 K.U.Leuven | Toledoteam Verdere plannen Overzetten huidige QMP3 omgeving en gebruikers naar versie 4 Synchronisatie gebruikers Koppeling BB gradebook

76 K.U.Leuven | Toledoteam