Een evidence-based methodologie om taalcompetenties te meten Evidence-based HRM (EB HRM) Selor event 14/11/2013.

Presentatie over: "Een evidence-based methodologie om taalcompetenties te meten Evidence-based HRM (EB HRM) Selor event 14/11/2013."— Transcript van de presentatie:

1 Een evidence-based methodologie om taalcompetenties te meten Evidence-based HRM (EB HRM) Selor event 14/11/2013

2 Evidence-based approach 1.Het project en de resultaten 2.De kwaliteit monitoren: Waarom en hoe? 3.Welk type evidence op welk moment? 4.Toegevoegde waarde van de evidence-based aanpak

3 1. Het project en de resultaten

4 Receptieve taalvaardigheden Productieve taalvaardigheden

5

6 Testinhoud & testspecificaties Nieuwe beoordelingstools Opleidingsmodules assessoren Tests 2.0

7 2. De kwaliteit monitoren: Waarom en hoe?

8

9 In theory there is no difference between theory and practice. In practice there is. Yogi Berra

10 expectations reality reality theory

11

12

13 Sources: -ALTE quality management checklists -Manual for Language Test Development and Examining (ALTE on behalf of the Council of Europe) 2009 DESIGN ADMINI- STER PROCESS ANALYSE & REVIEW 2012

14 3. Welk type evidence op welk moment?

15 kwantitatieve analyses assessoren : enquêtes en workshops validatie scope keuze validatiemodel werkgroepen : deliverables experimenten (pretesting) analyse van de prétesting content validation & eindbeslissingen (scoring) Implementatie KICK-OFF PROJECT

16 ANALYSE & REVIEW ANALYSE & REVIEW kwantitatieve analyses enquêtes en workshops enquêtes en workshops validatie scope validatie scope

17 Validatie- model ANALYSE & REVIEW ANALYSE & REVIEW

18 CONTEXT VALIDITY THEORY BASED VALIDITY SCORING VALIDITY EXTERNAL CRITERION VALIDITY CONSEQUENTIAL VALIDITY Adapted from: Weir (2005) Language Testing and Validation

19 REDESIGN deliverables

20 Adapted from: R. Jakobson 1963 & ALTE 2011 individual component checklist

21 ADMINISTER & PROCESS ADMINISTER & PROCESS pretesting analyse van de pretesting analyse van de pretesting validatie & eindbeslissingen validatie & eindbeslissingen

22 4. Toegevoegde waarde van de evidence-based aanpak

23 Stakeholders Institutioneel OverheidsdienstenWerkgeversSelor Management Academisch Selor wetenschappelijk comité Taaltesten Task force Individueel AssessorenKandidatenBurgers

24 EVIDENCE BASED APPROACH

25

26