Peilingsonderzoek in een notendop

Presentatie over: "Peilingsonderzoek in een notendop"— Transcript van de presentatie:

1 Peilingsonderzoek in een notendop
STEUNPUNT TOETSONTWIKKELING EN PEILINGEN Peilingsonderzoek in een notendop Werkseminarie 20 november 2014

2 Peilingsonderzoek in een notendop

3 de grote lijnen van een peilingsproject
Startdag toetsontwikkeling WO natuur en techniek BaO Natuurwetenschappen SO1-A 3 september 2013 de grote lijnen van een peilingsproject eindtermen item-ontwikkeling vooronder-zoeken opgaven kalibratie-onderzoek meetschaal peiling cesuur-bepaling toetsnorm analyses rapportering okt ma 2012 jan - apr 2012 nov 2013 mei 2013 mei 2012 sept – dec 2013 jan – mei 2014 Steunpunt Toetsontwikkeling en Peilingen KU Leuven

4 de grote lijnen van een peilingsproject
Startdag toetsontwikkeling WO natuur en techniek BaO Natuurwetenschappen SO1-A 3 september 2013 de grote lijnen van een peilingsproject eindtermen item-ontwikkeling vooronder-zoeken opgaven kalibratie-onderzoek meetschaal peiling cesuur-bepaling toetsnorm analyses rapportering okt ma 2012 jan - apr 2012 nov 2013 mei 2013 mei 2012 sept – dec 2013 jan – mei 2014 Steunpunt Toetsontwikkeling en Peilingen KU Leuven

5 de grote lijnen van een peilingsproject
Startdag toetsontwikkeling WO natuur en techniek BaO Natuurwetenschappen SO1-A 3 september 2013 de grote lijnen van een peilingsproject eindtermen item-ontwikkeling vooronder-zoeken opgaven kalibratie-onderzoek meetschaal peiling cesuur-bepaling toetsnorm analyses rapportering okt ma 2012 jan - apr 2012 opdrachtgever nov 2013 mei 2013 mei 2012 eindtermen selectie en groepering sept – dec 2013 jan – mei 2014 sept 2011 Steunpunt Toetsontwikkeling en Peilingen KU Leuven

6 de grote lijnen van een peilingsproject
Startdag toetsontwikkeling WO natuur en techniek BaO Natuurwetenschappen SO1-A 3 september 2013 de grote lijnen van een peilingsproject eindtermen item-ontwikkeling vooronder-zoeken opgaven kalibratie-onderzoek meetschaal peiling cesuur-bepaling toetsnorm analyses rapportering okt ma 2012 jan - apr 2012 itemontwikkeling interne feedback nov 2013 mei 2013 mei 2012 gedetacheerde leerkrachten feedback interne stuurgroep sept – dec 2013 jan – mei 2014 Steunpunt Toetsontwikkeling en Peilingen KU Leuven

7 de grote lijnen van een peilingsproject
Startdag toetsontwikkeling WO natuur en techniek BaO Natuurwetenschappen SO1-A 3 september 2013 de grote lijnen van een peilingsproject eindtermen item-ontwikkeling vooronder-zoeken opgaven kalibratie-onderzoek meetschaal peiling cesuur-bepaling toetsnorm analyses rapportering okt ma 2012 jan - apr 2012 vooronderzoeken nov 2013 mei 2013 mei 2012 bij leerlingen bij experten sept – dec 2013 jan – mei 2014 Steunpunt Toetsontwikkeling en Peilingen KU Leuven

8 de grote lijnen van een peilingsproject
Startdag toetsontwikkeling WO natuur en techniek BaO Natuurwetenschappen SO1-A 3 september 2013 de grote lijnen van een peilingsproject eindtermen item-ontwikkeling vooronder-zoeken opgaven kalibratie-onderzoek meetschaal peiling cesuur-bepaling toetsnorm analyses rapportering okt ma 2012 jan - apr 2012 nov 2013 mei 2013 mei 2012 sept – dec 2013 jan – mei 2014 Steunpunt Toetsontwikkeling en Peilingen KU Leuven

9 de grote lijnen van een peilingsproject
Startdag toetsontwikkeling WO natuur en techniek BaO Natuurwetenschappen SO1-A 3 september 2013 de grote lijnen van een peilingsproject eindtermen item-ontwikkeling vooronder-zoeken opgaven kalibratie-onderzoek meetschaal peiling cesuur-bepaling toetsnorm analyses rapportering okt ma 2012 jan - apr 2012 kalibratieonderzoek nov 2013 mei 2013 mei 2012 500 leerlingen per schaal representatieve steekproef sept – dec 2013 jan – mei 2014 Steunpunt Toetsontwikkeling en Peilingen KU Leuven

10 de grote lijnen van een peilingsproject
Startdag toetsontwikkeling WO natuur en techniek BaO Natuurwetenschappen SO1-A 3 september 2013 de grote lijnen van een peilingsproject eindtermen item-ontwikkeling vooronder-zoeken opgaven kalibratie-onderzoek meetschaal peiling cesuur-bepaling toetsnorm analyses rapportering meetschaal okt ma 2012 jan - apr 2012 makkelijkste opgave moeilijkste opgave nov 2013 mei 2013 mei 2012 sept – dec 2013 jan – mei 2014 Steunpunt Toetsontwikkeling en Peilingen KU Leuven

11 de grote lijnen van een peilingsproject
Startdag toetsontwikkeling WO natuur en techniek BaO Natuurwetenschappen SO1-A 3 september 2013 de grote lijnen van een peilingsproject eindtermen item-ontwikkeling vooronder-zoeken opgaven kalibratie-onderzoek meetschaal peiling cesuur-bepaling toetsnorm analyses rapportering meetschaal okt ma 2012 jan - apr 2012 makkelijkste opgave moeilijkste opgave nov 2013 mei 2013 mei 2012 sept – dec 2013 jan – mei 2014 Steunpunt Toetsontwikkeling en Peilingen KU Leuven

12 de grote lijnen van een peilingsproject
Startdag toetsontwikkeling WO natuur en techniek BaO Natuurwetenschappen SO1-A 3 september 2013 de grote lijnen van een peilingsproject eindtermen item-ontwikkeling vooronder-zoeken opgaven kalibratie-onderzoek meetschaal peiling cesuur-bepaling toetsnorm analyses rapportering okt ma 2012 jan - apr 2012 peiling nov 2013 mei 2013 mei 2012 1500 leerlingen per schaal representatieve steekproef sept – dec 2013 jan – mei 2014 Steunpunt Toetsontwikkeling en Peilingen KU Leuven

13 de grote lijnen van een peilingsproject
Startdag toetsontwikkeling WO natuur en techniek BaO Natuurwetenschappen SO1-A 3 september 2013 de grote lijnen van een peilingsproject eindtermen item-ontwikkeling vooronder-zoeken opgaven kalibratie-onderzoek meetschaal peiling cesuur-bepaling toetsnorm analyses rapportering okt ma 2012 jan - apr 2012 nov 2013 mei 2013 mei 2012 sept – dec 2013 jan – mei 2014 Steunpunt Toetsontwikkeling en Peilingen KU Leuven

14 de grote lijnen van een peilingsproject
Startdag toetsontwikkeling WO natuur en techniek BaO Natuurwetenschappen SO1-A 3 september 2013 de grote lijnen van een peilingsproject eindtermen item-ontwikkeling vooronder-zoeken opgaven kalibratie-onderzoek meetschaal peiling cesuur-bepaling toetsnorm analyses rapportering okt ma 2012 jan - apr 2012 nov 2013 mei 2013 mei 2012 sept – dec 2013 jan – mei 2014 Steunpunt Toetsontwikkeling en Peilingen KU Leuven

15 de grote lijnen van een peilingsproject
Startdag toetsontwikkeling WO natuur en techniek BaO Natuurwetenschappen SO1-A 3 september 2013 de grote lijnen van een peilingsproject eindtermen item-ontwikkeling vooronder-zoeken opgaven kalibratie-onderzoek meetschaal peiling cesuur-bepaling toetsnorm analyses rapportering okt ma 2012 jan - apr 2012 nov 2013 mei 2013 mei 2012 sept – dec 2013 jan – mei 2014 Steunpunt Toetsontwikkeling en Peilingen KU Leuven

16 de grote lijnen van een peilingsproject
Startdag toetsontwikkeling WO natuur en techniek BaO Natuurwetenschappen SO1-A 3 september 2013 de grote lijnen van een peilingsproject eindtermen item-ontwikkeling vooronder-zoeken opgaven kalibratie-onderzoek meetschaal peiling cesuur-bepaling toetsnorm analyses rapportering okt ma 2012 jan - apr 2012 nov 2013 mei 2013 mei 2012 sept – dec 2013 jan – mei 2014 Steunpunt Toetsontwikkeling en Peilingen KU Leuven

17 Cesuurbepaling

18 Algemene introductie over de cesuurbepaling
centrale vraag welke opgaven moeten leerlingen onder de knie hebben opdat we kunnen zeggen dat ze de eindtermen beheersen? wie? verschillende actoren uit het onderwijsveld: leerkrachten, pedagogisch adviseurs, lerarenopleiders,… wie niet? de onderzoekers of de toetsontwikkelaars!

19 Algemene introductie over de cesuurbepaling
cesuur bepalen wat? norm vastleggen op de meetschaal welke opgaven moet een leerling aan het einde tweede leerjaar derde graad bso onder de knie hebben om te kunnen zeggen dat hij of zij de eindtermen beheerst? referentiepunt = eindtermen ≠ wat de ‘modale leerling’ kan, wat de eigen leerlingen kunnen, of wat àlle leerlingen kunnen ≠ de leerplannen en handboeken

20 Algemene introductie over de cesuurbepaling
meetschaal per set van eindtermen OPGAVEN ordenen op meetschaal naar moeilijkheidsgraad moeilijkste opgave hoe? - niet door toetsontwikkelaars of onderzoekers! - wel volgens resultaten van de leerlingen in de peiling makkelijkste opgave 20

21 Algemene introductie over de cesuurbepaling
cesuur bepalen moeilijkste opgave bijkomend deze opgaven moeten de leerlingen nog niet beheersen om aan de eindtermen te voldoen hoe? meetschaal in twee delen streep boven de laatste opgave die een leerling nog moet beheersen basis deze opgaven moeten de leerlingen zeker beheersen cesuur makkelijkste opgave 21

22 Algemene introductie over de cesuurbepaling
analyses LEERLINGEN OPGAVEN volgens vaardigheid volgens moeilijkheidsgraad beheersing in termen van kansen

23 Algemene introductie over de cesuurbepaling
analyses LEERLINGEN OPGAVEN bijkomend deze opgaven moeten de leerlingen nog niet beheersen om aan de eindtermen te voldoen deze leerlingen beheersen (minstens) de eindtermen basis deze opgaven moeten de leerlingen zeker beheersen cesuur deze leerlingen beheersen de eindtermen niet

24 Algemene introductie over de cesuurbepaling
drie rondes ronde 1 individueel opgaven doornemen cesuur bepalen (= eerste oordeel) inhoudelijke verduidelijking noteren mediaan ronde 2 bespreking in kleine groepen opnieuw (individueel) de cesuur bepalen (= tweede oordeel) inhoudelijke verduidelijking noteren ronde 3 cesuur = oordeel cesuur  waarheid wetenschappelijk onderbouwde procedure (bookmark procedure) procedure goed gebruiken  garantie op “goede” cesuur belang van adequate vertegenwoordiging! verslaggeving ronde 2 bespreking in grote groep de definitieve individuele cesuur bepalen (= derde oordeel)