Illustratie mogelijke redenen lage ICC’s in multilevel modellen bij de CQI Peter Moorer ARGO Rijksuniversiteit Groningen BV © ARGO – april 2009
Twee mogelijke redenen lage ICC Model (mis)specificatie (J. Berkhof, Specification methods for the multilevel model, 2000, DSWO press) Non-random error © ARGO –april 2009
Multilevel, regressie en assumpties Model specificatie Multilevel, regressie en assumpties Er is één afhankelijke Y (b.v. rapportcijfer voor een hulpverlener) waarvan de variantie verklaard moet worden Onafhankelijk/verklarende variabelen Xi en Xj ┴ (ongecorreleerd) Geen meetfouten Xi en Xj => Dus ook geen gecorreleerde errors Xi en Xj Ers = 0 © ARGO –april 2009
Multilevel, regressie en assumpties Model specificatie Multilevel, regressie en assumpties © ARGO –april 2009
Assumpties 2 – 4 geschonden: In de verklarende variabelen x1 - xn Model specificatie Assumpties 2 – 4 geschonden: In de verklarende variabelen x1 - xn © ARGO –maart 2009
Assumptie 5 geschonden: Model specificatie Assumptie 5 geschonden: multilevel probleem of ontbrekende verklarende variabelen? © ARGO –maart 2009
geschonden assumpties: Model specificatie geschonden assumpties: meerdere multilevels © ARGO –maart 2009
Multilevel, regressie en assumpties Specificatie error Multilevel, regressie en assumpties © ARGO –april 2009
Multilevel, regressie en assumpties Specificatie error Multilevel, regressie en assumpties © ARGO –april 2009
Multilevel, regressie en assumpties Specificatie error Multilevel, regressie en assumpties © ARGO –april 2009
Multilevel, regressie en assumpties Specificatie error Multilevel, regressie en assumpties © ARGO –april 2009
Multilevel, regressie en assumpties Specificatie error Multilevel, regressie en assumpties © ARGO –april 2009
Multilevel, regressie en assumpties Specificatie error Multilevel, regressie en assumpties © ARGO –april 2009
Random: verwachte waarde 0 (vermoeidheid, gebrek concentratie) meetfouten Meetfouten Random: verwachte waarde 0 (vermoeidheid, gebrek concentratie) Systematisch: verwachte waarde <> 0 (kenmerk respondent van invloed op de keuze van antwoordcategorie; vgl probleem IQ tests ’80 jaren USA caucasian versus rest) © ARGO –april 2009
(culturele) meetfouten Voorbeeld totale score: ‘Geef hieronder uw totale oordeel over de zorg die u van X kreeg, waarbij 0 de slechtst mogelijke en 10 de best mogelijke zorg weergeeft' Heb ik een frame of reference voor dit type vraag? Amerika ja Nederland niet Is het frame of reference uniform? Geldt voor iedereen: je krijgt een 1 voor de moeite. Wat is de consequentie van toepassing van niet-uniforme frame of reference? © ARGO –april 2009
meetfouten Culturele meetfouten © ARGO –april 2009
meetfouten Culturele meetfouten Deze meetfouten zijn niet random verdeeld, maar bijvoorbeeld geografisch of leetijdsgerelateerd. Instelling geografische verankerd, dus culturele invloed via instelling: effecten niet uiteen te rafelen. (vgl. case mix adjustment) In Groningen “niet slecht”, maar in Amsterdam “kan beter” © ARGO –april 2009
meetfouten Culturele meetfouten © ARGO –april 2009