Ontwikkeling en validatie van het GRIF reminder systeem R. Winkens 2, J. van Wersch 3, P. Pop 2 en A. Hasman 1 1 Universiteit Maastricht i.s.m. 2 T&DC Maastricht en 3 Atrium Medisch Centrum Heerlen 2 T&DC Maastricht en 3 Atrium Medisch Centrum Heerlen Rianne Bindels 1

Medical Informatics, Maastricht University Overzicht Wat is het GRIF? Wat is het GRIF? Hoe werkt GRIF? Hoe werkt GRIF? Validatie GRIF Validatie GRIF –Doel –Opzet –Resultaten –Conclusies

Medical Informatics, Maastricht University Wat is GRIF? GRIF Geautomatiseerde Reminders als Interactieve Feedback Doel Bevordering van de rationaliteit van het aanvraaggedrag van huisartsen

Medical Informatics, Maastricht University Persoonlijke feedback T&DC (Winkens et al. 1995) –sinds 1985 –gebaseerd op richtlijnen –speciaal aanvraagformulier Nadelen: –twee maal per jaar, retrospectief –arbeidsintensief Wat is GRIF?

Medical Informatics, Maastricht University GRIF reminder systeem Vertaling van geschreven richtlijnen naar regels Richtlijn Regels

Medical Informatics, Maastricht University Richtlijn Regels GRIF reminder systeem 24 NHG standaarden 24 NHG standaarden 20 regionale werkafspraken 20 regionale werkafspraken

Medical Informatics, Maastricht University diagnostische tests diagnostische tests medische informatie medische informatie leeftijd/geslacht leeftijd/geslacht Richtlijn Regels GRIF reminder systeem 24 NHG standaarden 24 NHG standaarden 20 regionale werkafspraken 20 regionale werkafspraken

Medical Informatics, Maastricht University Richtlijn Regels Opslaan van regels in een Kennisbestand (KB) GRIF reminder systeem KB

Medical Informatics, Maastricht University Richtlijn Regels 149 regels (reminders) 149 regels (reminders) 78 verschillende tests 78 verschillende tests Diverse medische problemen Diverse medische problemen Gebruik ICPC-codes Gebruik ICPC-codes GRIF reminder systeem KB

Medical Informatics, Maastricht University HIS Aanvraag module ICPC- module KB GRIF reminder systeem MicroHis MicroHis –NAW-gegevens –Probleemlijst –Medicatie

Medical Informatics, Maastricht University HIS Aanvraag module ICPC- module KB GRIF reminder systeem Aanvraag module GRIF Aanvraag module GRIF –Vermoedelijke diagnose –Reden van aanvraag –Tests

Medical Informatics, Maastricht University HIS Aanvraag module ICPC- module KB Evaluatie module Reminder Geen reminder GRIF reminder systeem

Medical Informatics, Maastricht University Reminder 1 Reminder 2

Medical Informatics, Maastricht University Validatie Vergelijken van de beoordeling van rationaliteit tussen het GRIF reminder systeem en een expert

Medical Informatics, Maastricht University 253 Formulieren archief T&DC 253 Formulieren archief T&DC Beoordeling rationaliteit door Beoordeling rationaliteit door –reminder systeem –expert –panel van twee deskundigen Consensus van panel als referentie Consensus van panel als referentie Onterechte reminders beoordeeld door panel Onterechte reminders beoordeeld door panel Opzet

Medical Informatics, Maastricht University Totaal: 1225 testaanvragen Totaal: 1225 testaanvragen Gemiddeld per formulier: Gemiddeld per formulier: –5 testaanvragen –2 reminders 28% formulieren > 3 reminders 28% formulieren > 3 reminders Maximum: 8 reminders Maximum: 8 reminders 61 verschillende reminders gevuurd 61 verschillende reminders gevuurd Resultaten (1)

Medical Informatics, Maastricht University Expert Systeem Kappa % Overeenstemming7671 Resultaten (2)

Medical Informatics, Maastricht University Reden Aantal onterechte reminders Systeem checkt niet 17 Impliciete informatie4 Resultaten (3) Totaal24 (5,4%) Ontbrekende ICPC in regel3

Medical Informatics, Maastricht University Overeenstemming %Kappa Panellid 1 - panellid Intrabeoordelaar expert Resultaten (4)

Medical Informatics, Maastricht University Redenen lagere overeenstemming: Redenen lagere overeenstemming: –Slechts 33% adviezen vertaald –Context aanvraag –Constructie reminders Variatie in beoordeling door clinici Variatie in beoordeling door clinici Discussie

Medical Informatics, Maastricht University Conclusie en Toekomst  Evaluatie GRIF in dagelijks gebruik ­Effectiviteit ­Toepasbaarheid  Prestatie systeem acceptabel