De presentatie wordt gedownload. Even geduld aub

De presentatie wordt gedownload. Even geduld aub

Rapporteren over Resultaten Jaarvergadering CBF December 2012 Prof. dr. Ruerd Ruben Directeur Inspectie Ontwikkelingssamenwerking & Beleidsevaluatie (IOB)

Verwante presentaties


Presentatie over: "Rapporteren over Resultaten Jaarvergadering CBF December 2012 Prof. dr. Ruerd Ruben Directeur Inspectie Ontwikkelingssamenwerking & Beleidsevaluatie (IOB)"— Transcript van de presentatie:

1 Rapporteren over Resultaten Jaarvergadering CBF December 2012 Prof. dr. Ruerd Ruben Directeur Inspectie Ontwikkelingssamenwerking & Beleidsevaluatie (IOB)

2 Verantwoording van Resultaten 2 1.CBF : ‘weet waarvoor je geeft’ – Zo zorgt het CBF ervoor …. dat we erop kunnen vertrouwen dat goede doelen verstandig (met de giften) omgaan. 2.Legitimiteit en Vertrouwen - van ‘rechtmatigheid’ naar ‘doelmatigheid’ + ‘doeltreffendheid’ 3.Evalueren = Systematisch verzamelen, interpreteren en presenteren van informatie teneinde de waarde van een programma te bepalen.

3 5 belangrijke lessen 3 1.Effectiviteit is een noodzakelijke voorwaarde voor maatschappelijk vertrouwen 2.Programma’s worden beoordeeld op ‘value for money’ 3.Evaluatie begint bij de start van het programma 4.Impactmeting kan in bijna elk project 5.Evaluatie is een investering, geen ‘overhead’

4 4 Over IOB Mandaat & Werkwijze • Beoordeling van de beleidseffectiviteit • Leren van ervaringen • Verbeteren ‘evidence-based’ beleidsvoering Verantwoording afleggen aan Parlement, Publiek en Samenleving Bijdragen aan Transparantie & Vertrouwen

5 5 Context: Afnemend vertrouwen ( ) Donateurs vertrouwen Consumenten vertrouwen

6 Reputatie & Vertrouwen “Trust me” Tell me” “Show me” “Trust me” Inzicht in effectiviteit is een noodzakelijke (maar niet voldoende) voorwaarde voor maatschappelijk vertrouwen “Tell me”

7 7 B&M Gates Foundation: ‘Innovation with Impact’

8 8 Informatie over goede doelen

9 9 Leren van fouten

10 Effectiviteit = Value for Money • Zinvolle resultaten (‘meaningful results’) • Netto effecten (bijdrage van het project) • Kosten-effectiviteit (efficiency) • Attributie/Contributie • Additionaliteit • Zakelijkheid

11 Kosten van evaluatie: max 1-2 %

12 Quality at Entry 12 1.Heldere resultaatketen 2.Haalbare doelen 3.Meetbare indicatoren 4.Zicht op risico’s 5.Eerlijke Kosten/baten

13 Van Input naar Impact Outreach= aantal clienten

14 Robuuste impactmeting Impact meting = vergelijking van: • voor/na interventie (over de tijd) • met/zonder interventie (counterfactual) Verschillende methoden beschikbaar (e.g. story harvesting, outcome mapping, SROI, etc) (Zie: NONIE Guidelines ; 3ie) Tijd Doel zonder met T=0T=1

15 Difference – in – Difference VoorafAchteraf Met ProgrammaAB Zonder ProgrammaCD

16 16 Lessen uit Impact evaluaties (1) E-coli in rurale waterbronnen (Benin) – bron: IOB Impact meting: ● Meting van Waterkwaliteit ● Interactie Water-Sanitatie ● Infrastructuur + Gedrag Geleerde Lessen: ● Output is o.k. ● Impact verdwijnt ● Integraal beheer nodig ● Samenwerking meerdere partners

17 17 Lessen uit Impact evaluaties (2) Impact meting: ● Meting van schoolresultaten ● Kosteneffectiviteit ● Verschillende investeringsopties Geleerde Lessen: ● Genoeg schoolgebouwen ● Tekort aan leermiddelen ● Voldoende leraren ● Gebrekkige aanwezigheid docenten Effecten van onderwijsinvesteringen (Oeganda) – bron: IOB

18 Keuze van methoden Story harvesting Outcome mapping Robuuste Impact studies Experimenten (RCTs/Real-time evaluation) Systematische Reviews (Campbell protocol) Thematische studies (Kritische succes factoren)

19 Experimenten (RCTs) ● Nadruk op (kleinschalige) experimenten ● A-selecte keuze van deelnemers ● Uitzoeken ‘wat werkt’ ● Geen selectie-effecten ● Toepassingen: trainingen schooldeelname individuele/groepsleningen

20 ‘Results-based’ financiering - Gebaseerd op achteraf betaling (cash on delivery) - Voor/mede-financiering door clienten - Combinatie van lening & schenking - Onafhankelijke verificatie / transparantie - Lokale uitvoerings verantwoordelijkheid - Toepassingen in onderwijs, wegenonderhoud, drinkwater, ed.

21 Frontloading: resultaten naar voren halen

22 22 Evaluatie hulpmiddelen

23 Belangrijkste Uitdagingen Onafhankelijkheid van de Evaluatiefunctie Focus op Evalueerbaarheid Deelname van lokale partners (RCTs) Open datasystemen (bv. Ngo-database.nl; Kennisbank filantropie.nl) Openheid over Successen én Mislukkingen Uitzicht bieden op duurzame netto effecten

24 Veel succes gewenst …


Download ppt "Rapporteren over Resultaten Jaarvergadering CBF December 2012 Prof. dr. Ruerd Ruben Directeur Inspectie Ontwikkelingssamenwerking & Beleidsevaluatie (IOB)"

Verwante presentaties


Ads door Google