Questionable research practices Confronteert met hoe we wetenschap bedrijven 1. Verification bias & missing replications 2. Incomplete or incorrect information.

Slides:



Advertisements
Verwante presentaties
Nieuw tijdschrift voor praktijkonderzoek Onder auspiciën van de NOSMO.
Advertisements

Binden en Boeien van Jonge Talenten
Enkele Determinanten van Peer Review Presentatie werkstuk Geert Wissink Universiteit van Amsterdam, 13 januari 2003.
BEROEPSTROTS EN PROFESSIONALS
Medezeggenschap en de Benchmark
WORKSHOP GESLAAGD IN HET VAK: ROC MONDRIAAN – DE HAAGSE HOGESCHOOL 3 OKTOBER 2013 ONDERNEMERSCHAP EN ONDERWIJS.
Ontwerpprojecten In de praktijk
“Projectmanagement in het hoger onderwijs”
Marit van Albada Máxima Medisch Centrum Oncologisch/ trombose centrum
Centre of Expertise Watertechnologie CEW Leeuwarden, 25 mei 2011.
Praktische zaken Tineke Choi MSc studieadviseur.
Een strakke workflow als hulpmiddel voor online samenwerking. Jikke de Groot Universiteitsbibliotheek/ Universiteit Utrecht Sector Innovatie & Ontwikkeling.
Synthese Artikel Onderwerpsverkenning
LAATSTE SCRIPTIESEMINARIE
ZXCVBNZXCVBN. HCI Human Computer Interaction HCI = Designing products people love to use.
Hoofdstuk 7 Procesmanagement.
Hoofdstuk 2 Het onderzoeksonderwerp formuleren en verduidelijken Methoden en technieken van onderzoek, 5e editie, Mark Saunders, Philip Lewis, Adrian.
Hoofdstuk 11 Kwantitatieve gegevens analyseren Methoden en technieken van onderzoek, 5e editie, Mark Saunders, Philip Lewis, Adrian Thornhill, Marije.
LPC R&D-aanpak in ontwikkeling Anje Ros, KPC Groep Martin van Reeuwijk, APS Gert Kamphof, CPS Lessen uit onderzoek, Tussen onderzoek en praktijk.
Onderzoek door lerarenopleiders: praktijkgericht en academisch?
Literatuuronderzoek en veldonderzoek
Wetenschap & Technologie Rol van opleiding en onderzoek in de innovatieketen Karen Maex, vicerector.
Stand van zaken Associate degree 12 mei Beleidsreactie ► Tussenevaluatie: november 2008 ► Naar de TK: januari 2009 ► Verzoek om reactie: uiterlijk.
LauwersCollege Buitenpost Informatica
ACADEMISCH SCHe vaardigheden - C1.1
MVO - IT Planning. Bestaand Bol 2Bol 2 Leerjaar 1Leerjaar 2 Sem 1Sem 2Sem 3Sem 4 Pe rio 1 Pe rio 2 Pe rio 3 Pe rio 4 Pe rio 5 Pe rio 6 Pe rio 7 Pe rio.
Toekomst – Welke kant gaat u op?. Klant i.p.v. patiënt/cliënt; Output financiering; Marktwerking; ……………………… Waarom.
Welkom welkom.
coördinator gezondheidsrecht KNMG
Improving health by sharing science 11/09/2014 ICT en datakwaliteit: een goede relatie? Ariaan Siezen - Nijmegen ICT coördinator Radboud Biobank/Parelsnoer.
Inhoud workshop Wat is de bedoeling van het V2- assessment?
Presentatie projectplan werkgroepen
Veiligheid gegarandeerd en privacy gered
Parallelsessie 1.3 Ervaringen met diverse technieken voor studietijd en studeerbaarheid V an aanvraag tot verwerking Michel Maricau KHBO.
Introductiebijeenkomst Waardigheid & trots
Hypnose bij het prikkelbare darmsyndroom
Lezen: doe het goed voor
Onderwijsvernieuwingen: onderwijskunde, innovatietheorie en maatschappelijke context LA
Het jaar van de waarheid!
Verpleegkundig redeneren
Twente, de meest ondernemende hightech regio van Nederland.
27 september 2006Doorlopende leerlijnen in de beroepskolom Doorlopende Leerlijnen in de Beroepskolom vo-mbo-hbo-wo Introductiebijeenkomst 27 September.
Levensfasebewust personeelsbeleid en PROS 2007 Impuls voor het binden & boeien van medewerkers.
Betrouwbare iOverheid en het belang van duurzame toegankelijkheid André Plat – Projectcoördinator duto-DO - Nationaal Archief Erik Saaman– Projectleider.
Werkplaats Communicatie Optimaal communiceren: Hoe doe je dat ? Uitwerking aspect “communicatie rondom burgerinitiatieven” Presentatie werkplaats communicatie.
ALLE GOEDS GEWENST VOOR 2014!. We komen van alles tegen op ons pad, breng steeds de moed op het ware, het goede te doen The other wise man (1895), Henry.
‘ Weg met de student ‘ Weg met de student Rene F.W. Diekstra.
Rapportage ‘Over leven met dieren’ “Na zaaien komt oogsten”
DE INVLOED VAN EEN ONDERZOEKSTRAJECT (OP DE WERKPLEK) OP DE ONDERZOEKENDE HOUDING VAN LERAREN IN OPLEIDING Twan van de Wetering - Docent Engels - Lid Kenniskring.
Betrokkenheid in kaart gebracht Ontwikkeling en gebruik van de Triadekaart in de GGZ Jooske van Busschbach Kerstin Wolters Hannie Boumans.
SoMeRe.nl Een uitnodiging Sjoerd de Vries & Efthymios Constantinides.
Zorginkoop op weg naar volwassenheid NEVI Inkoopdag 23 juni 2016 Prof dr ERIK M VAN RAAIJ PETER DOHMEN
Onderwijskwaliteit: een zaak voor peers onder elkaar, of voor politiek en democratie?
Het onderzoeksverslag
Wies Vullings, Wageningen University and Research
Belasting en de overheid
Begeleiding bij Werkplekleren
Analyse van het studiekeuzeadvies binnen het Ichthus Lyceum
Begeleiden van Praktijkonderzoek
1. Bestaan er slechte uitvindingen?
voormalig directeur De Letselschade Raad
Teken je toetsprogramma!
ONDERWIJS EN ARBEIDSMARKT
Dierproeven. Leg dat maar eens uit!
De Sensatie van een Goed Leven Prikkelverwerking bij mensen met autisme en een verstandelijke beperking Samen ontwikkelen van een ‘zorgtraject’ voor begrip.
Samen broeden: MBO Barneveld en de beroepspraktijk
Monitoren Kwaliteit van opleiden
Marie Curie IEF, ERG Ilse Rooman november 2009
Boeien en binden van goede medewerkers
Aan de slag met werkdruk: nieuwe plannen uit de sector
Transcript van de presentatie:

Questionable research practices Confronteert met hoe we wetenschap bedrijven 1. Verification bias & missing replications 2. Incomplete or incorrect information about the research procedure 3. Statistical flaws

1. Verification bias & missing replications * Simmons nelson simmonsohn (researchers degrees of freedom) - weglaten van outliners - niet alle variabelen melden - niet alle manipulaties melden - role of journals/reviewers - techniek die de meeste wenselijke resultaten laat zien - onderzoeken waarom datasets niet de verwachte resultaten opleveren en waarom ze wel de verwachte resultaten opleveren - wat betekenen hele kleine en hele grote uitkomsten (methode checken) -Voorbeeld: SEM (structural equation modelling) Interpretatie van een modelfit zegt niets. Toetsen in de empirie nodig. Aanbeveling: plausibel rival hypothisis, wetenschappelijke beloningsstructuur aanpassen op langere termijn en idee, transparantie, max 1 artikel per jaar, werkmethode vastleggen

2. Incomplete or incorrect information about the research procedure Voorbeelden: Verzoek om artikel in te korten; wat laat je weg? Meetmethode? Aantal proefpersonen niet duidelijk (meld afwijkingen). Aanbevelingen: - Cultuur waarin het normaal is om huidige zaken te bespreken (critical friends), aandacht voor ongewenste concurrentie, open cultuur, reviewer is NOT always right, zelf het goede voorbeeld geven - onderwijs aanpakken; studenten beter opleiden; geen druk om te resultaten te vinden - Idee en kwaliteit van onderzoek prevaleren; minder beoordelen op output. - belang peer reviewers op de eigen gang versterken. - beschermen van de wissleblower - beschermen autonomie van de jonge onderzoeker - wetenschappers moeten kunnen groeien

3. Statistical flaws Voorbeelden: -Afronden - Groot % fouten in publicaties Aanbevelingen: -Basis statistics rapporteren -Simpele methode kiezen -Opleiden van (nieuwe) wetenschappers op het juiste moment in de opleiding -Juiste specialisten in huis; goed organiseren; inbedden. -Rehabilitatie van het vak voor allen