Empirisch onderzoek

1. Empirisch onderzoek Leerkring Publiek Management Albert Meijer Utrecht School of Governance Bijeenkomst 3: 25 februari 2011

2. Methodologie is voor de dommen!

3. Opbouw • Onderzoeksopzet • Observaties • Gevalsstudies • Bestaand materiaal • Interviews • Ethische principes

4. Onderzoeksopzet • Strategie • Methode • Techniek • Triangulatie

5. VB: Europaproof? VRAAG: In hoeverre draagt deelname in een intergemeentelijk samenwerkingsverband bij aan het ‘Europaproof’ worden van gemeenten? • Op welke manieren nemen gemeenten deel aan het samenwerkingsverband van de Stadsregio Arnhem Nijmegen? • In welke mate zijn de gemeenten in dit samenwerkingsverband Europaproof? • Is er een verband tussen de mate van deelname aan het samenwerkingsverband en de mate van Europaproofheid?

6. Onderzoeksopzet

7. Voorbeeld: Co-creatie VRAAG: Hoe kunnen overheden het Internet gebruiken om via co-creatie met digitale gemeenschappen de participatie in verschillende fasen van beleid te vergroten? • Agendavorming. Hoe kunnen overheden het Internet gebruiken om via co-creatie met digitale gemeenschappen de participatie in de agendavorming te vergroten? • Beleidsontwikkeling. Hoe kunnen overheden het Internet gebruiken om via co-creatie met digitale gemeenschappen de participatie in de beleidsontwikkeling te vergroten? • Dienstverlening. Hoe kunnen overheden het Internet gebruiken om via co-creatie met digitale gemeenschappen de participatie in de dienstverlening te vergroten? • Handhaving en toezicht. Hoe kunnen overheden het Internet gebruiken om via co-creatie met digitale gemeenschappen de participatie in handhaving en toezicht te vergroten?

8. Onderzoeksopzet

9. Methoden • Selecteren • Meten • Analyseren

10. Observaties Observeren is het volledig beschrijven van een handeling van de persoon die men waarneemt in zijn omgeving. • Rollen van de observator • Mate van structuur

11. Verborgen observaties

12. Open observaties

13. Participerende observatie

14. Structuur van de observaties • Gestructureerd • Proefschrift Mirko • Ongestructureerd • Karin in Brussel

15. Toepassing • Meetinstrument • Metingen: waar, wanneer en hoe • Analyse: kwantitatief en kwalitatief EN: behoud een open blik!

16. Combinatie met andere instrumenten • Bestuurskundig onderzoek • Onderzoek van Gijs Jan • Ethnografisch onderzoek • Informele interviews • Observatie • Participatie • Groepsgesprekken • Mensen vragen om dagboeken bij te houden • Levensgeschiedenissen

17. Klassieke case-studies • Pressman & Wildawsky: Implementation: how great expectations in Washington are dashed in Oakland (…) • Kaufman: The Forest Ranger • Allison & Zelikow: The Essence of Decision • Ook: Noordegraaf, Geuijen, Meijer

18. Definitie Bij een case-study (…) gaat het om de bestudering van een sociaal verschijnsel: • Bij een beperkt aantal dragers van het verschijnsel • In de natuurlijke omgeving • Over een bepaalde periode • Met gebruik van diverse databronnen • Gericht op tal van variabelen • Verklaringen worden getoetst door de onderzochten

19. Positivistische versusinterpretatieve case studies

20. Waarom een case study? • Positieve overwegingen • Gedetailleerde kennis helpt bij het verfijnen van (causale) modellen. • De verschillende interacties worden in kaart gebracht. • Er is aandacht voor de verschillende verklaringen van de betrokkenen. • Case studies bieden een basis voor ontwerp. • Negatieve overwegingen • We kunnen het verschijnsel nog niet goed isoleren. • Experimenteren is niet mogelijk. • Het verschijnsel is zeer zeldzaam.

21. Keuzen bij casusonderzoek • Cases • Meetmomenten • Onderzoeksmethoden

22. Casusselectie • Mogelijke designs: • Most similar cases • Most different cases • Most advanced cases • Extreme cases • Critical cases • Risico’s: • Onterecht oorzaak toewijzen • Case contaminatie

23. Versterken van case study • Meerdere subeenheden • Meerdere meetmomenten • Meerdere instrumenten • Expertoordelen

24. Analyse van data • Het doel van een analyse is om specifieke verklaringen voor een situatie te transformeren in algemene verklaringen. • Aandachtspunten: • Casusvergelijking (comparative method) • Process tracing • Typological theorizing

25. Analyse van het materiaal: datamatrix

27. Patronen tussen variabelen

28. Voorbeeld

29. Rapporteren van resultaten • Per casus • Per thema • Per onderzoeksmethode

30. Andere toepassingen van cases • Advieswerk • Beleidswerk • Onderwijs Centraal staat steeds het holistische karakter van de case!

31. Gebruik van bestaand materiaal • Bronnen • Beleidsnota’s • Jurisprudentie • Jaarverslagen • Onderzoeksrapporten • Krantenberichten • Internetdiscussies • E-mail-berichten

32. Karakter • Primair: Informatie die nog niet is gebruikt voor onderzoek. • Neerslag van gedrag • Communicatieve boodschap • Secundair: Hergebruik van eerdere onderzoeksbevindingen • Statistische bestanden • Publicaties

33. Nut • Historisch onderzoek • Moeilijk te bevragen of observeren verschijnselen • Directe toegang tot communicatie • Makkelijk te verwerken • Weinig medewerking vereist

34. Selectie van bronnen • Selectief • Aselectief

35. Inhoudsanalyse • Vaststellen van feiten en opvattingen • Reconstrueren van gebruikte argumentaties

36. Interviews: enkele punten • Respondenten versus informanten. • Gestructureerd versus ongestructureerd. • Opnemen versus een verslag maken. • Leidend principe: informatierijkheid!

37. Ethische principes • Respect: geen personen tegen hun wil of onwetend onderzoeken. • Goedwillendheid: de onderzochte personen geen schade toebrengen • Rechtvaardigheid: alle onderzochte personen evenveel voordeel (of nadeel) • Vertrouwen: vertrouwelijk omgaan met gegevens • Wetenschappelijke integriteit: eerlijk rapporteren