Aan: dr. Ate C. Nievaard - Maatschappijwetenschappen ...

Ervaringen met het aanbieden van resultaten
"A sample size of 54 is too small for a largely qualitative study"
(Manuscript 6 / Tijdschrift 6 - Referent 2 / afgewezen)
183
Het is ironisch dat dit een studie betreft met een voor kwalitatief onderzoek
relatief grote steekproef. Deze kritiek is onderdeel van een algemene
negatieve houding van deze referent ten opzichte van kwalitatieve methoden,
zoals blijkt uit het volgende citaat uit hetzelfde lezersrapport:
"It is difficult to have confidence in the conclusions due to potential investigator
bias, small sample size, and highly qualitative methods without clear analytic
methods. [...] Since the investigator and author apparently conducted and interpreted
the interviews him/herself, investigator bias looms large as a threat to the
validity of the conclusions. [...] Certainly, when one has sat through such indepth
interviews and then re-hashed them, impressions emerge. However, without a well
laid-out analysis plan (yes, even for qualitative data), the reviewer and potential
readers cannot be confident that the conclusions are fairly reached"
(Manuscript 6 / Tijdschrift 6 - Referent 2 / afgewezen)
De andere referent bleek al evenmin goed geïnformeerd over kwalitatieve
methoden, hetgeen blijkt uit de verwachting dat ongestructureerde interviews
leiden tot niet-reproduceerbare bevindingen:
"Because the interviews were unstructured, it is not evident that the results
obtained are reproducible"
(Manuscript 6 / Tijdschrift 6 - Referent 1 / afgewezen)
Volgens deze twee referenten leiden kwalitatieve studies bijna automatisch
tot bias en tot onreproduceerbare bevindingen omdat de onderzoeker persoonlijk
betrokken is bij de data-verzameling en analyse. Een andere vorm
van kritiek waaraan kwalitatief onderzoek blootstaat betreft het vermeende
anecdotische karakter van de gegevens en/of van de analyse. Zowel referenten
als redacteuren klagen over lange citaten uit de verzamelde data.
Eén redacteur schrijft in een brief waarbij de lezersrapporten niet worden
bijgesloten dat:
"both referees felt that the paper represented no more than a series of anecdotes
with quotations"
(Manuscript 2 / Tijdschrift 2 - Redacteur / afgewezen)