Detailansicht
Statistical reporting and its credibility in student theses of economic psychology : an analysis of 254 theses from 2000-2016
Johanna Mosen
Art der Arbeit
Masterarbeit
Universität
Universität Wien
Fakultät
Fakultät für Psychologie
Studiumsbezeichnung bzw. Universitätlehrgang (ULG)
Masterstudium Psychologie
Betreuer*in
Erich Kirchler
DOI
10.25365/thesis.46466
URN
urn:nbn:at:at-ubw:1-29981.27875.819553-4
Link zu u:search
(Print-Exemplar eventuell in Bibliothek verfügbar)
Abstracts
Abstract
(Deutsch)
Einige Wissenschaftler fanden über die Untersuchung statistischer Kennwerte in psychologischen Studien, über Replikationsversuche und qualitative Erhebungen Hinweise darauf, dass Daten verzerrt dargestellt werden. Basierend darauf war das Ziel dieser Arbeit insbesondere zwei dieser identifizierten Phänomene zu erforschen. Zum einen den bekannten Publication Bias, der dafür steht, dass bevorzugt signifikante Ergebnisse berichtet und veröffentlicht werden, bzw. das File drawer problem, das beschreibt, dass nicht signifikante Ergebnisse in der Schublade landen, und zum anderen das Phänomen p-hacking, welches die Manipulation von ganzen Studien oder einzelnen Analysen bezeichnet, um dadurch unter die berühmte Signifikanzgrenze von .05 zu gelangen.
Die im Vordergrund stehende Erklärung dieser Phänomene und Datenverzerrung geht darauf zurück, dass vorzugsweise interessante und signifikante Ergebnisse veröffentlicht werden und Wissenschaftler aufgrund dessen einem hohen Publikationsdruck ausgesetzt sind.
Die Forschungsfrage möchte daher untersuchen, ob auch Studierenden diese sogenannten „Fragwürdigen Forschungspraktiken“ (questionable research practices) anwenden. Dafür wurde in dieser Masterarbeit die statistische Berichterstattung in 254 studentischen Abschlussarbeiten aus dem Bereich der Wirtschaftspsychologie überprüft. Aus einer Abschlussarbeit wurden insgesamt 74 Merkmale mit Hilfe eines Kodierungsschemas erhoben. Dessen Auswertung der statistischen Kennwerte (p-Werte, Effektgrößen, Power,…) ergab, dass die Phänomene, wie angenommen aufgrund des fehlenden Publikationsdrucks, hier nicht auftraten. Die Resultate sprechen dafür, dass Studenten auch nicht signifikante Ergebnisse berichten und keine Manipulationen zur Signifikanzerreichung anwenden.
Abstract
(Englisch)
Scientists give evidence with the help of applying analyses of statistical data in psychological studies, replication experiments and qualitative surveys that psychological data is reported distorted. Based on this, the aim of this study was to explore two of their identified phenomena. On the one hand the well-known publication bias, which states that preferably significant results are reported and published, or respectively the file drawer problem, which describes the fact that non-significant results remain in the drawer, and on the other hand the phenomenon p-hacking, which refers to the manipulation of whole studies or individual analyses in order to get under the well-known significance limit of .05.
The dominant explanation of the phenomena and occurring data distortion is that only interesting and significant results are getting published, and therefore, scientists are exposed to a high publication pressure.
Therefore, the research question would like to examine whether these so-called questionable research practices are also applied among students. In this master thesis, the statistical reporting of 254 student theses from the field of economic psychology were examined. With a coding scheme, a total of 74 characteristics were coded out of one thesis. Its evaluation of the statistical characteristic values (p-values, effect variables, power ...) showed that the phenomena did not occur, as assumed due to the suggested lack of publication pressure. The results suggest that students do report non-significant results as well as significant results and do not use manipulations to achieve the significance limit.
Schlagwörter
Schlagwörter
(Englisch)
publication bias file drawer problem p-hacking significance statistical reporting questionable research practice
Schlagwörter
(Deutsch)
Publication Bias File drawer problem p-hacking Signifikanz statistische Berichterstattung questionable research practice
Autor*innen
Johanna Mosen
Haupttitel (Englisch)
Statistical reporting and its credibility in student theses of economic psychology : an analysis of 254 theses from 2000-2016
Paralleltitel (Deutsch)
Statistische Berichterstattung und ihre Glaubwürdigkeit in studentischen Abschlussarbeiten der Wirtschaftspsychologie: Eine Analyse von 254 Abschlussarbeiten von 2000-2016
Publikationsjahr
2017
Umfangsangabe
III, 41 Seiten : Diagramme
Sprache
Englisch
Beurteiler*in
Erich Kirchler
Klassifikation
77 Psychologie > 77.00 Psychologie: Allgemeines
AC Nummer
AC13781841
Utheses ID
41121
Studienkennzahl
UA | 066 | 840 | |
