„To force or not to force. That is the question!“: Die Auswirkungen des Einsatzes von Forced-Response-Fragen auf die Qualität der Befragungsergebnisse

in Verhandlungen der Kongresse der Deutschen Gesellschaft für Soziologie (2015), 1

Die Methode der Onlinebefragung hat sich innerhalb des letzten Jahrzehnts als Befragungsroutine etabliert. Sie ist zumeist mit niedrigen Kosten verbunden und ermöglicht es innerhalb kürzester Zeit hohe ... [more ▼]

Die Methode der Onlinebefragung hat sich innerhalb des letzten Jahrzehnts als Befragungsroutine etabliert. Sie ist zumeist mit niedrigen Kosten verbunden und ermöglicht es innerhalb kürzester Zeit hohe Fallzahlen zu erzielen sowie „fundierte“ Ergebnisse zu generieren. Dies führte einerseits zu einer Demokratisierung der Umfrageforschung, denn mithilfe der Onlinebefragung ist es nahezu jedem möglich ein Befragungsprojekt durchzuführen. Andererseits resultiert daraus aber auch, dass viele Befragungen von Laien durchgeführt werden, dadurch eine schlechte Qualität aufweisen und zahlreiche Operationalisierungsfehler enthalten. Ein Beispiel hierfür ist die Verwendung der Forced Response Option, deren Auswirkungen innerhalb dieses Forschungsprojektes untersucht werden. Theoretischer Hintergrund des Projektes Als Forced-Response wird allgemein die Möglichkeit bezeichnet den Respondenten einer Umfrage zur Beantwortung einer Frage zu verpflichten. Bei den meisten Programmpaketen zur Durchführung eines Onlinesurveys ist dies auf einfachste Art und Weise zu realisieren. Diese Praxis kommt zuweilen sehr häufig auch zur Anwendung, ohne dass sich die Fragesteller über eventuelle Folgen ihrer Wahl bewusst sind. In den Handbüchern der Programme wird diese Option als eine Lösung angepriesen, die den Item Non Response verringert. In der Methodenliteratur gibt es jedoch zahlreiche Bedenken und Gegenstimmen für diese Vor-gehens¬weise. Diese Bedenken speisen sich aus der Über¬legung, dass der Befragte plausible Gründe haben kann, um nicht zu antworten (der Befragte versteht die Frage nicht, die entsprechende Antwortkategorie fehlt, der Befragte will die Frage aus persönlichen Gründen bewusst nicht beantworten, usw.). Verpflichtet man den Befragten unter diesen Umständen eine Antwort zu geben, könnte dies möglicherweise dazu führen, dass die Befragung abgebrochen wird oder der Befragte eine willkürliche/inhaltsunabhängige Antwort gibt. Forschungshypothesen und Design Zusammenfassend lassen sich damit zwei zentrale Thesen aufstellen: 1. Forced-Response führt zu erhöhtem Unit Non Response. 2. Forced-Response führt zu weniger validen Antworten (Lügen oder Zufallsantwort). Allerdings gibt es bisher kaum empirische Untersuchungen, die diese Behauptungen belegen. Hier setzt diese Studie an und untersucht über ein Split Ballot Experiment die Folgen der Implementierung der Forced-Response-Option. Ergebnisse Diese zeigen, dass die Respondenten früher abbrechen beziehungsweise die neu¬trale Antwortkategorie häufiger wählen. Weiterhin zeigt sich, dass unter Antwortzwang die sozial wünschenswerte Antwortkategorie signifikant häufiger gewählt wurde [less ▲]