Inhaltsverzeichnis

Formulierung einer Fragestellung

Am Anfang einer empirischen Studie steht eine Theorie oder Fragestellung, die gleichzeitig einen roten Faden für Studienaufbau und Fragebogengestaltung vorgibt. Daraus werden Hypothesen abgeleitet. Daher ist schon beim Formulieren der Fragestellung besondere Sorgfalt  geboten, die sich an folgendem Beispiel gut veranschaulichen lässt.

Es bleibt festzuhalten:

Eine empirische Arbeit sollte mit einer Forschungsfrage beginnen. Diese wird zuerst durch die Theorie beantwortet, und daraus wiederum Hypothesen abgeleitet. Meist sind mehrfache Revisionen der Hypothesen notwendig, bis daraus überprüfbare Hypothesen geworden sind. Es folgt die Operationalisierung („Messbar- bzw. Beobachtbarmachung“) von Zielgrößen und daraus die Wahl des geeigneten statistischen Verfahrens. Auch der Studienaufbau orientiert sich an den aufgestellten Hypothesen, ebenso die Erhebungsmethode und letztendlich die Erhebung selber. Datenaufbereitung, Auswertung, die Darstellung und Interpretation der Ergebnisse ergeben sich dann zwangsläufig aus den Vorarbeiten.

Die vorgestellten Überlegungen sind unabdingbar für die erfolgreiche Planung und Durchführung einer Umfrage. Diese benötigen nämlich das zeitgleiche Durchdenken der Entwicklung der Fragestellung, der Erhebungsphase und der Analysephase. Auch wenn es schwer fällt, an die Datenauswertung zu denken, bevor überhaupt die erste Information erhoben wurde – genau dies sollte getan werden.

Studienplanung

Aus den zuvor angedachten Schritten lassen sich folgende Fragen für die Studienplanung ableiten:

•         Welche Informationen sollen erfasst werden?
•         Wer wird befragt?
•         Wie viele Personen werden befragt?
•         Wie kann ich diese erreichen?
•         …

Es lohnt sich außerdem, schon im Vorhinein über mögliche Schwächen der erhobenen Daten nachzudenken. Man kann sich zum Beispiel fragen, über wen man Aussagen machen kann, wenn man die Personen wirklich erreicht, die man gerne erreichen möchte. Gleichzeitig ist es eine Überlegung wert, ob man schon einen möglichen Selektionsbias entdecken kann, d.h. ob es Mechanismen gibt, die dafür sorgen, dass nur eine ganz spezielle Gruppe von Menschen erreicht wird. Die Schlüsse, die man anhand dieser Daten zieht, gelten in dem Fall nur für diese ganz spezielle Gruppe von Menschen und nicht für die Allgemeinheit. Bei einer statistischen Erhebung ist es im Idealfall möglich, eine Zufallsstichprobe aus der Grundgesamtheit zu ziehen, über die Aussagen gemacht werden sollen. Damit ist es meist gewährleistet, dass die Stichprobe in Bezug auf zahlreiche Merkmale der Grundgesamtheit sehr ähnlich ist. Trifft dies nicht zu, wie es bei selbsterhobenen Daten oft der Fall ist, ist eine gängige Lösung eine sogenannte Randanpassung an soziodemografische Merkmale. Das bedeutet, dass die Beobachtungen der Stichprobe auf eine bestimmte Art und Weise gewichtet werden, so dass sie repräsentativ für die entsprechende Grundgesamtheit ist. Obwohl diese Methode gut geeignet ist, mögliche Verzerrungen der Stichprobe auszugleichen, empfiehlt es sich, durch sorgfältige Planung einer Erhebung, Verzerrung von vornherein zu vermeiden.

Ein weiteres Thema, welches die Qualität der Daten beeinträchtigen kann, sind fehlende Werte. Auch hier ist es sinnvoll, bereits frühzeitig über Ausfallmechanismen nachzudenken, d.h. was zum Fehlen von Werten führen könnte wie z.B. das zufällige Übersehen einer gesamten Frage oder strukturelle Verweigerung des Beantwortens einzelner Fragen. Hierzu kann es durch nicht eindeutige Fragen kommen oder durch Fragen, die ungern beantwortet werden wie z.B. die Frage nach dem Einkommen.  

Einflüsse auf Antwortverhalten

Selbst wenn die Umfrage theoretisch gut geplant ist, gibt es immer noch Faktoren wie Abbruch, willkürliches Antwortverhalten und Antworttendenzen, die die Vollständigkeit und Validität von Daten gefährden. Sie werden durch zahlreiche „Befindlichkeiten“ der Respondenten verursacht (ein Überblick findet sich in der angehängten Exceltabelle bzw. auf dem Blog von INWT mit anschaulichen Beispielen. Im Folgenden wird auf drei ausgewählte  Einflüsse detailliert eingegangen:

Überforderung tritt aufgrund von schwierigen Wissensfragen auf. Auch missverständliche Fragen können durch Doppeldeutigkeit, Mehrdimensionalität und Fachausdrücke Überforderung verursachen. Einen ähnlichen Effekt haben offene Fragen, zu denen die Befragten keine Idee haben, sich aber verpflichtet fühlen, eine Antwort zu geben. Auch geschlossene Fragen ohne "Weiß nicht"-Kategorie können überfordernd wirken. Fragen zu weit zurückliegenden Ereignissen sind ebenso schwierig zu beantworten.

Frustration tritt oft aufgrund von fehlenden Antwortoptionen oder falscher Navigation auf. Nicht selten sind bei geschlossenen Fragen die Antwortoptionen unvollständig (z.B. wenn nach Retourengründen gefragt wird und z.B. die Variante „Artikel gefällt nicht“ fehlt) oder wenn die Filterführung durch den Fragebogen für nicht bedachte Fälle in eine Sackgasse führt. Dies könnte eintreten, wenn z.B. in einer Kundenzufriedenheitsbefragung nach den Erfahrungen mit der telefonischen Hotline gefragt wird, ohne dass vorher über eine Filterfrage sichergestellt wurde, dass der Kunde diese genutzt hat. In beiden Fällen wird der/die Respondent/in entweder zu falschen Antworten genötigt, um die Befragung fortsetzen zu können oder er/sie bricht frustriert ab.

Verzerrte Antworten durch Bequemlichkeit werden hauptsächlich durch die Reihenfolge der Fragen bzw. der Antworten verursacht. Hierbei können folgende Effekte auftreten: "Primacy" - Antwortkategorien die zu Beginn genannt werden, werden bevorzugt ausgewählt. "Satisficing" - Die befragte Person wählt die erste Antwort aus, die in etwa ihren Ansichten entspricht, ohne sich alle Antwortkategorien angehört/angesehen zu haben. "Recency" - Zuletzt genannte Antworten werden am besten erinnert. Außerdem gibt es eine so genannte "Tendenz zur Mitte" bzw. eine "Tendenz nach links" (letztere ist - nach einigen Studien - insbesondere auf Likert-Skalen (siehe Beispiel) zu beobachten und steht in Zusammenhang mit der Schreibrichtung).

Befragungstyp

Eine wichtige Vorüberlegung ist, mit welchem Instrument die Befragung durchgeführt werden soll. Neben dem persönlichen Interview stehen telefonische oder postalische Befragung sowie  internetbasierte Umfragen zur Verfügung. Alle Instrumente haben Vor- und Nachteile, die im Folgenden besprochen werden.

Generell richtet sich die Wahl des Befragungstyps nach folgenden Punkten:

• Anzahl der vorgesehenen Studienteilnehmer (persönliches Interview bei sehr großer Teilnehmerzahl nicht adäquat)
• Studienziel
• Studienpopulation
• Zugang zu Studienteilnehmern (Patienten in einem Krankenhaus können besser per „Stationsbesuch“ befragt werden, Umfragen zur Verbrauchererwartung werden über einen Internetlink erreicht)
• Länge / Dauer der Befragung
• notwendige Informationen (muss der Teilnehmer noch Unterlagen heraussuchen?)
• Ressourcen (Zeit, Budget, Personal)

Generell spielen sowohl inhaltliche als auch organisatorische Rahmenbedingungen eine Rolle bei der Entscheidung, welcher Befragungstyp am besten geeignet ist. Daher müssen neben der inhaltlichen Gestaltung auch folgende Eigenschaften beachtet werden.  

Die Rücklaufquoten unterscheiden sich erheblich zwischen den Befragungstypen. Wenn also nur wenige potentielle Studienteilnehmer zur Verfügung stehen, wird ein Befragungstyp mit einer möglichst hohen Rücklaufquote gewählt, auch wenn der Aufwand hoch ist.

Ebenfalls muss überlegt werden, wie viel Zeit für die Datenerhebung per Fragebogen zur Verfügung steht. Die benötigten Zeiträume für Vorbereitung und Durchführung variieren zwischen den Befragungstypen stark.

Zusätzlich kann überprüft werden, ob die Zugabe von Incentives – ein Anreiz, der zur Teilnahme motiviert – sinnvoll und möglich ist, um die Teilnahmebereitschaft zu erhöhen. Je nach Befragungstyp stehen unterschiedliche Arten von Incentives zur Verfügung. Im Umgang mit Incentives ist allerdings Vorsicht geboten, da es durch die unterschiedlichen Bedürfnisse der Studienteilnehmer und somit der unterschiedlichen Teilnahmebereitschaft zu Verzerrungen der Ergebnisse kommen kann (Personen ohne Geld nehmen evtl. eher an einer Umfrage mit einem Gutschein als Incentive teil als Personen mit Geld. Wenn sich dann die inhaltlichen Antworten zwischen diesen beiden Gruppen unterscheiden, kommt es zu verzerrten Ergebnissen).

Nicht zuletzt wird auch schon bei der Wahl des Befragungstyps festgelegt, auf welchem Weg die erhobenen Daten in einer Datentabelle abgelegt werden. Werden die Daten bereits während der Befragung elektronisch erfasst (Internetumfrage, Eingabe während Interview), dann bereitet dieser Schritt kaum Probleme. Bei einer Datenerfassung auf Papier sollte überlegt werden, wer die Daten eingibt, und ggf. muss eine entsprechende Eingabemaske entwickelt werden.

Es wird unterschieden zwischen den folgenden Befragungstypen:

• Persönliches Interview
• Telefonische Befragung
• Schriftliche Befragung
• Internetbasierte Befragung

Selektionsbias

Bei der Auswertung der Daten muss auch über eine mögliche Verzerrung nachgedacht werden, den sogenannten Selektionsbias. Was unterscheidet die (freiwilligen) Teilnehmer/-innen von denen, die ihre Teilnahme verweigern? Meist spielt die Motivation eine große Rolle bei der Teilnahmeentscheidung. Personen, die sich für das Studienziel interessieren, haben eine größere Teilnahmebereitschaft als nicht interessierte Personen. Die Erhöhung oder Herausstellung der Motivation kann die Teilnahmebereitschaft erhöhen. Aber auch der Zeit- und Arbeitsaufwand im Verhältnis zur verfügbaren Zeit nimmt großen Einfluss. Ein Patient/eine Patientin im Krankenhaus, der/die über seine eigene Krankheit befragt wird und sich vielleicht im Krankenhaus langweilt, wird einer Befragung vermutlich zustimmen. Ein/e Manager/Managerin, der/die über sein Einkaufsverhalten im Supermarkt befragt werden soll, wird vermutlich eher nicht zustimmen. Diese Verzerrung kann in keinem Befragungstyp ausgeschlossen werden und muss in jeder Arbeit thematisiert werden.

Darüber hinaus kann es auch eine Selektion geben, weil nicht alle Personen die gleiche Chance hatten, überhaupt um Teilnahme gebeten zu werden. So kann eine Internetumfrage nur von Personen mit Zugang zum Internet ausgefüllt werden und auch nur von solchen Personen, die von dieser Umfrage erfahren haben (E-Mail-Verteiler, soziale Netzwerke). Wo stammen die Adressen für postalische Umfragen her? Wie viele Personen gehören noch zur Studienpopulation, die keinen Brief erhalten haben? Dies sind Fragen, die immer im Hinterkopf behalten werden sollten.

Fragentypen

Wenn Sie sich für einen Befragungstyp entschieden haben, kommt die Phase der konkreten Gestaltung des Fragebogens. Dazu gilt es zunächst den richtigen Fragentyp für die entsprechende Fragestellung zu finden. Im Folgenden soll kurz darauf eingegangen werden, welcher Fragentyp für welche Frage geeignet ist. Dabei ist zu beachten, dass die Typen sich nicht immer klar voneinander abgrenzen, sondern vielmehr fließend ineinander übergehen.

Geschlossene Fragen / offene Fragen (Freitext)

Prinzipiell bietet es sich an, hauptsächlich geschlossene Fragen zu verwenden. Das erleichtert zum einen den Respondenten die Beantwortung der Frage. Es hat sich gezeigt, dass offene Fragen generell seltener ausgefüllt werden – insbesondere wenn umfangreichere Antworten abgefragt werden. Zum anderen erleichtert es die standardisierte Auswertung. Die Sichtung einer umfassenden Sammlung von Freitextkommentaren nimmt viel Zeit in Anspruch. Des Weiteren lassen sich die Ergebnisse selten zusammenfassen bzw. nur mit einer großen Portion Subjektivität. Offene Fragen können jedoch sinnvoll sein, wenn vorgegebene Kategorien zu Verzerrungen führen können wie bspw. bei Fragen zur Vergangenheit oder schwierig einzuschätzendem Verhalten z.B. „Wie reagieren Sie, wenn Sie einen Überfall aus der Straße beobachten?“. Bei geschlossenen Fragen sollten Sie trotz aller Vorteile die Antwortoptionen (u.a. auch im Rahmen von qualitativen Voruntersuchungen und dem Pre-Test) sorgfältig auswählen.

 Zum Umgang mit Abbildungen und Tabellen

 Format im Text

Abbildungen und Tabellen werden zentriert. Alle Abbildungen besitzen eine Bildüberschrift, die Teil der Abbildung ist. Wenn dies nicht möglich ist, dann wird entsprechend im Wiki-Editor eine zentrierte Überschrift hinzugefügt. Nach Möglichkeit sollten Bilder eine Überschrift als Eigenschaft haben.