| Beide Seiten der vorigen RevisionVorhergehende ÜberarbeitungNächste Überarbeitung | Vorhergehende Überarbeitung |
| de:create:tips [12.08.2022 19:30] – admin | de:create:tips [23.10.2026 14:44] (aktuell) – Externe Bearbeitung 127.0.0.1 |
|---|
| ==== Forschungsfragen und Testfragen trennen ==== | ==== Forschungsfragen und Testfragen trennen ==== |
| |
| Die Fragen, die man im Fragebogen stellt, werden in Anlehnung an psychologische Testverfahren auch als //Testfragen// bezeichnet. Ihre Formulierung trägt maßgeblich zur Qualität eines Fragebogens bei. Der häufigste Fehler bei der Formulierung von Testfragen ist, dass die Frage sich zu sehr am Forschungsvorhaben orientiert ("Zu wie vielen Prozent wurde Ihre Entscheidung von dem vorhin präsentierten Werbemittel beeinflusst?"). Der zweit häufigste Fehler ist, dass sich die Testfrage zu wenig am Forschungsvorhaben orientiert. Und in beiden Fällen liegt das Problem meist darin, dass Forschungsfragen und Testfragen konzeptionell nicht getrennt werden. | Die Fragen, die man im Fragebogen stellt, werden in Anlehnung an psychologische Testverfahren auch als //Testfragen// bezeichnet. Ihre Formulierung trägt maßgeblich zur Qualität eines Fragebogens bei. Der häufigste Fehler bei der Formulierung von Testfragen ist, dass die Frage sich zu sehr am Forschungsvorhaben orientiert ("Zu wie vielen Prozent wurde Ihre Entscheidung von dem vorhin präsentierten Werbemittel beeinflusst?"). Der zweithäufigste Fehler ist, dass sich die Testfrage zu wenig am Forschungsvorhaben orientiert. Und in beiden Fällen liegt das Problem meist darin, dass Forschungsfragen und Testfragen konzeptionell nicht getrennt werden. |
| |
| Wenn man sich systematisch von der Forschungsfrage zu den Testfragen durcharbeitet, dann bekommt man in aller Regel (a) gut verständliche Fragen, die (b) am Schluss bei der Auswertung auch alle notwendigen Daten liefern. | Wenn man sich systematisch von der Forschungsfrage zu den Testfragen durcharbeitet, dann bekommt man in aller Regel (a) gut verständliche Fragen, die (b) am Schluss bei der Auswertung auch alle notwendigen Daten liefern. |
| |
| * Die //Forschungsfrage// ist eine grundsätzliche Frage, die hinter der Studie steht.\\ Zum Beispiel: Welchen Einfluss haben unterschiedliche Werbeformen auf eine Kaufentscheidung? | * Die //Forschungsfrage// ist eine grundsätzliche Frage, die hinter der Studie steht.\\ Zum Beispiel: Welchen Einfluss haben unterschiedliche Werbeformen auf eine Kaufentscheidung? |
| * Aus einer Forschungsfrage werden i.d.R. mehrere //Programmfragen// und/oder //Hypothesen// entwickelt.\\ Zum Beispiel: Welche Werbung nehmen Kunden war, welche Nicht-Kunden? Wurde die Kampagne XY in der Zielgruppe bisher generell wahrgenommen? Ist der TV-Spot den Kunden präsenter als die Print-Anzeige? | * Aus einer Forschungsfrage werden i.d.R. mehrere //Programmfragen// und/oder //Hypothesen// entwickelt.\\ Zum Beispiel: Welche Werbung nehmen Kunden wahr, welche Nicht-Kunden? Wurde die Kampagne XY in der Zielgruppe bisher generell wahrgenommen? Ist der TV-Spot den Kunden präsenter als die Print-Anzeige? |
| * Ein kritischer Schritt ist die Überführung von Programmfragen und/oder Hypothesen in //Konstrukte//. Das sind jene Größen, die man in der Befragung messen will - die man also mit einer Kennzahl quantifizieren kann. Kritisch sind die Konstrukte in zweierlei Hinsicht: Zum einen muss man alle Konstrukte messen, die zur Beantwortung der Programmfragen bzw. zur Prüfung der Hypothesen notwendig sind. Zum anderen sollte man sich tunlichst auf diese Konstrukte beschränken.\\ Zum Beispiel: Alter, Geschlecht, Wahrnehmung der Kampagne XY im Fernsehen, Wahrnehmung der Kampagne auf Plakatwänden, Absicht zum Produktkauf, Erinnerung an den TV-Spot | * Ein kritischer Schritt ist die Überführung von Programmfragen und/oder Hypothesen in //Konstrukte//. Das sind jene Größen, die man in der Befragung messen will - die man also mit einer Kennzahl quantifizieren kann. Kritisch sind die Konstrukte in zweierlei Hinsicht: Zum einen muss man alle Konstrukte messen, die zur Beantwortung der Programmfragen bzw. zur Prüfung der Hypothesen notwendig sind. Zum anderen sollte man sich tunlichst auf diese Konstrukte beschränken.\\ Zum Beispiel: Alter, Geschlecht, Wahrnehmung der Kampagne XY im Fernsehen, Wahrnehmung der Kampagne auf Plakatwänden, Absicht zum Produktkauf, Erinnerung an den TV-Spot |
| * Aus den Konstrukten werden schließlich die //Testfragen// entwickelt. Diese Fragen müssen so gestellt sein, dass der Teilnehmer sie versteht (keine Fachbegriffe) __und__ mit seinem Wissen zuverlässig beantworten kann. Einige Konstrukte kann man mit einer Frage abarbeiten - für anderen benötigt man längere Skalen.\\ Zum Beispiel: Wie alt sind Sie? Haben Sie den TV-Spot zum neuen XYZ schon gesehen? Welche der folgenden Aussagen treffen auf Sie persönlich zu: Ich habe schon darüber nachgedacht, mir den XYZ zu kaufen. ... | * Aus den Konstrukten werden schließlich die //Testfragen// entwickelt. Diese Fragen müssen so gestellt sein, dass der Teilnehmer sie versteht (keine Fachbegriffe) __und__ mit seinem Wissen zuverlässig beantworten kann. Einige Konstrukte kann man mit einer Frage abarbeiten - für andere benötigt man längere Skalen.\\ Zum Beispiel: Wie alt sind Sie? Haben Sie den TV-Spot zum neuen XYZ schon gesehen? Welche der folgenden Aussagen treffen auf Sie persönlich zu: Ich habe schon darüber nachgedacht, mir den XYZ zu kaufen. ... |
| |
| **Tipp:** Schreiben Sie sich Ihre Programmfragen und die zugehörigen Konstrukte einfach einmal auf. Sie werden sich wundern, welche Fußangeln Sie bis dato übersehen haben. | **Tipp:** Schreiben Sie sich Ihre Programmfragen und die zugehörigen Konstrukte einfach einmal auf. Sie werden sich wundern, welche Fußangeln Sie bis dato übersehen haben. |
| ==== Pretest durchführen ==== | ==== Pretest durchführen ==== |
| |
| Die Validität des Messintruments Fragebogen ist von zwei Grundlagen abhängig: Der theoretischen Fundierung und der Verständlichkeit. Für letzteres gibt es unzählige gute Tipps in Büchern (kurze Sätze, keine unnötigen Verneinungen, einfache Begriffe, keine Fachwörter, ...). Aber kein Werkzeug ist so effizient, Probleme im Fragebogen aufzudecken wie ein [[de:survey:pretest|Pretest des Fragebogens]]. | Die Validität des Messinstruments (also des Fragebogens) ist von zwei Grundlagen abhängig: Der theoretischen Fundierung und der Verständlichkeit. Für letzteres gibt es unzählige gute Tipps in Büchern (kurze Sätze, keine unnötigen Verneinungen, einfache Begriffe, keine Fachwörter, ...). Aber kein Werkzeug ist so effizient, Probleme im Fragebogen aufzudecken wie ein [[de:survey:pretest|Pretest des Fragebogens]]. |
| |
| Die Prüfung auf Rechtschreibung und Grammatik ist natürlich keine Aufgabe der Pretester -- das sollte schon vorher erledigt sein, sonst gehen die inhaltlichen Probleme im Pretest unter. | Die Prüfung auf Rechtschreibung und Grammatik ist natürlich keine Aufgabe der Pretester -- das sollte schon vorher erledigt sein, sonst gehen die inhaltlichen Probleme im Pretest unter. |
| ===== Aufbau des Fragebogens ===== | ===== Aufbau des Fragebogens ===== |
| |
| Folgt man einigen generellen Empfehlungen((Krosnick, J. A., & Presser, S. (2010). Question ans Questionnaire Design. In P. V. Marsden & J. D. Wright (Eds.), Handbook of survey research (2nd ed., pp. 263–313). Bingley: Emerald.)), so ist der Fragebogen für den Teilnehmer schlüssig, man vermindert die Anzahl von Abbrechern und vermeidet Irritationen, was i.d.R. zu besseren Daten führt. | Folgt man einigen generellen Empfehlungen((Krosnick, J. A., & Presser, S. (2010). Question and Questionnaire Design. In P. V. Marsden & J. D. Wright (Eds.), Handbook of survey research (2nd ed., pp. 263–313). Bingley: Emerald.)), so ist der Fragebogen für den Teilnehmer schlüssig, man vermindert die Anzahl von Abbrechern und vermeidet Irritationen, was i.d.R. zu besseren Daten führt. |
| |
| - Die Fragen zu Beginn des Fragebogens sollten einfach und angenehm zu beantworten sein. Die Einstiegsfragen sollten eine Gesprächssituation für die weiteren Fragen schaffen (auch in Onlinefragebögen!) | - Die Fragen zu Beginn des Fragebogens sollten einfach und angenehm zu beantworten sein. Die Einstiegsfragen sollten eine Gesprächssituation für die weiteren Fragen schaffen (auch in Onlinefragebögen!) |
| - Die Einstiegsfragen sollten explizit zum angekündigte Thema der Befragung sein.((Anm. von SoSci Survey: Allgemeine Fragen, etwa zur Demografie, sind für einen Teilnehmer alles andere als interessant.)) | - Die Einstiegsfragen sollten explizit zum angekündigtem Thema der Befragung sein.((Anm. von SoSci Survey: Allgemeine Fragen, etwa zur Demografie, sind für einen Teilnehmer alles andere als interessant.)) |
| - Fragen zum selben Themenbereich oder Gegenstand sollten direkt nacheinander gestellt werden.((Anm. von SoSci Survey: So muss der Teilnehmer nicht ständig umdenken.)) | - Fragen zum selben Themenbereich oder Gegenstand sollten direkt nacheinander gestellt werden.((Anm. von SoSci Survey: So muss der Teilnehmer nicht ständig umdenken.)) |
| - Fragen zum selben Themenbereich oder Gegenstand sollten vom Allgemeinen zum Speziellen angeordnet werden. | - Fragen zum selben Themenbereich oder Gegenstand sollten vom Allgemeinen zum Speziellen angeordnet werden. |
| - Sensible Fragen, bei denen sich einige Befragte möglicherweise unwohl fühlen, sollten am Ende des Fragebogens platziert werden. | - Sensible Fragen, bei denen sich einige Befragte möglicherweise unwohl fühlen, sollten am Ende des Fragebogens platziert werden. |
| - Verwenden Sie Filterfragen, damit Teilnehmer keine für sie irrelevante Fragen gestellt bekommen.((Anm. von SoSci Survey: Insbesondere in Onlinefragebögen sollte dies eine Selbstverständlichkeit sein. Eine Formulierung "Falls Sie bei Frage 1 //ja// geantwortet haben, fahren Sie bitte mit Frage 4 fort" mag im gedruckten Fragebogen akzeptabel sein, im Onlinefragebogen deutet sie auf einen unfertigen Fragebogen hin.)) | - Verwenden Sie Filterfragen, damit Teilnehmer keine für sie irrelevanten Fragen gestellt bekommen.((Anm. von SoSci Survey: Insbesondere in Onlinefragebögen sollte dies eine Selbstverständlichkeit sein. Eine Formulierung "Falls Sie bei Frage 1 //ja// geantwortet haben, fahren Sie bitte mit Frage 4 fort" mag im gedruckten Fragebogen akzeptabel sein, im Onlinefragebogen deutet sie auf einen unfertigen Fragebogen hin.)) |
| |
| ===== Formulierung von Fragen ===== | ===== Formulierung von Fragen ===== |
| |
| Für die Formulierung von Fragen geben Krosnick und Presser (2010, S. 264)((Krosnick, J. A., & Presser, S. (2010). Question ans Questionnaire Design. In P. V. Marsden & J. D. Wright (Eds.), Handbook of survey research (2nd ed., pp. 263–313). Bingley: Emerald.)) wertvolle Empfehlungen: | Für die Formulierung von Fragen geben Krosnick und Presser (2010, S. 264)((Krosnick, J. A., & Presser, S. (2010). Question and Questionnaire Design. In P. V. Marsden & J. D. Wright (Eds.), Handbook of survey research (2nd ed., pp. 263–313). Bingley: Emerald.)) wertvolle Empfehlungen: |
| |
| - Verwenden Sie einfache, gebräuchliche Wörter (vermeiden Sie technische Begriffe, Jargon und Umgangssprache).((Anm. von SoSci Survey: Denken Sie daran, dass Ihnen gebräuchliche Begriffe (z.B. die "Einstellung" aus der Psychologie) der Mehrzahl der Befragten eventuell nicht geläufig sind!)) | - Verwenden Sie einfache, gebräuchliche Wörter (vermeiden Sie technische Begriffe, Jargon und Umgangssprache).((Anm. von SoSci Survey: Denken Sie daran, dass Ihnen gebräuchliche Begriffe (z.B. die "Einstellung" aus der Psychologie) der Mehrzahl der Befragten eventuell nicht geläufig sind!)) |
| |{{:de:create:scr.layout.before.png?direct&300|Vorher (Anklicken zum Vergrößern)}}|{{:de:create:scr.layout.after.png?direct&300|Nachher (Anklicken zum Vergrößern)}}| | |{{:de:create:scr.layout.before.png?direct&300|Vorher (Anklicken zum Vergrößern)}}|{{:de:create:scr.layout.after.png?direct&300|Nachher (Anklicken zum Vergrößern)}}| |
| | (Anklicken zum Vergrößern) || | | (Anklicken zum Vergrößern) || |
| | |
| ==== Fragebogen ordentlich gestalten ==== | ==== Fragebogen ordentlich gestalten ==== |
| |
| Nicht jeder hat eine intime Beziehung mit HTML. Aber minimale Formatierungen, z.B. Absätze und Überschriften, kann jeder mit wenig Aufwand als HTML-Code programmieren ([[texts|Texte im Fragebogen]]). Und davon sollte man unbedingt Gebrauch machen: Der Begrüßungstext auf der ersten Seite ist die Visitenkarte des Fragebogens. Ist diese Seite ordentlich gestaltet und ziert sie ein Logo des Instituts und/oder der Universität ([[images|Bilder im Fragebogen]]), so werden deutlich mehr Personen den Fragebogen ausfüllen. | Nicht jeder hat eine intime Beziehung mit HTML. Aber minimale Formatierungen, z.B. Absätze und Überschriften, kann jeder mit wenig Aufwand als HTML-Code programmieren ([[texts|Texte im Fragebogen]]). Und davon sollte man unbedingt Gebrauch machen: Der Begrüßungstext auf der ersten Seite ist die Visitenkarte des Fragebogens. Ist diese Seite ordentlich gestaltet und ziert sie ein Logo des Instituts und/oder der Universität ([[images|Bilder im Fragebogen]]), so werden deutlich mehr Personen den Fragebogen ausfüllen. |
| |
| oFb bietet alle Möglichkeiten, um hübsche Fragebögen zu gestalten. Wenn man diese Chance nicht nutzt, dann ist man für schlechten Rücklauf selbst verantwortlich. Sorgfalt sollte man natürlich auch bei der Rechtschreibung und der Darstellung der Fragen selbst walten lassen ([[design|Darstellung von Fragen optimieren]]). | SoSci Survey bietet alle Möglichkeiten, um hübsche Fragebögen zu gestalten. Wenn man diese Chance nicht nutzt, dann ist man für schlechten Rücklauf selbst verantwortlich. Sorgfalt sollte man natürlich auch bei der Rechtschreibung und der Darstellung der Fragen selbst walten lassen ([[design|Darstellung von Fragen optimieren]]). |
| |
| Eine kurze Checkliste für einen ordentlichen Fragebogen (s. außerdem unten [[#saubere_knappe_begrueßung|Saubere knappe Begrüßung]]): | Eine kurze Checkliste für einen ordentlichen Fragebogen (s. außerdem unten [[#saubere_knappe_begruessung|Saubere knappe Begrüßung]]): |
| |
| * Offene Texteingabefelder sind für den erwarteten Inhalt optimiert (z.B. Breite und Textformat angepasst, falls eine Nummer erwartet wird) | * Offene Texteingabefelder sind für den erwarteten Inhalt optimiert (z.B. Breite und Textformat angepasst, falls eine Nummer erwartet wird) |
| * Es ist ein Impressum vorhanden, Teilnehmer sehen, an wen sie sich ggf. wenden können. | * Es ist ein Impressum vorhanden, Teilnehmer sehen, an wen sie sich ggf. wenden können. |
| * Die Rechtschreibung und Grammatik in Texten und Fragen wurde überprüft. | * Die Rechtschreibung und Grammatik in Texten und Fragen wurde überprüft. |
| * Es werden nur kurze Texte verwendet (z.B. max. 4 Absätze á 3 Zeilen in der Begrüßung). | * Es werden nur kurze Texte verwendet (z.B. max. 4 Absätze à 3 Zeilen in der Begrüßung). |
| * In den Fragen werden kurze, einfache Sätzen verwendet. | * In den Fragen werden kurze, einfache Sätze verwendet. |
| * Jede Frage sieht sauber aus, es stehen keine Texte über, alle Zeilenumbrüche (z.B. auch in Skalenbeschriftungen) sehen sauber aus. | * Jede Frage sieht sauber aus, es stehen keine Texte über, alle Zeilenumbrüche (z.B. auch in Skalenbeschriftungen) sehen sauber aus. |
| |
| * Die Begrüßung endet mit einer Grußformel und dem Namen eines Ansprechpartners | * Die Begrüßung endet mit einer Grußformel und dem Namen eines Ansprechpartners |
| |
| Für den Inhalt des Textes gelten dieselben Empfehlung, wie auch für Einladungsmails: [[:de:survey:invitation]] | Für den Inhalt des Textes gelten dieselben Empfehlungen wie auch für Einladungsmails: [[:de:survey:invitation]] |
| |
| Vielfach möchte man den sozialen Druck reduzieren, um möglichst ehrliche Antworten zu bekommen ("es gibt keine richtigen oder falschen Antworten..."). Solch ein Hinweis wird am Besten dort platziert, wo sensible Fragen gestellt werden -- in der Begrüßung wird er schnell überlesen. Eine freundliche Formulierung für den Hinweis wäre zum Beispiel: | Vielfach möchte man den sozialen Druck reduzieren, um möglichst ehrliche Antworten zu bekommen ("es gibt keine richtigen oder falschen Antworten..."). Solch ein Hinweis wird am besten dort platziert, wo sensible Fragen gestellt werden -- in der Begrüßung wird er schnell überlesen. Eine freundliche Formulierung für den Hinweis wäre zum Beispiel: |
| |
| > Ihre Antworten auf unsere Fragen können nicht richtig oder falsch sein. Es geht um Ihre Auffassungen, Meinungen und Gewohnheiten. Wenn Sie sich in Ihren Antworten nicht ganz sicher sind, ist das nicht schlimm. Die meisten Fragen können und sollen „aus dem Bauch heraus“ beantwortet werden. | > Ihre Antworten auf unsere Fragen können nicht richtig oder falsch sein. Es geht um Ihre Auffassungen, Meinungen und Gewohnheiten. Wenn Sie sich in Ihren Antworten nicht ganz sicher sind, ist das nicht schlimm. Die meisten Fragen können und sollen „aus dem Bauch heraus“ beantwortet werden. |
| Wenn Sie wollen, dass die Teilnehmer Ihrer Befragung sich wohlfühlen, dann stellen Sie ihnen richtige Fragen ("Wo haben Sie Ihren letzten Urlaub verbracht?" statt "Letzter Urlaub:") und erklären Sie kurz den Kontext Ihrer Fragen (z.B. "Im Folgenden möchten wir Ihnen gerne einige Fragen zu Ihrem letzten Urlaub stellen.") -- insbesondere wenn das Thema der Fragen wechselt ("Bei den folgenden Fragen geht es um konkrete Erlebnisse in Ihrem letzten Urlaub"). | Wenn Sie wollen, dass die Teilnehmer Ihrer Befragung sich wohlfühlen, dann stellen Sie ihnen richtige Fragen ("Wo haben Sie Ihren letzten Urlaub verbracht?" statt "Letzter Urlaub:") und erklären Sie kurz den Kontext Ihrer Fragen (z.B. "Im Folgenden möchten wir Ihnen gerne einige Fragen zu Ihrem letzten Urlaub stellen.") -- insbesondere wenn das Thema der Fragen wechselt ("Bei den folgenden Fragen geht es um konkrete Erlebnisse in Ihrem letzten Urlaub"). |
| |
| Durch echte Fragen entsteht der Hauch einer Gesprächssituation und der Teilnehmer weiß genauer, was Sie von Ihm wissen wollen. Natürlich muss man es nicht übertreiben: Die demografischen Angaben kann man natürlich weiterhin im kompakten Formularstil abfragen. Dennoch schadet ein freundliches "Zuletzt möchten wir Sie um einige Angaben zu Ihrer Person bitten" nicht. | Durch echte Fragen entsteht der Hauch einer Gesprächssituation und die Teilnehmer:innen wissen genauer, was Sie von ihnen wissen möchten. Natürlich muss man es nicht übertreiben: Die demografischen Angaben kann man natürlich weiterhin im kompakten Formularstil abfragen. Dennoch schadet ein freundliches "Zuletzt möchten wir Sie um einige Angaben zu Ihrer Person bitten" nicht. |
| |
| ===== Formatierung ===== | ===== Formatierung ===== |
