Unterschiede

Hier werden die Unterschiede zwischen zwei Versionen angezeigt.

Link zu dieser Vergleichsansicht

Beide Seiten der vorigen RevisionVorhergehende Überarbeitung
Nächste Überarbeitung
Vorhergehende Überarbeitung
de:results:variables [17.03.2020 20:19] – [Qualitätsindikatoren] adminde:results:variables [19.08.2023 11:07] (aktuell) admin
Zeile 10: Zeile 10:
  
   * **CASE** Eindeutige Nummer der Versuchsperson. In der Regel entspricht die Nummer der Reihenfolge, in der die Versuchspersonen den Fragebogen aufrufen (s. auch PHP-Funktion ''[[:de:create:functions:casenumber|caseNumber()]]'').\\ **Hinweis:** Wann immer jemand den Fragebogen aufruft, wird eine neue Nummer vergeben -- klickt die Person nicht auf //Weiter// oder ruft sie den Fragebogen gleich nochmal auf, so entsteht ein leerer Datensatz. Dieser wird standardmäßig automatisch gelöscht. Außerdem werden auch beim Testen des Fragebogens Fall-Nummern vergeben. In der Folge beginnt die Nummerierung meist nicht bei Null und weist Lücken auf (z.B. 123, 125, 130, 131, 132, ...)\\ **Hinweis:** Auch für Tests während der Fragebogen-Entwicklung werden Fallnummern vergeben. Es ist daher üblich, dass die Nummer nicht bei 1 beginnt. Damit die Fallnummern pro Befragungsprojekt eindeutig bleiben, lässt sich die Zählung nicht zurücksetzen -- dies würde in der Auswertung auch keinerlei Vorteile bringen.   * **CASE** Eindeutige Nummer der Versuchsperson. In der Regel entspricht die Nummer der Reihenfolge, in der die Versuchspersonen den Fragebogen aufrufen (s. auch PHP-Funktion ''[[:de:create:functions:casenumber|caseNumber()]]'').\\ **Hinweis:** Wann immer jemand den Fragebogen aufruft, wird eine neue Nummer vergeben -- klickt die Person nicht auf //Weiter// oder ruft sie den Fragebogen gleich nochmal auf, so entsteht ein leerer Datensatz. Dieser wird standardmäßig automatisch gelöscht. Außerdem werden auch beim Testen des Fragebogens Fall-Nummern vergeben. In der Folge beginnt die Nummerierung meist nicht bei Null und weist Lücken auf (z.B. 123, 125, 130, 131, 132, ...)\\ **Hinweis:** Auch für Tests während der Fragebogen-Entwicklung werden Fallnummern vergeben. Es ist daher üblich, dass die Nummer nicht bei 1 beginnt. Damit die Fallnummern pro Befragungsprojekt eindeutig bleiben, lässt sich die Zählung nicht zurücksetzen -- dies würde in der Auswertung auch keinerlei Vorteile bringen.
-  * **SERIAL** Sofern der Fragebogen mit einem personalisieren Link (Seriennummer) aufgerufen wurde, erscheint hier die Teilnehmer-Kennung (s. auch PHP-Funktion ''[[:de:create:functions:caseserial|caseSerial()]]'').+  * **SERIAL** Sofern der Fragebogen mit einem personalisieren Link (Teilnahmecode) aufgerufen wurde, erscheint hier die Teilnehmer-Kennung (s. auch PHP-Funktion ''[[:de:create:functions:caseserial|caseSerial()]]'').
   * **REF** Falls im Link zum Fragebogen eine Referenz übergeben wurde ([[:de:survey:url|Der Link zum Fragebogen]]), wird der Referenz-Text hier abgespeichert (s. auch PHP-Funktion ''[[:de:create:functions:reference|reference()]]'').   * **REF** Falls im Link zum Fragebogen eine Referenz übergeben wurde ([[:de:survey:url|Der Link zum Fragebogen]]), wird der Referenz-Text hier abgespeichert (s. auch PHP-Funktion ''[[:de:create:functions:reference|reference()]]'').
   * **QUESTNNR** Enthält die Kennung des Fragebogens, der ausgefüllt wurde. Die Kennung legt man beim Zusammenstellen des Fragebogens fest. Eine Kennung "del:<nummer>" bedeutet, dass der Fragebogen, mit dem das Interview durchgeführt worden ist, gelöscht wurde.   * **QUESTNNR** Enthält die Kennung des Fragebogens, der ausgefüllt wurde. Die Kennung legt man beim Zusammenstellen des Fragebogens fest. Eine Kennung "del:<nummer>" bedeutet, dass der Fragebogen, mit dem das Interview durchgeführt worden ist, gelöscht wurde.
Zeile 35: Zeile 35:
 ===== Antwortzeiten ===== ===== Antwortzeiten =====
  
-  * **TIMEnnn** In den Spalten ''TIME001'' u.s.w. wird abgespeichert, wie lange (in Sekunden) sich ein Teilnehmer auf einer Seite im Fragebogen aufgehalten hat. Wenn ein Teilnehmer eine Seite mehrfach sieht (z.B. durch Verwendung des Zurück-Knopfes im Fragebogen), dann werden die Zeiten addiert. Diese Zeiten sind nur ungenaue Angabenda sie auch die Ladezeiten enthalten.+  * **TIMEnnn** In den Variablen ''TIME001'' u.s.w. wird abgespeichert, wie lange (in Sekunden) sich eine Teilnehmer:in auf einer Seite im Fragebogen aufgehalten hat. Angegeben ist die Zeit vom Laden der Seite bis zum Abschicken mittels "Weiter"
 +    * Diese Zeiten sind nur ungenaue Angaben, da sie auch die Ladezeiten enthalten. Die typische Ungenauigkeit liegt im Bereich 1-2 Sekunden, kann im Einzelfall (z.B. bei instabiler Internetverbindung) aber höher liegen. Genauere Messungen sind mittels [[:de:create:javascript|JavaScript]] möglich: [[:de:create:javascript:latencytimer]] 
 +    * Die Zahl im Namen der Variable bezieht sich auf die Seitennummer beim "Fragebogen zusammenstellen", ''TIME007'' etwas bezieht sich immer auf die Seite 07 -- unabhängig davon, an welcher Stelle die Seite während des Interviews angezeigt wurde (etwa weil Seiten übersprungen oder durch Rotation in einer anderen Reihenfolge präsentiert wurde). 
 +    * Wenn ein Teilnehmer eine Seite mehrfach sieht (z.B. durch Verwendung des Zurück-Knopfes im Fragebogen), dann werden die Zeiten addiert. 
 +    * Wenn die Funktionen ''loopPage()'' oder ''loopToPage()'' zum Einsatz kommen, dann gibt die Variable die kumulierte Verweildauer für alle Wiederholungen der Seite an. 
 +    * Wenn eine Befragte das Browserfenster mit Seite 5 des Fragebogens über Nacht offen lässt und am nächsten Tag Seite 5 ausfüllt und dann auf "Weiter" klickt, wird in ''TIME005'' u.U. eine Verweildauer >20.000 Sekunden (mehrere Stunden) ausgewiesen. 
 +    * Wenn mehrere Seiten des Fragebogens zugleich angezeigt werden (z.B. weil eine Seite keinen Inhalt zeigt oder weil ''goToPage()'' zum Einsatz kommt), dann wird die Verweildauer für die erste Seite gespeichert, welche Inhalt zeigt. Beispiel: Seite 8 enthält nur einen PHP-Code mit ''setPageOrder()''es folgt Seite 9 mit einer Frage und einem ''goToPage()'' zur Seite 10, wo ebenfalls eine Frage gezeigt wird, dann sieht der Teilnehmer die Fragebogen-Seite 8+9+10 alle zusammen auf einer Seite (also 2 Fragen untereinander) und die Verweildauer wird in ''TIME009'' gespeichert.
   * **TIME_SUM** Summe der Bearbeitungszeiten (in Sekunden) nach Bereinigung von Unterbrechungen. Unterbricht der Teilnehmer die Befragung und führt sie zu einem späteren Zeitpunkt fort, wird für die entsprechende Seite eine sehr lange Bearbeitungszeit (Stunden oder gar Tage) ermittelt. Als Unterbrechung wird jede Bearbeitungszeit erkannt, die   * **TIME_SUM** Summe der Bearbeitungszeiten (in Sekunden) nach Bereinigung von Unterbrechungen. Unterbricht der Teilnehmer die Befragung und führt sie zu einem späteren Zeitpunkt fort, wird für die entsprechende Seite eine sehr lange Bearbeitungszeit (Stunden oder gar Tage) ermittelt. Als Unterbrechung wird jede Bearbeitungszeit erkannt, die
     * länger als 2 Stunden dauert oder     * länger als 2 Stunden dauert oder
Zeile 58: Zeile 64:
     * Bei Auswahlfragen (einfache Auswahl oder Mehrfachauswahl) wird ein leeres Eingabefeld der Antwortoption ([[:de:create:selection-textinput|Eingabefelder in einer Auswahlfrage]], z.B. "Sonstiges: %%___%%") hingegen nur dann als fehlende Antwort gezählt, wenn die entsprechende Option in der Auswahlfrage ausgewählt wurde.     * Bei Auswahlfragen (einfache Auswahl oder Mehrfachauswahl) wird ein leeres Eingabefeld der Antwortoption ([[:de:create:selection-textinput|Eingabefelder in einer Auswahlfrage]], z.B. "Sonstiges: %%___%%") hingegen nur dann als fehlende Antwort gezählt, wenn die entsprechende Option in der Auswahlfrage ausgewählt wurde.
   * **MISSREL** Anteil fehlender Antworten, gewichtet mit dem Antwortverhalten der anderen Teilnehmer. Fragen, die generell häufig __nicht__ beantwortet werden (z.B. optionale offene Textangaben) fallen hier kaum ins Gewicht. Fragen, die von den meisten Teilnehmern beantwortet wurden, fallen stärker ins Gewicht. Der lineare Gewichtungsfaktor für die Frage bzw. das Item ist die Anzahl gegebener Antworten dividiert dadurch, wie häufig die Frage gestellt bzw. das Item abgefragt wurde.\\ **Hinweis:** Dieser Wert ist abhängig davon, welche Datensätze heruntergeladen werden.   * **MISSREL** Anteil fehlender Antworten, gewichtet mit dem Antwortverhalten der anderen Teilnehmer. Fragen, die generell häufig __nicht__ beantwortet werden (z.B. optionale offene Textangaben) fallen hier kaum ins Gewicht. Fragen, die von den meisten Teilnehmern beantwortet wurden, fallen stärker ins Gewicht. Der lineare Gewichtungsfaktor für die Frage bzw. das Item ist die Anzahl gegebener Antworten dividiert dadurch, wie häufig die Frage gestellt bzw. das Item abgefragt wurde.\\ **Hinweis:** Dieser Wert ist abhängig davon, welche Datensätze heruntergeladen werden.
-  * **DEG_TIME** Maluspunkte für extrem schnelles Ausfüllen. Der Wert ist so normiert, dass Fälle mit einer Gesamtpunktzahl über 100 als minderwertige Daten klassifiziert werden können. Allerdings ist Qualität keine dichotome Eigenschaft. Wenn Sie strenger filtern möchten, ist eine Grenze von 75 oder 50 Punkten ebenso denkbar wie ein Bereinigung ab 200 für eine liberalere Filterung. Der Indikator //TIME_RSI// ist eine Weiterentwicklung von //DEG_TIME// und in einigen Situationen akkurater. 
   * **TIME_RSI** Dieser Kennwert ist im Artikel [[https://ojs.ub.uni-konstanz.de/srm/article/view/7403|Too Fast, too Straight, too Weird]] genauer dokumentiert (als "relative speed index"). Datensätze mit einem Wert im Bereich von 2,0 und darüber sollten kritisch betrachtet werden. Wissensfragen, die der Teilnehmer evtl. recherchieren muss, können den Wert allerdings verzerren (Teilnehmer mit gutem Vorwissen sind schneller).   * **TIME_RSI** Dieser Kennwert ist im Artikel [[https://ojs.ub.uni-konstanz.de/srm/article/view/7403|Too Fast, too Straight, too Weird]] genauer dokumentiert (als "relative speed index"). Datensätze mit einem Wert im Bereich von 2,0 und darüber sollten kritisch betrachtet werden. Wissensfragen, die der Teilnehmer evtl. recherchieren muss, können den Wert allerdings verzerren (Teilnehmer mit gutem Vorwissen sind schneller).
   * **Q_VIEWER** Im Fragebogen kann man die Option "Option für den Teilnehmer, den Fragebogen anzusehen ohne Pflichtfragen zu beantworten" aktivieren. Wenn die Funktion aktiv ist, gibt diese Variable an, ob ein Teilnehmer das entsprechende Kästchen ("ich will den Fragebogen nur ansehen") markiert hat.   * **Q_VIEWER** Im Fragebogen kann man die Option "Option für den Teilnehmer, den Fragebogen anzusehen ohne Pflichtfragen zu beantworten" aktivieren. Wenn die Funktion aktiv ist, gibt diese Variable an, ob ein Teilnehmer das entsprechende Kästchen ("ich will den Fragebogen nur ansehen") markiert hat.
  
-Ob ein Fragebogen vollständig ausgefüllt wurde lässt sich anhand der Variablen //LASTPAGE// und //FINISHED// nachvollziehen (s. oben). Der Anteil fehlender Angaben (//MISSREL//) ist ein wertvoller Indikator für die Sorgfalt des Teilnehmers bzw. für Datensätze, die vom "nur mal ansehen" stammen. Die zum Ausfüllen investierte Zeit ist zwar kein direkter Indikator für Datenqualität, aber sehr geringe Antwortzeiten (//TIME_SUM// und //DEG_TIME//) deuten darauf hin, dass die Fragen nicht einmal gelesen wurden.+Ob ein Fragebogen vollständig ausgefüllt wurde lässt sich anhand der Variablen //LASTPAGE// und //FINISHED// nachvollziehen (s. oben). Der Anteil fehlender Angaben (//MISSREL//) ist ein wertvoller Indikator für die Sorgfalt des Teilnehmers bzw. für Datensätze, die vom "nur mal ansehen" stammen. Die zum Ausfüllen investierte Zeit ist zwar kein direkter Indikator für Datenqualität, aber sehr geringe Antwortzeiten (geringe //TIME_SUM// und hoher //TIME_RSI//) deuten darauf hin, dass die Fragen nicht einmal gelesen wurden.
  
  
  
de/results/variables.1584472759.txt.gz · Zuletzt geändert: 17.03.2020 20:19 von admin
 
Falls nicht anders bezeichnet, ist der Inhalt dieses Wikis unter der folgenden Lizenz veröffentlicht: CC Attribution-Share Alike 4.0 International
Driven by DokuWiki