So führen Sie experimentelle quantitative Textanalyse durch

Verwenden Sie offene Umfrageantworten als quantitative Outcomes nach randomisierten Stimuli.

Kurzantwort

Verwenden Sie offene Umfrageantworten als quantitative Outcomes nach randomisierten Stimuli. Erstellen Sie ein Survey-Experiment auf dem Bildschirm für Einwilligung und Fragen. Fügen Sie für jeden randomisierten Arm eine Stimulus-Bedingung hinzu. Fügen Sie nach dem Stimulus eine offene Textfrage hinzu.

Für wen dieser Leitfaden ist

Forschende, die Satzantworten, Sentiment-Outcomes, Wortanzahlen sowie Textvergleiche zwischen Treatment-Armen auswerten möchten.

Schritte

Erstellen Sie ein Survey-Experiment auf dem Bildschirm für Einwilligung und Fragen.
Fügen Sie für jeden randomisierten Arm eine Stimulus-Bedingung hinzu.
Fügen Sie nach dem Stimulus eine offene Textfrage hinzu.
Sammeln Sie die Antworten.
Öffnen Sie Results.
Exportieren Sie die CSVs für Text Summary, Text Scores und Text Effects.

Warum das wichtig ist

Offene Outcomes ermöglichen es Respondenten, Reaktionen in eigenen Worten zu erklären, während Forschende dennoch auswertbare Sentiment-, Aufwands- und Maße zur Spracheingabe bzw. zum Sprachgebrauch erhalten.

Vor der Feldphase

Präregistrieren Sie den Text-Outcome.
Verwenden Sie VADER Sentiment als transparente Diagnose, nicht als universelles Maß für Zustimmung.
Behalten Sie den Rohtext mit dem Replikationspaket.
Validieren Sie Maßnahmen mit hoher Tragweite mit menschlicher Kodierung.

Häufige Fragen

Wofür ist dieser Leitfaden gedacht?

Forschende, die Satzantworten, Sentiment-Outcomes, Wortanzahlen sowie Textvergleiche zwischen Treatment-Armen auswerten möchten.

Wie sieht der grundlegende Ablauf aus?

Erstellen Sie ein Survey-Experiment auf dem Bildschirm für Einwilligung und Fragen. Fügen Sie für jeden randomisierten Arm eine Stimulus-Bedingung hinzu. Fügen Sie nach dem Stimulus eine offene Textfrage hinzu. Sammeln Sie die Antworten.

Was sollte vor der Feldphase geprüft werden?

Präregistrieren Sie den Text-Outcome. Verwenden Sie VADER Sentiment als transparente Diagnose, nicht als universelles Maß für Zustimmung. Behalten Sie den Rohtext mit dem Replikationspaket. Validieren Sie Maßnahmen mit hoher Tragweite mit menschlicher Kodierung.