VADER-Sentimentwerte richtig interpretieren

Für wen dieser Leitfaden ist

Forschende, die die offene Textanalyse von Conjoint Survey verwenden.

Schritte

1. Beginnen Sie mit dem Compound-Wert von -1 bis +1. Positive Werte zeigen positivere Sprache, negative Werte negativere Sprache und Werte nahe null einen neutralen oder ausgeglichenen Ton.
2. Verwenden Sie Kategorien nur, wenn sie zur Forschungsfrage passen. Häufig gelten 0,05 oder mehr als positiv, -0,05 oder weniger als negativ und Werte dazwischen als neutral; dies sind keine universellen Schwellen für bedeutsame Effekte.
3. Deuten Sie einen Einzelwert als Merkmal der Formulierung dieser Antwort und lesen Sie echte Beispiele, bevor Sie ihm eine inhaltliche Bedeutung geben.
4. Ein Stichprobenmittel beschreibt den durchschnittlichen Ton, nicht den Anteil der Personen, die zustimmen.
5. In einem randomisierten Experiment ist der Effekt der Mittelwert der Treatment-Gruppe minus dem der Referenzgruppe. Prüfen Sie zusätzlich Konfidenzintervall, p-Wert, Fallzahlen und Textbeispiele.
6. VADER berücksichtigt Verneinungen, Verstärker, Großschreibung, Satzzeichen und einige informelle Ausdrücke, versteht aber nicht jeden Kontext.
7. Setzen Sie Sentiment nicht mit Unterstützung, Zustimmung, Überzeugung, Richtigkeit, Vertrauen, Ideologie oder Präferenz gleich.
8. Prüfen Sie Fehlerfälle wie Sarkasmus, Fachsprache, lange gemischte Passagen, Zitate, Mehrdeutigkeit, domänenspezifische Bedeutungen und Sprachen außerhalb des verwendeten englischen Lexikons.
9. Validieren Sie wichtige Analysen mit verblindeter menschlicher Kodierung oder einem konstruktbezogenen Maß und bewahren Sie den Rohtext auf.

Warum das wichtig ist

VADER wurde von Hutto und Gilbert (2014) vorgestellt und liefert ein transparentes, reproduzierbares Merkmal der ausgedrückten Stimmung. Es eignet sich zum Vergleich randomisierter Gruppen, erklärt aber weder die Gründe für eine Formulierung noch ersetzt es ein validiertes Maß des eigentlichen Konstrukts.

Vor der Feldphase

• Nennen Sie den Bereich von -1 bis +1 und die Richtung.
• Dokumentieren und begründen Sie verwendete Kategorieschwellen.
• Berichten Sie Fallzahlen, Mittelwerte, Differenz und Unsicherheit.
• Bezeichnen Sie Sentiment ohne Validierung nicht als Zustimmung oder Unterstützung.
• Lesen Sie Beispiele mit niedrigen, mittleren und hohen Werten.
• Prüfen Sie Sprache und Domäne gegen das englische VADER-Lexikon.
• Nutzen Sie für entscheidende Aussagen menschliche Kodierung oder ein konstruktbezogenes Maß.
• Bewahren Sie Texte, Zählwerte, Scores, Ausschlüsse und Notizen auf.

Häufige Fragen

Verwandte Leitfäden