🧪 Diese Plattform befindet sich in der Beta-Phase. Funktionen können sich ändern und es können Fehler auftreten. Danke für dein Feedback!
questionnaire_wording_bias
Der Fragebogenformulierungsbias umfasst die systematische Verzerrung von Umfrageantworten durch die Art und Weise, wie Fragen formuliert, geordnet oder gestaltet sind. Selbst logisch äquivalente Fragen führen zu erheblich unterschiedlichen Antwortverteilungen, wenn sie unterschiedlich formuliert sind.
Die Frage 'Befürworten Sie die Erlaubnis von Schwangerschaftsabbrüchen in bestimmten Umständen?' erhält ca. 77 % Zustimmung, während 'Befürworten Sie ein Verbot von Schwangerschaftsabbrüchen in allen Umständen?' nur ca. 20 % Zustimmung erhält — obwohl beide Fragen logisch dieselbe Politikposition ansprechen.
Eine Umfrage zur Kriminalitätspolitik fragt: 'Sollten gefährliche Straftäter härter bestraft werden?' und erhält 82 % Zustimmung. Dieselbe Umfrage formuliert alternativ: 'Sollte die Regierung mehr Geld für Gefängnisse ausgeben?' – hier sinkt die Zustimmung auf unter 40 %, obwohl beide Fragen dasselbe politische Ziel ansprechen.
Ein Lebensmittelhersteller befragt Konsumenten mit: 'Würden Sie ein Produkt kaufen, das 20 % weniger Fett enthält?' und erhält überwiegend positive Antworten. Eine neutrale Formulierung – 'Wie wichtig ist Ihnen der Fettgehalt bei diesem Produkt?' – zeigt hingegen, dass Fett für die meisten Befragten kaum eine Rolle spielt.
Binäre (Ja/Nein) Fragen, die ein LLM beantworten muss, um diesen Aspekt zu identifizieren:
Verwendet die Fragestellung geladene oder emotional gefärbte Sprache?
Typ: binaryWürde eine Umkehrung der Frageformulierung oder Skalenverankerungen die gemeldeten Ergebnisse verändern?
Typ: binaryIst die Fragenreihenfolge geeignet, bestimmte Antworten durch Kontexteffekte zu grundieren?
Typ: binaryWurden die Fragebogenitems auf Äquivalenz der Formulierung vorgetestet?
Typ: binaryDer Fragebogenformulierungsbias umfasst die systematische Verzerrung von Umfrageantworten durch die Art und Weise, wie Fragen formuliert, geordnet oder gestaltet sind. Selbst logisch äquivalente Fragen führen zu erheblich unterschiedlichen Antwortverteilungen, wenn sie unterschiedlich formuliert sind.
Wörter tragen Konnotationen jenseits ihres logischen Inhalts. Frageformulierung aktiviert unterschiedliche mentale Repräsentationen. Positive und negative Formulierungen aktivieren unterschiedliche Referenzpunkte.
Validierte, vorgetestete Fragebogenitems verwenden. Split-Sample-Experimente für äquivalente Formulierungen durchführen. Genauen Fragentext bei jeder Zitierung von Umfragedaten berichten.
Meinungsumfragen zu politisch heiklen Themen zeigen routinemäßig 15-25 Prozentpunkt-Schwankungen allein aufgrund der Frageformulierung.
Nutze diese Tools, um diesen Aspekt zu erkennen, zu analysieren oder zu trainieren.