Umfragen und Fragebögen sind strukturierte Erhebungsinstrumente in der UX-Forschung, mit denen quantitative und qualitative Daten über Einstellungen, Verhalten und Bedürfnisse von Nutzenden in großem Maßstab gesammelt werden.
Rubrik: Mediendesign & Digitale Medien · Unterrubrik: UX Research · Niveau: Fortgeschritten
Was sind Umfragen & Fragebögen in UX?
Umfragen (Surveys) gehören zu den am häufigsten eingesetzten Methoden im UX-Research. Sie ermöglichen es, in kurzer Zeit von einer großen Zahl von Nutzenden strukturierte Rückmeldungen zu erhalten – sei es zur Nutzerzufriedenheit, zur Verwendung bestimmter Funktionen, zur wahrgenommenen Usability oder zu demografischen Merkmalen.
Der Begriff Fragebogen bezeichnet das konkrete Erhebungsinstrument – also das Dokument mit den Fragen. Umfrage meint den gesamten Prozess inklusive Durchführung, Sampling und Auswertung. Im UX-Kontext werden beide Begriffe oft synonym verwendet.
Anders als qualitative Methoden wie User Interviews oder Contextual Inquiry liefern Umfragen in erster Linie Breitendaten: Was denken viele Menschen? Wie häufig tritt ein bestimmtes Verhalten auf? Wie stark stimmen Nutzende einer Aussage zu?
Erklärung
Fragetypen
Die Wahl der Fragetypen bestimmt maßgeblich, welche Erkenntnisse gewonnen werden können:
Geschlossene Fragen liefern quantifizierbare Antworten:
- Likert-Skala (z.B. 1–5: "Stimme überhaupt nicht zu" bis "Stimme voll zu"): Geeignet für Einstellungen und Zufriedenheit
- Semantisches Differential (z.B. "einfach — schwierig"): Erfasst polare Bewertungsdimensionen
- Mehrfachauswahl (Multiple Choice): Für Verhaltensfragen oder Kategorisierungen
- Ranking: Priorisierungen erfassen
- Dichotom (Ja/Nein): Für klare Faktenfragen
Offene Fragen liefern qualitative Tiefe:
- "Was gefällt Ihnen an diesem Feature am besten?"
- "Welche Verbesserungen würden Sie sich wünschen?"
Die Kombination beider Typen – ein sogenannter Mixed-Methods-Survey – erlaubt sowohl statistische Auswertung als auch thematische Analyse.
Standardisierte UX-Fragebögen
In der UX-Forschung haben sich mehrere validierte Instrumente etabliert:
System Usability Scale (SUS): Ein 10-Item-Fragebogen von John Brooke (1986) zur schnellen Erfassung der wahrgenommenen Gebrauchstauglichkeit. Der SUS-Score (0–100) ist ein Branchenstandard. Scores über 68 gelten als überdurchschnittlich gut (Sauro, 2011).
Net Promoter Score (NPS): Eine einzige Frage ("Wie wahrscheinlich ist es, dass Sie dieses Produkt weiterempfehlen?", 0–10) kategorisiert Nutzende in Promotoren, Passive und Kritiker.
User Experience Questionnaire (UEQ): Ein deutschsprachiges Instrument (Laugwitz, Held & Schrepp, 2008) mit sechs Skalen: Attraktivität, Durchschaubarkeit, Effizienz, Steuerbarkeit, Stimulation, Originalität.
Single Ease Question (SEQ): Eine 7-Punkte-Skala zur Bewertung der empfundenen Schwierigkeit einer spezifischen Aufgabe.
SUPR-Q (Standardized User Experience Percentile Rank Questionnaire): Erfasst Usability, Vertrauen, Erscheinungsbild und Loyalität einer Website (Sauro, 2015).
Fragebogendesign: Grundprinzipien
Gut gestaltete Fragebögen folgen bewährten Prinzipien (nach Dillman, Smyth & Christian, 2014):
- Klare, verständliche Sprache: Fachbegriffe und doppelte Verneinungen vermeiden.
- Einheitliche Skalen: Nicht zwischen 5-Punkt- und 7-Punkt-Skalen wechseln.
- Trichterprinzip: Von allgemeinen zu spezifischen Fragen.
- Keine Leitfragen: "Wie gut finden Sie unser neues Design?" ist suggestiv.
- Immer eine neutrale Mitteloption: Außer bei erzwungener Entscheidung.
- Pilottestung: Den Fragebogen vor dem Roll-out mit 3–5 Personen testen.
Beispiele
Beispiel 1 – Post-Task-Survey: Nach dem Abschluss einer Aufgabe in einem Usability-Test wird die SEQ-Frage gestellt: "Wie schwierig war es, diese Aufgabe zu erledigen?" (1–7). Die Daten ergänzen die beobachteten Verhaltensmetriken.
Beispiel 2 – Onboarding-Feedback: Eine App fragt neue Nutzende nach der ersten Woche per In-App-Survey: "Wie zufrieden sind Sie mit dem Onboarding?" (1–5) + offene Folgefrage. Das ermöglicht schnelles Feedback ohne Recruiting-Aufwand.
Beispiel 3 – Quartalsbefragung: Ein Nachrichtenportal befragt quartalsweise seine Abonnentinnen und Abonnenten per SUS zu wahrgenommenen Usability-Veränderungen nach Feature-Releases.
Beispiel 4 – UEQ im Produktvergleich: Zwei Varianten einer Buchungsmaschine werden nach Nutzungssimulation mit dem UEQ bewertet, um hedonische und pragmatische Qualitätsunterschiede sichtbar zu machen.
In der Praxis
Wann Umfragen einsetzen?
Umfragen sind besonders wertvoll, wenn:
- Daten von vielen Nutzenden (>30) benötigt werden
- Trends über Zeit verfolgt werden sollen (longitudinale Studien)
- Demographische Unterschiede analysiert werden sollen
- Ergänzend zu qualitativen Befunden quantitative Belege gesucht werden
Typische Fehler
Confirmation Bias im Design: Fragen, die die erwartete Antwort begünstigen, verzerren die Ergebnisse systematisch.
Zu lange Fragebögen: Die Abbruchrate steigt ab ca. 10–12 Minuten Ausfülldauer stark an (Revilla & Ochoa, 2017). Faustformel: Maximal 20–25 Fragen für einen Onlinefragebogen.
Convenience Sampling: Nur besonders zufriedene oder besonders unzufriedene Nutzende füllen Umfragen aus. Ohne aktives Sampling entstehen verzerrte Stichproben.
Operationalisierungsprobleme: Abstrakte Konstrukte wie "Vertrauen" oder "Zufriedenheit" müssen durch validierte Skalen operationalisiert werden, nicht durch selbst erfundene Einzelfragen.
Tools
Gängige Survey-Tools im UX-Kontext: Google Forms (kostenlos, einfach), Typeform (konversationell), SurveyMonkey, Qualtrics (wissenschaftlich, teuer), Maze (integriert in Usability-Tests), Hotjar Surveys (kontextuell im Produkt).
Verknüpfung mit anderen Methoden
Umfragen ergänzen qualitative Methoden: User Interviews geben Tiefe, Umfragen geben Breite. Eine typische Mixed-Methods-Sequenz: zuerst Interviews zur Hypothesenbildung, dann Umfrage zur Validierung in großem Maßstab.
Vergleich & Abgrenzung
| Methode | Stichprobengröße | Tiefe | Zeitaufwand | Typ |
|---|---|---|---|---|
| Umfrage / Fragebogen | Groß (50–10.000+) | Gering–Mittel | Niedrig | Quant./Mixed |
| User Interviews | Klein (5–20) | Sehr hoch | Hoch | Qualitativ |
| Usability Testing | Klein (5–20) | Hoch | Hoch | Qualitativ/Quant. |
| 5-Second Test | Mittel (20–100) | Niedrig | Niedrig | Quantitativ |
| A/B-Test | Groß (1.000+) | Niedrig | Mittel | Quantitativ |
Umfragen sind keine Ersatz für Beobachtungsmethoden: Menschen berichten häufig nicht, was sie tun, sondern was sie zu tun glauben (Einstellungs-Verhaltens-Lücke, vgl. Norman, 2013).
Häufige Fragen (FAQ)
Wie groß muss die Stichprobe sein? Für verlässliche quantitative Aussagen gelten grob 100+ Antworten als Untergrenze. Für subgruppenspezifische Analysen (z.B. nach Alter oder Plattform) sollte jede Subgruppe mindestens 30 Antworten umfassen. Für Repräsentativität gegenüber der Gesamtpopulation gelten striktere statistische Regeln.
Wann Likert-Skala mit 5, wann mit 7 Punkten? 7-Punkt-Skalen liefern leicht mehr Varianz und eignen sich besser für feine Differenzierungen. 5-Punkt-Skalen sind intuitiver und werden seltener missverstanden. Für Standardinstrumente (SUS, SEQ) die originale Skalierung beibehalten.
Können Umfragen Usability messen? Bedingt. Umfragen erfassen die wahrgenommene Usability (subjektive Bewertung), nicht das tatsächliche Verhalten. Für echte Usability-Probleme ist Usability Testing mit Aufgaben nötig.
Muss ich den Fragebogen validieren? Für wissenschaftliche Studien: Ja, Reliabilität (Cronbachs Alpha) und Validität sollten geprüft werden. Für praktische UX-Projekte: Mindestens einen Pilottest mit 3–5 Personen durchführen.
Verwandte Einträge
Weiterführend
- Brooke, J. (1986). SUS – A quick and dirty usability scale. In P. W. Jordan et al. (Hrsg.), Usability Evaluation in Industry. Taylor & Francis.
- Dillman, D. A., Smyth, J. D. & Christian, L. M. (2014). Internet, Phone, Mail, and Mixed-Mode Surveys: The Tailored Design Method (4. Aufl.). Wiley.
- Laugwitz, B., Held, T. & Schrepp, M. (2008). Construction and Evaluation of a User Experience Questionnaire. Lecture Notes in Computer Science, 5298, 63–76.
- Norman, D. A. (2013). The Design of Everyday Things (überarbeitete Aufl.). Basic Books.
- Sauro, J. & Lewis, J. R. (2016). Quantifying the User Experience: Practical Statistics for User Research (2. Aufl.). Morgan Kaufmann.
- Sauro, J. (2011). A Practical Guide to the System Usability Scale. Measuring Usability LLC.
