Du hast eine Umfrage online gestellt, 60 Leute haben teilgenommen und trotzdem kannst du mit den Antworten wenig anfangen? Das liegt selten an den Teilnehmenden, sondern an drei, vier Entscheidungen beim Erstellen des Fragebogens.
Eine erfolgreiche Online-Umfrage entsteht, indem du vor der ersten Frage festlegst, welche Entscheidung du am Ende treffen willst, den Fragebogen auf 10 bis 15 Minuten begrenzt, jede Frage nur einen Sachverhalt abfragen lässt, die Antwortmöglichkeiten überschneidungsfrei hältst und den Entwurf vor dem Versand von drei fremden Personen ausfüllen lässt.
Bei empirio.ai, einem Online-Umfrage-Tool aus Deutschland, prüft die KI den ganzen Fragebogen und das gehört zum kostenlosen Tarif. Die Zahlen in diesem Artikel kommen aus der Fachliteratur zu Fragebogenlänge, Rücklaufquote und Datenqualität.
📌 Das Wichtigste im Überblick
- Ideale Länge einer Online-Umfrage: 10 bis 15 Minuten.
- Jede Frage fragt genau einen Sachverhalt ab, nie zwei.
- Web-Umfragen liegen laut Daikeler (2020) rund 12 Punkte unter anderen Befragungsarten.
- Statistik Austria nennt diese Kennzahl Ausschöpfungsquote.
- Ein Pretest mit drei fremden Personen findet die meisten Fehler.
Kostenlos Umfrage erstellen
Mit empirio.ai erstellst du in wenigen Minuten eine moderne Online-Umfrage – mit Hosting in der EU.
- Umfrage per KI
- Per Drag & Drop anpassen
- Auswertung in Echtzeit
Diese Umfrage-Tipps zählen zuerst
Eine Umfrage ist dann erfolgreich, wenn du am Ende eine Frage beantworten kannst, die du vorher nicht beantworten konntest. Nicht, wenn viele Leute mitgemacht haben. Eine Befragung mit 40 sauberen Antworten auf eine klare Frage ist mehr wert als 400 Antworten auf einen Fragebogen, der alles ein bisschen abfragt.
Deshalb lohnt es sich, die folgenden Tipps nicht der Reihe nach abzuarbeiten, sondern nach Wirkung. Die größten Verluste entstehen früh: beim Ziel, bei der Länge und bei der Formulierung. Ein Umfrage-Tool setzt dir den Fragebogen zusammen, aber kein Werkzeug prüft, ob deine Fragen die richtigen sind.
| Dein Anlass | Darauf kommt es zuerst an |
|---|---|
| Umfrage für die Bachelor- oder Diplomarbeit | klare Forschungsfrage, saubere Formulierung, dokumentierte Stichprobe |
| Befragung in der Lehrveranstaltung | kurze Länge, konkrete Fragen, Abstimmung mit der Lehrenden |
| Umfrage im Verein oder Freundeskreis | wenige Fragen, Handy-Ansicht, klarer Einladungstext |
| Meinungsbild für einen Beitrag | neutrale Formulierung, ausgewogene Optionen, Grenzen benennen |
Die acht Tipps decken den ganzen Weg ab, von der Zielfrage bis zur Auswertung. Wenn du parallel die Gliederung planst, hilft dir der ausführliche Leitfaden zum Aufbau einer Umfrage bei den einzelnen Abschnitten. Und wenn du lieber direkt am eigenen Entwurf mitliest, kannst du bei empirio.ai in wenigen Minuten kostenlos eine Umfrage erstellen und jeden Tipp sofort ausprobieren.
Tipp 1: Erst die Zielfrage, dann der Fragebogen
Die Zielfrage ist der eine Satz, den du am Ende der Auswertung beantworten willst. Sie steht vor der ersten Fragebogenfrage, nicht danach. Ohne sie entsteht fast automatisch ein Fragebogen, der zwanzig interessante Dinge streift und am Ende keine Entscheidung ermöglicht.
Ein Beispiel aus dem Verein: „Sollen wir das Sommerfest auf den Samstag verlegen?“ ist eine Zielfrage. „Was denken die Mitglieder über das Sommerfest?“ ist keine. Die erste Version sagt dir, welche Fragen du brauchst, nämlich Verfügbarkeit am Samstag, Anreiseweg und Betreuungspflichten. Die zweite Version lädt dazu ein, einfach alles zu fragen.
Der Test für die Zielfrage dauert zwei Minuten. Nimm jede Frage in deinem Entwurf und sage laut, was du tust, wenn 70 Prozent so und 30 Prozent anders antworten. Fällt dir dazu nichts ein, kann die Frage raus. Bei einer ersten Fassung fällt auf diese Weise oft ein Drittel der Fragen weg und die Umfrage wird spürbar kürzer. Die Zielfrage entscheidet nebenbei über den Zuschnitt: Brauchst du am Ende Häufigkeiten oder Begründungen?
Jede Frage, deren Antwort nichts verändert, kostet dich Teilnehmende und bringt dir nichts.
Tipp 2: Wie lang darf eine Online-Umfrage sein?
Eine Online-Umfrage sollte etwa 10 bis 15 Minuten dauern, die Schmerzgrenze der Befragten liegt im Mittel bei 20 bis 25 Minuten. Diese Zahlen stammen von Melanie Revilla und Jan Karem Höhne (2020), die in zwei deutschsprachigen Online-Panels rund 7.800 Personen direkt nach der idealen und der maximalen Länge gefragt haben. Erhoben wurde im Juli und August 2019, veröffentlicht im International Journal of Market Research.
Häufig liest man, eine Umfrage dürfe höchstens fünf Minuten dauern. Das stimmt nur für Blitzumfragen im Freundeskreis. Für eine Befragung mit einer echten Fragestellung verschenkst du damit Inhalt, den die Teilnehmenden dir sogar zugestehen würden. Entscheidend ist nicht die Minutenzahl allein, sondern ob die Länge zum Anlass passt und ob du sie vorher ehrlich ankündigst.
| Anlass | Realistische Länge | Zahl der Fragen |
|---|---|---|
| Blitzumfrage im Freundeskreis | unter 2 Minuten | 3 bis 5 |
| Kundenbefragung | 3 bis 5 Minuten | 8 bis 12 |
| Umfrage für eine Abschlussarbeit | 10 bis 15 Minuten | 20 bis 35 |
| Mitarbeiterbefragung | 10 bis 15 Minuten | 25 bis 40 |
Richtwerte, gerechnet mit rund 20 bis 30 Sekunden je Frage. Stand: November 2026.
Warum die angekündigte Dauer über die Teilnahme entscheidet
Die angekündigte Dauer wirkt auf die Teilnahme, noch bevor jemand die erste Frage sieht. Mirta Galesic und Michael Bosnjak (2009) haben Teilnehmenden angekündigt, ihr Fragebogen dauere 10, 20 oder 30 Minuten. Je länger die Ankündigung, desto weniger Menschen fingen überhaupt an und desto weniger kamen bis zum Ende. Fragen, die weiter hinten standen, wurden außerdem schneller, kürzer und einheitlicher beantwortet als dieselben Fragen am Anfang (Public Opinion Quarterly).
Wie du die Länge ehrlich ankündigst
Die ehrliche Zeitangabe ist die, die du selbst im Testlauf gemessen hast, nach oben gerundet. Eine geschönte Angabe verschiebt die Abbrüche nur nach hinten, statt sie zu verhindern: Wer bei Minute zwölf merkt, dass die versprochenen fünf Minuten nicht stimmen, bricht ab und die halb ausgefüllten Bögen sind für die Auswertung meist verloren. Stelle deshalb auch die Fragen, an denen deine Auswertung hängt, in die erste Hälfte.
Tipp 3: Fragen so formulieren, dass alle dasselbe verstehen
Eine gute Umfragefrage wird von allen Teilnehmenden gleich verstanden und lässt sich beantworten, ohne über die Formulierung nachzudenken. Timo Lenzner und Natalja Menold haben die Regeln dafür in den GESIS Survey Guidelines (2015) zusammengestellt. Die meisten Fehler in privaten Umfragen verstoßen gegen genau vier davon.
| Regel | So besser nicht | Besser |
|---|---|---|
| Ein Sachverhalt pro Frage | „Wie zufrieden bist du mit Preis und Service?“ | zwei getrennte Fragen stellen |
| Keine doppelte Verneinung | „Bist du dagegen, dass das Verbot bleibt?“ | „Bist du für ein Verbot?“ |
| Keine Suggestion | „Findest du auch, dass der Beitrag zu hoch ist?“ | „Wie bewertest du die Höhe des Beitrags?“ |
| Eindeutiger Zeitraum | „Warst du kürzlich im Verein?“ | „Warst du in den letzten vier Wochen im Verein?“ |
Einen fünften Fehler übersieht fast jede Anleitung: die unausbalancierte Alternativfrage. „Findest du, dass alle Mitglieder Dienst leisten sollten?“ nennt nur eine der beiden Möglichkeiten beim Namen. Nach Lenzner und Menold bekommt die ausformulierte Alternative dadurch mehr Zustimmung als die stillschweigende. Die Lösung ist unspektakulär: beide Seiten ausschreiben, also „… oder sollte das jedem selbst überlassen bleiben?“.
Tipp
Lies jede Frage laut vor und achte darauf, wo du beim Sprechen stockst. Genau an dieser Stelle stockt später auch die Person, die deine Umfrage ausfüllt. Verschachtelte Nebensätze und Wörter wie „gegebenenfalls“ fallen so in Sekunden auf.
Welcher Fragetyp zu welcher Information passt, ist eine eigene Entscheidung. Eine Übersicht mit Beispielen liefern die Fragetypen für Fragebögen und Umfragen, die Abwägung zwischen Freitext und Vorgabe steht bei den offenen und geschlossenen Fragen.
Kostenlos Umfrage erstellen
Mit empirio.ai erstellst du in wenigen Minuten eine moderne Online-Umfrage – mit Hosting in der EU.
- Umfrage per KI
- Per Drag & Drop anpassen
- Auswertung in Echtzeit
Tipp 4: Antwortmöglichkeiten vollständig und überschneidungsfrei halten
Antwortmöglichkeiten müssen zwei Bedingungen erfüllen: Sie decken das gesamte Spektrum ab, und keine zwei Optionen überlappen sich. Der Klassiker für den zweiten Fehler sind Altersgruppen wie „20 bis 30“ und „30 bis 40“. Wer 30 ist, kann beides ankreuzen, und die Auswertung dieser Frage ist hinüber.
Vollständigkeit ist die unauffälligere Bedingung. Fehlt die Option, die eine Person eigentlich wählen würde, passiert eines von zwei Dingen: Sie überspringt die Frage, oder sie kreuzt irgendetwas an. Beides verzerrt dein Ergebnis, und im zweiten Fall merkst du es nicht einmal. Ein Feld „Sonstiges“ mit Textzeile kostet dich nichts und fängt genau diese Fälle auf.
Wann eine Option „weiß nicht“ sinnvoll ist
Eine Option „weiß nicht“ gehört überall dorthin, wo die befragte Person die Antwort tatsächlich nicht kennen kann. Bei Wissensfragen und bei Themen, die nicht alle betreffen, ist sie Pflicht. Bei Einstellungsfragen dagegen ist sie ein bequemer Ausweg: Wer sich nicht festlegen mag, nimmt sie, und dir fehlt die Information. Faustregel: anbieten, wenn Unwissen realistisch ist, sonst lieber eine Filterfrage davorschalten.
Gerade oder ungerade Skala bei Bewertungsfragen
Eine ungerade Skala mit fünf oder sieben Stufen hat eine echte Mitte, eine gerade Skala mit vier oder sechs Stufen zwingt zu einer Tendenz. Beide Formen sind zulässig, sie messen nur nicht dasselbe. Ist eine neutrale Haltung eine gültige Position, nimm die ungerade Skala. Brauchst du eine Richtung, etwa bei einer Zufriedenheitsmessung, ist die gerade Skala die ehrlichere Wahl. Wichtig ist vor allem, innerhalb eines Fragebogens bei einer Form zu bleiben. Wie die gängigste dieser Skalen aussieht und beschriftet wird, steht bei der Likert-Skala.
Warum die Reihenfolge der Antwortoptionen zählt
Bei Listen zum Anklicken werden die oberen Optionen häufiger gewählt als die unteren. Lenzner und Menold beschreiben diesen Primacy-Effekt für die visuelle Darstellung; beim Vorlesen dreht er sich um, dann gewinnen die letzten Punkte. Sortiere Optionen deshalb nie nach deiner eigenen Vorliebe. Wo es keine natürliche Reihenfolge gibt, hilft eine zufällige Anordnung, die viele Umfrage-Tools als Einstellung anbieten.
Wie du Skalen beschriftest und wie viele Stufen zu welcher Frage passen, steht ausführlich bei den Bewertungsfragen in Fragebögen und Umfragen.
Tipp 5: Die Reihenfolge der Fragen bewusst planen
Die Reihenfolge der Fragen entscheidet mit darüber, wie gut die Antworten werden. Galesic und Bosnjak (2009) haben gezeigt, dass Fragen am Ende eines Web-Fragebogens schneller, kürzer und einheitlicher beantwortet werden als dieselben Fragen am Anfang. Die letzten Fragen bekommen also systematisch die schwächeren Daten.
Für den Aufbau folgt daraus eine schlichte Reihenfolge. Nach vorn kommt, was du wirklich brauchst. Nach hinten kommt, was nett zu wissen wäre. Demografische Angaben wie Alter, Geschlecht oder Studienrichtung gehören ans Ende, weil sie niemanden zum Mitmachen bewegen und auch dort noch zuverlässig ausgefüllt werden.
- Einstiegsfrage. Leicht, konkret, ohne Nachdenken zu beantworten.
- Kernfragen. Die Fragen, an denen deine Auswertung hängt.
- Vertiefung. Detailfragen, Freitext, Sonderfälle.
- Demografie. Alter, Geschlecht, Rolle, nur wenn du sie auswertest.
Eine Ausnahme gibt es: Filterfragen. Gilt ein Teil deiner Fragen nur für bestimmte Personen, muss die Filterfrage vor diesem Teil stehen. Frag also erst „Warst du beim Sommerfest?“ und zeige die Detailfragen nur denen, die mit Ja geantwortet haben. Rücksprünge im Fragebogen ersparst du dir damit.
Welche demografischen Angaben du überhaupt brauchst, ist auch eine Datenschutzfrage. Jede Zusatzangabe verkleinert die Gruppe, in der eine einzelne Person verschwindet. In einer Lehrveranstaltung mit 25 Teilnehmenden genügen Studienrichtung, Semester und Alter oft schon, um einzelne Personen erkennbar zu machen. Die demografischen Fragen in Umfragen gehen darauf im Detail ein und wie eine Teilnahme wirklich anonym bleibt, steht bei der anonymen Umfrage.
Tipp 6: Den Fragebogen vor dem Versand testen lassen
Ein Pretest ist der wirksamste einzelne Schritt vor dem Versand und zugleich der am häufigsten übersprungene. Drei bis fünf Personen, die dein Thema nicht kennen, füllen den Fragebogen aus, während du danebensitzt oder telefonierst. Sie sagen dir bei jeder Frage, wie sie diese verstanden haben.
Übersprungen wird der Pretest fast immer aus Zeitnot und genau das ist der teuerste Zeitgewinn im ganzen Ablauf. Eine missverständliche Frage lässt sich vor dem Versand in zwei Minuten umschreiben. Ist der Link einmal draußen, bleibt dir nur die Wahl, die Frage aus der Auswertung zu nehmen oder sie mit einer Einschränkung zu berichten.
Welche Frage du im Pretest stellst
Der Erfolg des Pretests hängt an der Frage, die du den Testpersonen stellst. „Ist das verständlich?“ bringt nichts, weil alle höflich Ja sagen. „Was genau meinst du mit deiner Antwort?“ und „Was hast du unter dieser Frage verstanden?“ bringen die Missverständnisse ans Licht, weil die Testperson dann in eigenen Worten erzählt, was sie gelesen hat. In der Methodenlehre heißt dieses Vorgehen kognitiver Pretest, und die GESIS Survey Guidelines führen es als Standardverfahren.
Checkliste vor dem Versand
Die folgenden Punkte lassen sich in zehn Minuten prüfen und fangen genau die Fehler ab, die sich später nicht mehr korrigieren lassen. Geh sie einmal komplett durch, bevor du den Link verschickst. Verzweigt dein Fragebogen, klick jeden Pfad einzeln durch, wie es der Beitrag zu Logik und Verzweigung in Umfragen beschreibt.
- Jede Frage fragt genau einen Sachverhalt ab.
- Keine Antwortkategorie überschneidet sich mit einer anderen.
- Der Fragebogen läuft auf dem Handy ohne seitliches Scrollen.
- Die Filterführung springt an keiner Stelle zurück.
- Die angekündigte Dauer stimmt mit dem Testlauf überein.
- Der Hinweis zum Datenschutz steht vor der ersten Frage.
Den Datenschutzhinweis unterschätzen viele. Sobald du personenbezogene Angaben erhebst, brauchst du einen kurzen, verständlichen Hinweis darauf, was du speicherst und wofür. Die Aufsicht liegt in Österreich bei der Datenschutzbehörde. Welche Angaben dazuzählen und wie ein solcher Hinweis aussehen kann, steht beim Datenschutz bei Umfragen.
Achtung
Ein Testdurchlauf mit dir selbst zählt nicht. Du kennst die Fragen, du liest sie nicht mehr, und du brauchst dafür etwa ein Drittel der Zeit. Nimm die Dauer aus dem Testlauf einer fremden Person und runde nach oben, bevor du sie in der Einladung nennst.
Wenn du keine drei Testpersonen zusammenbekommst, bleibt ein zweiter Blick von außen. Bei empirio.ai prüft die KI den ganzen Fragebogen, und das gehört zum kostenlosen Tarif: Ein kostenloses Konto reicht dafür aus. Einen kognitiven Pretest mit echten Menschen ersetzt das nicht, weil eine KI nicht sagen kann, wie eine Vereinsobfrau deine Frage versteht. Es fängt aber die Fehler ab, die man im eigenen Entwurf nicht mehr sieht.
Tipp 7: Teilnehmende gewinnen und Abbrüche vermeiden
Der Einladungstext entscheidet über einen großen Teil deiner Teilnahmen. Er beantwortet drei Fragen in drei Sätzen: worum es geht, wie lange es dauert und was mit den Daten passiert. Alles darüber hinaus liest kaum jemand, und alles darunter kostet dich Teilnehmende.
Der zweite Hebel ist der Zeitpunkt. Ein Link am Freitagnachmittag verschwindet im Wochenende, ein Link mitten in der Prüfungswoche in der Hektik. Verschicke ihn dann, wenn deine Gruppe erreichbar ist, und plane genau eine Erinnerung nach vier bis fünf Tagen ein. Zwei Erinnerungen nerven mehr, als sie einbringen.
Was in die Einladung gehört
✓ Thema in einem Satz, Dauer in Minuten
✓ Was mit den Antworten passiert und wer sie sieht
✕ Lange Vorrede über dich, deine Studienrichtung und deine Betreuung
→ Den Satz „Es werden keine Namen und E-Mail-Adressen gespeichert“ nur schreiben, wenn er stimmt
Wie du die Rücklaufquote einer Umfrage berechnest
Die Rücklaufquote ist die Zahl der vollständig ausgefüllten Fragebögen geteilt durch die Zahl der angeschriebenen Personen, die überhaupt zur Zielgruppe gehören. So definiert sie die American Association for Public Opinion Research in den Standard Definitions (10. Auflage, 2023). Dort stehen sechs Varianten dieser Quote nebeneinander, die sich nur darin unterscheiden, wie sie angebrochene Fragebögen und Fälle mit unklarer Zugehörigkeit zählen.
Die Zahl, die dein Umfrage-Tool anzeigt, ist meist eine andere. Eine Abschlussquote rechnet abgeschlossene Fragebögen gegen die Zahl der Personen, die den Fragebogen geöffnet haben. Wer über einen offenen Link verteilt, kann die Rücklaufquote deshalb gar nicht berechnen, weil niemand weiß, wie viele Menschen den Link gesehen haben. Für eine Abschlussarbeit ist das kein Beinbruch, es gehört aber so in die Methodik geschrieben.
Ausschöpfungsquote: was die amtliche Statistik in Österreich erreicht
In der amtlichen Statistik in Österreich heißt diese Kennzahl Ausschöpfungsquote, und Statistik Austria weist sie für jede Erhebung eigens aus. Für das Mikrozensus-Ad-hoc-Modul 2019 zur Arbeitsorganisation nennt die Standard-Dokumentation 98,9 Prozent, und zwar weil die Teilnahme an diesem Modul verpflichtend war.
Genau darin liegt der Unterschied zu deiner Umfrage. Wo niemand mitmachen muss, liegen die Quoten um ein Vielfaches darunter, und das ist kein Fehler in deinem Fragebogen. Wer eine Zahl aus der amtlichen Statistik als Maßstab nimmt, vergleicht eine Pflicht mit einer Bitte.
Warum Online-Umfragen seltener beantwortet werden als andere Befragungen
Online-Umfragen bekommen im Schnitt rund 12 Prozentpunkte weniger Rücklauf als dieselbe Befragung per Post, Telefon oder im persönlichen Gespräch. Jessica Daikeler, Michael Bošnjak und Katja Lozar Manfreda haben dafür 114 experimentelle Vergleiche aus 75 Veröffentlichungen zusammengerechnet (Journal of Survey Statistics and Methodology, 2020). Gegenüber der Vorgängerauswertung mit 11 Punkten hat sich der Abstand kaum verändert.
Interessanter als der Mittelwert ist, was ihn kleiner macht. Bei Menschen, die schon in einem Panel oder auf einer Liste stehen, liegt der Abstand bei etwa 9 Punkten, bei einmalig angeschriebenen Personen bei etwa 21. Kommt die Einladung per E-Mail, schrumpft er auf etwa 6 Punkte. Für deine Umfrage heißt das: Ein Verteiler, den du schon hast, etwa über die ÖH oder dein Institut, und eine Einladung per E-Mail sind die beiden Hebel mit der größten Wirkung.
Was Anreize für die Teilnahme wirklich bringen
Anreize erhöhen den Rücklauf, und zwar in allen Befragungsarten. Klaus Pforr hat die Forschungslage dafür in den GESIS Survey Guidelines (2016) zusammengestellt. Zwei Befunde daraus sind praktisch: Geld wirkt besser als Sachgeschenke, und ein Anreiz, den alle vorab bekommen, wirkt besser als einer, den nur die Teilnehmenden hinterher bekommen. Für Online-Studien weist diese Zusammenstellung nach Göritz (2006) eine um 20 Prozent höhere Chance auf eine Antwort aus.
Auf die Qualität der Antworten wirkt Geld dagegen kaum. Nach derselben Zusammenstellung gibt es nur schwache Hinweise darauf, dass Anreize übersprungene Fragen seltener machen. Für eine private oder studentische Umfrage ist ein Vorab-Betrag an alle ohnehin keine Option, und zur Verlosung als der häufigsten Variante nennen die Guidelines keinen eigenen Befund. Wer verlost, sollte die Wirkung auf den Rücklauf also nicht überschätzen.
Wann eine niedrige Rücklaufquote zum Problem wird
Eine niedrige Rücklaufquote ist nicht automatisch eine verzerrte Umfrage. Robert M. Groves hat 30 methodische Studien verglichen und keinen starken Zusammenhang zwischen der Höhe des Rücklaufs und der Größe der Verzerrung gefunden (Public Opinion Quarterly, 2006). Entscheidend ist nicht, wie viele geantwortet haben, sondern ob sich die Antwortenden in genau dem Merkmal von den Nichtantwortenden unterscheiden, das du messen willst.
Praktisch heißt das zweierlei. Eine Quote von 20 Prozent ist für sich genommen kein Ausschlusskriterium, sie verlangt aber eine Begründung. Und ein hoher Rücklauf schützt nicht, wenn eine ganze Gruppe systematisch fehlt: 80 Prozent Rücklauf aus dem Verteiler deines Instituts bleiben eine Aussage über dieses Institut. Schreib in die Methodik, wen du erreicht hast und wen vermutlich nicht. Maßgeblich ist die Vorgabe deiner Hochschule, nicht dieser Artikel.
Kurz zur Stichprobengröße
Statistische Signifikanz hängt nicht an einer festen Teilnehmerzahl. Sie ergibt sich aus der Stärke des Zusammenhangs, den du finden willst, aus der Streuung in den Daten und aus dem Fehlerniveau, das du akzeptierst. Eine allgemeine Untergrenze wie „ab 100 Teilnehmenden“ gibt es dafür nicht.
Wie viele Antworten du brauchst, hängt deshalb weniger an der reinen Teilnehmerzahl als am Auswahlverfahren. Eine Umfrage mit 500 Antworten aus einer Instagram-Story bildet deine Follower ab, nicht die Bevölkerung. Wann eine Befragung tatsächlich repräsentativ ist und wann nicht, entscheidet sich daran, ob jede Person aus deiner Zielgruppe dieselbe Chance hatte, gefragt zu werden. Welche Kanäle sich lohnen und welche Tauschbörsen ihren Preis haben, steht bei den Wegen, wie du Teilnehmer für deine Online-Umfrage findest.
Tipp 8: Unbrauchbare Antworten erkennen, ohne gute wegzuwerfen
Unbrauchbare Antworten erkennst du am zuverlässigsten an der Bearbeitungszeit, nicht an Fangfragen. Dominik Leiner (2019) hat in mehreren Experimenten geprüft, welche Merkmale gedankenlos ausgefüllte Fragebögen verraten, und die Rohdaten dazu offengelegt. Das Ergebnis ist für viele Ratgeber unangenehm, weil sie genau das Gegenteil empfehlen.
Leiners Untersuchung ist frei zugänglich in Survey Research Methods erschienen. Für deine eigene Auswertung sind daraus zwei Punkte wichtig.
Warum Fangfragen zu viele gute Fälle aussortieren
Die klassische Fangfrage („Kreuze hier bitte ‚stimme voll zu‘ an“) sieht auf den ersten Blick hervorragend aus. In Leiners dritter Studie erkannte sie 365 von 368 absichtlich schlampig ausgefüllten Fragebögen, also 99 Prozent. Sie markierte aber auch 347 von 852 sorgfältig ausgefüllten Bögen als unbrauchbar, also 41 Prozent. Wer streng danach aussortiert, wirft rund vier von zehn guten Antworten weg.
Die Bearbeitungszeit als besseres Maß
Leiner schlägt stattdessen einen relativen Geschwindigkeitsindex vor. Dafür teilt man die typische Bearbeitungszeit der Stichprobe durch die Zeit, die eine einzelne Person im Schnitt je Seite gebraucht hat. Als praktische Grenze empfiehlt er den Wert 2,0: Wer doppelt so schnell war wie der Rest, hat die Fragen mit hoher Wahrscheinlichkeit nicht gelesen.
Eine Einschränkung nennt Leiner selbst, und sie ist wichtig. Bei Wissens- und Faktenfragen taugt die Zeit nicht als Maß, weil Fachkundige schlicht schneller antworten als Laien. Dann bleibt der Blick auf die Antwortmuster: Wer in einer Skalenbatterie zwanzigmal dieselbe Stufe ankreuzt, hat entweder eine sehr klare Meinung oder gar keine.
Für deine Auswertung heißt das: Sortiere nicht nach einem einzelnen Merkmal aus, sondern schau dir die auffälligen Fälle einzeln an. Und halte fest, was du aussortiert hast und warum. In einer Abschlussarbeit ist genau diese Dokumentation ein Qualitätsmerkmal, kein Eingeständnis.
Typische Fehler bei Online-Umfragen
Die folgenden vier Fehler tauchen in fast jeder ersten Umfrage auf. Alle vier lassen sich vor dem Versand mit wenigen Minuten Aufwand beheben und danach gar nicht mehr.
Alle vier zeigen sich erst in der Auswertung als Datenproblem, obwohl sie beim Aufbau des Fragebogens entstanden sind. Wer die Muster einmal kennt, erkennt sie im eigenen Entwurf meist auf Anhieb.
Die Umfrage misst etwas anderes als geplant
Eine Frage wie „Wie zufrieden bist du mit unserem Angebot?“ misst die Stimmung am Tag der Befragung, nicht die Qualität des Angebots. Wer wissen will, was konkret stört, muss konkret fragen, also getrennt nach Öffnungszeiten, Preis und Auswahl. Sonst bleibt am Ende ein hübscher Mittelwert, aus dem sich keine einzige Maßnahme ableiten lässt.
Der Fragebogen ist auf dem Handy unbenutzbar
Breite Skalenbatterien mit sieben Spalten sehen am Laptop gut aus und sind auf einem Telefon kaum zu bedienen. Ein großer Teil der Teilnahmen kommt aber vom Handy, gerade wenn du den Link über Messenger oder soziale Netzwerke verteilst. Öffne deinen Entwurf einmal auf dem eigenen Telefon, bevor du ihn verschickst.
Die Auswertung war vorher nicht durchdacht
Freitextfelder entstehen in Sekunden und sind teuer auszuwerten. Bei 200 Antworten sitzt du an fünf offenen Fragen mehrere Abende. Plane offene Fragen deshalb sparsam ein, meist reicht eine einzige am Ende. Überlege dir bei jeder geschlossenen Frage vorher, welche Auswertung du damit rechnen willst.
Anonymität wird versprochen, aber nicht hergestellt
„Die Umfrage ist natürlich anonym“ steht in der Einladung, im Tool ist die Erfassung der E-Mail-Adresse aber noch aktiv. Wenn das auffliegt, ist das Vertrauen dahin, und zwar nicht nur für diese eine Befragung. Prüfe die Einstellung im Tool, bevor du das Wort anonym benutzt.
Fazit
Eine erfolgreiche Online-Umfrage ist keine Frage des Tools, sondern der Vorarbeit. Wer die Zielfrage klärt, die Länge ehrlich plant, jede Frage auf einen Sachverhalt reduziert und den Fragebogen einmal von fremden Personen ausfüllen lässt, hat die vier größten Fehlerquellen erledigt. Alles Weitere lässt sich unterwegs nachbessern. Und wenn der Rücklauf am Ende dünner ausfällt als gehofft: Entscheidend ist nicht die Quote, sondern ob dir eine ganze Gruppe fehlt.
Wie es weitergeht
- Du willst beim Fragebogen Schritt für Schritt vorgehen? Einen Fragebogen richtig anlegen
- Du schreibst gerade eine Abschlussarbeit? Umfrage für Bachelorarbeit und Masterarbeit
- Du suchst noch das passende Werkzeug? Umfrage-Tools im Vergleich
Bereit für deine eigene Umfrage?
Bei empirio.ai, einem Online-Umfrage-Tool aus Deutschland, legst du den Fragebogen kostenlos an und probierst Logik und Design aus, bevor du den Link verschickst.
