Drei Gütekriterien stehen in jedem Methodenkapitel, meist als Aufzählung ohne Rangfolge. Die ETH Zürich sieht das anders und stellt eines davon über die beiden anderen. Dieses eine ist die Validität.
Validität meint die Gültigkeit einer Messung: Ein Fragebogen oder eine Prüfung ist valide, wenn er tatsächlich und ausschliesslich jenes Merkmal misst, um das es in der Fragestellung geht, und nicht unbemerkt ein anderes, weil sonst die Ergebnisse eine andere Frage beantworten als die gestellte. Nach diesem Beitrag kannst du sagen, welche Art der Validität deine Arbeit belegt.
📌 Das Wichtigste im Überblick
- Valide misst ein Instrument nur das gemeinte Merkmal.
- Die ETH Zürich nennt Validität das wichtigste Gütekriterium.
- Inhalts-, Kriteriums- und Konstruktvalidität sind die drei Arten.
- Eine Kennzahl für Validität gibt es nicht.
- Interne Validität meint den Ursachenschluss, externe die Reichweite.
Kostenlos Umfrage erstellen
Mit empirio.ai erstellst du in wenigen Minuten eine moderne Online-Umfrage – mit Hosting in der EU.
- Umfrage per KI
- Per Drag & Drop anpassen
- Auswertung in Echtzeit
Validität: Gültigkeit einer Messung, in einem Satz
Validität bezeichnet die Gültigkeit einer Messung. Das Glossar Prüfungen der ETH Zürich formuliert die Anforderung so: Eine Messung „soll tatsächlich und ausschliesslich das interessierende Merkmal messen und nicht irgendetwas anderes“. Moosbrugger und Kelava (2012) sagen dasselbe für Tests.
Valide ist das zugehörige Adjektiv. Ein Beispiel aus der Lehre: Eine Statistikprüfung soll den Lernerfolg im Semester abbilden. Werden die Aufgaben aus einem alten Studienreglement übernommen und passt nur ein Drittel zum behandelten Stoff, misst die Note vor allem Vorwissen. Wer knapp unter die Vier fällt, scheitert dann an der Aufgabenauswahl und nicht am eigenen Lernen.
Neben Objektivität und Reliabilität bildet Validität das dritte der Hauptgütekriterien. Geprüft wird bei ihr nicht der Ablauf einer Erhebung, sondern deren Konstruktion. Eine handwerklich einwandfrei durchgeführte Befragung kann am Thema vorbeimessen, und keine Kennzahl zeigt das an.
Hinweis
Umgangssprachlich steht valide für stichhaltig oder belastbar, etwa in der Wendung „valide Zahlen“. Fachlich ist der Begriff engmaschiger: Gültig ist eine Messung stets nur bezogen auf ein bestimmtes Merkmal und einen bestimmten Zweck, niemals pauschal.
Die Rangfolge der drei Gütekriterien nach der ETH Zürich
Das Glossar Prüfungen der ETH Zürich ordnet die drei Hauptgütekriterien in eine Kette: „Validität setzt Reliabilität voraus und Reliabilität Objektivität.“ Zur Validität selbst hält dasselbe Glossar fest, sie sei „damit das wichtigste aller Gütekriterien“, weil eine Messung ohne Gültigkeit ihre Berechtigung verliert.
Die Rangfolge findet sich in vielen deutschen Lehrbüchern nur zwischen den Zeilen, im ETH-Glossar steht sie ausgeschrieben. Praktisch heisst sie: Erst klärt sich, ob die Erhebung für alle gleich abläuft, dann, ob sie genau messt, und zuletzt, ob sie das Richtige messt. Ein Instrument mit kleinem Messfehler darf trotzdem am Merkmal vorbeigehen, ein ungenaues kann nie gültig sein.
Für den Methodenteil einer Bachelor-Thesis ergibt sich daraus eine brauchbare Gliederung. Zuerst die standardisierte Durchführung beschreiben, dann die Genauigkeit der Skalen berichten, dann die Gültigkeit begründen. Wer in dieser Reihenfolge schreibt, muss nichts zurücknehmen, was vorher behauptet wurde.
Drei Arten der Validität und wie sie belegt werden
Ein einzelnes Prüfverfahren für Validität existiert nicht. Belegt wird sie über Argumente unterschiedlicher Herkunft, und die Testtheorie ordnet sie in drei Arten. Der Unterschied liegt im Massstab: der eigene Inhalt, ein äusseres Kriterium oder die Theorie hinter dem Merkmal.
In studentischen Arbeiten fällt die Wahl meist auf zwei davon. Ein unabhängiges Vergleichskriterium steht selten zur Verfügung, weshalb Inhalts- und Konstruktvalidität den Methodenteil tragen. Argumentiert wird dort, gerechnet eher nicht.
Inhaltsvalidität: Deckt der Fragebogen das Merkmal ab?
Inhaltsvalidität gibt an, inwieweit ein Test oder ein einzelnes Item das zu messende Merkmal repräsentativ erfasst. Belegt wird sie über die fachliche Herleitung der Fragen und über das Urteil mehrerer Fachpersonen zu Relevanz, Repräsentativität, Genauigkeit und Klarheit. Bei einer Prüfung lautet dieselbe Frage, ob die Aufgaben die Lernziele abdecken.
Kriteriumsvalidität: Lässt sich auf etwas ausserhalb schliessen?
Kriteriumsvalidität liegt vor, wenn vom Verhalten in der Testsituation erfolgreich auf ein Kriterium ausserhalb der Testsituation geschlossen werden kann. Ein gleichzeitig vorliegendes Kriterium ergibt Übereinstimmungsvalidität, ein zukünftiges Vorhersagevalidität. Beispiel für den zweiten Fall: ein Eignungstest, dessen Ergebnis mit dem späteren Studienerfolg zusammenhängt.
Konstruktvalidität: Trägt der Schluss auf das dahinterliegende Merkmal?
Konstruktvalidität liegt vor, wenn der Rückschluss vom Antwortverhalten auf das dahinterliegende Merkmal wissenschaftlich fundiert ist. Als Argumente dienen Korrelationen in zwei Richtungen: hoch mit Verfahren zum gleichen Merkmal (konvergente Validität), niedrig mit Verfahren zu einem bewusst anderen (diskriminante Validität). Die neuere Testtheorie behandelt Konstruktvalidität als Dach über allen Belegarten.
Verbreitet ist auch eine Liste mit fünf Arten, ergänzt um Expertenvalidität und Known-Groups-Validität. Eigene Arten sind das keine, sondern Belegwege: Das Urteil von Fachpersonen stützt die Inhaltsvalidität, der Vergleich mit einer Gruppe, deren Unterschied vorab bekannt ist, stützt die Konstruktvalidität. Im Methodenteil geraten sonst Verfahren und Validitätsart in eine gemeinsame Aufzählung.
Interne und externe Validität betreffen das Design
Interne und externe Validität beurteilen nicht das Messinstrument, sondern die Anlage der Untersuchung. Interne Validität fragt, ob eine Aussage über Ursache und Wirkung innerhalb der Studie hält, also ob tatsächlich die untersuchte Variable den Effekt ausgelöst hat und keine dritte. Externe Validität fragt nach der Reichweite: Gilt das Ergebnis auch für andere Personengruppen, andere Situationen und andere Zeitpunkte? Lydia Repke, Lukas Birkenmaier und Clemens M. Lechner legen beides in der GESIS Survey Guideline zur Validität (2024) auseinander.
Interne und externe Validität stehen in Spannung zueinander. Die Guideline notiert, dass beide in der Forschung üblicherweise als umgekehrt zueinander angenommen werden, ohne dass daraus ein zwingender Gegensatz folgt. Ein Laborexperiment hält Störeinflüsse klein und den Alltag draussen. Eine Feldbefragung holt den Alltag herein, samt aller Einflüsse, die niemand steuert.
Bei einer Online-Umfrage läuft die Trennlinie klar: Die externe Validität entscheidet sich an der Stichprobe, die interne daran, ob sich Alternativerklärungen ausschliessen lassen. Eine Befragung von 80 Mitstudierenden, aus der eine Aussage über alle Studierenden der Schweiz wird, scheitert an der Reichweite und nicht am Fragebogen. Das gewählte Forschungsdesign legt damit fest, welche der beiden Formen überhaupt beansprucht werden kann.
Kostenlos Umfrage erstellen
Mit empirio.ai erstellst du in wenigen Minuten eine moderne Online-Umfrage – mit Hosting in der EU.
- Umfrage per KI
- Per Drag & Drop anpassen
- Auswertung in Echtzeit
Warum es keinen Validitätswert zum Berichten gibt
Ein Gegenstück zum Reliabilitätskoeffizienten fehlt in der Testtheorie. Validität erscheint nicht als Zahl im Ergebnisteil, sondern als Begründung im Methodenteil, und nur ein Ausschnitt davon ist rechenbar. Die Suche nach dem Wertebereich der Validität geht deshalb ins Leere.
Rechenbar ist die Kriteriumsvalidität, weil sie als Korrelation zwischen Testwert und Kriterium vorliegt. Zur Einordnung solcher Korrelationen nennt die GESIS Survey Guideline grobe Richtwerte: klein (0,10), mittel (0,30), gross (0,50). Als Schwellenwert für Gültigkeit taugen diese Zahlen nicht, wohl aber als Lesehilfe.
| Art | Beleg | Passt bei |
|---|---|---|
| Inhaltsvalidität | fachliche Herleitung und Urteil von Fachpersonen | nahezu jeder Abschlussarbeit |
| Konstruktvalidität | Korrelationen mit ähnlichen und unähnlichen Verfahren | selbst entwickelten Skalen |
| Kriteriumsvalidität | Korrelation mit einem unabhängigen Kriterium | vorhandenem Aussenkriterium |
| Interne Validität | Kontrolle von Alternativerklärungen | Experimenten und Wirkungsfragen |
| Externe Validität | Stichprobenziehung und Erhebungssituation | Aussagen über eine Grundgesamtheit |
Achtung
Ein Validitätswert ohne eigenes Verfahren gehört nicht in die Arbeit. Im Kolloquium wird der Methodenteil verteidigt und nicht die Kennzahl: Eine hergeleitete Inhaltsvalidität plus offen benannte Grenze der Stichprobe trägt dort deutlich weiter!
Validität erhöhen und zwei Verwechslungen vermeiden
Entschieden wird Validität bei der Operationalisierung, also dort, wo aus einem abstrakten Begriff konkrete Fragen entstehen. Nach dem Feldstart ist nichts mehr zu retten: Eine Frage, die neben dem Merkmal liegt, bleibt neben dem Merkmal, unabhängig von der Zahl der Antworten.
Zwei Verwechslungen kosten in Methodenteilen regelmässig Punkte. Die erste betrifft Cronbachs Alpha: Ein hoher Wert belegt Genauigkeit und keine Gültigkeit. Eine Skala darf in sich vollkommen konsistent sein und dennoch soziale Erwünschtheit anstelle der eigenen Einstellung erfassen.
Die zweite Verwechslung betrifft das Kriterium. Gemeint ist damit ein unabhängig erhobenes Merkmal ausserhalb der Testsituation, etwa eine Note, ein Verkaufsergebnis oder eine ärztliche Diagnose. Ein Abgleich der eigenen Umfrageergebnisse mit der Literatur prüft die Plausibilität der Befunde, nicht die Kriteriumsvalidität des Instruments.
Was die Gültigkeit deiner Messung sichert
- Die Hypothese steht vor der ersten Frage.
- Jede Frage gehört zu einer Dimension der Fragestellung.
- Mehrere Fragen treffen dasselbe Merkmal aus verschiedenen Richtungen.
- Ein Pretest klärt, wie die Zielgruppe die Fragen liest.
- Fachpersonen sehen den Fragenkatalog vor dem Versand durch.
- Die Grenzen der Stichprobe stehen im Methodenteil.
Fazit
Unter den drei Gütekriterien sieht Validität am wenigsten nach Statistik aus und sagt am meisten über eine Arbeit. Berechnet wird sie nicht, begründet schon, und die Begründung entsteht beim Formulieren der Fragen. Wer die Rangfolge der ETH im Kopf hat und die Reichweite seiner Stichprobe offenlegt, geht ruhig ins Kolloquium.
Keine Zahl belegt Validität. Die Herleitung der Fragen belegt sie.
Wie es weitergeht
- Du willst alle drei Gütekriterien nebeneinander sehen? Objektivität, Reliabilität, Validität im Vergleich
- Du brauchst die Messgenauigkeit? Was bedeutet Reliabilität?
- Du suchst das dritte Kriterium? Was bedeutet Objektivität?
- Du willst deine Stichprobe begründen? Wann ist meine Online-Umfrage repräsentativ?
- Du willst den ganzen Ablauf im Blick haben? Empirische Forschung: Definition, Methoden, Leitfaden
Unser Literaturtipp: Für die Schweizer Praxis lohnt das Glossar Prüfungen der ETH Zürich, es definiert alle drei Gütekriterien auf einer Seite und nennt ihre Rangfolge. Die Systematik der Validitätsarten führt Kapitel 2 von Moosbrugger, Helfried und Kelava, Augustin (Hrsg.) (2012): Testtheorie und Fragebogenkonstruktion, 2. Auflage, Springer, als Leseprobe frei zugänglich.
Du willst deine Fragen prüfen, bevor die Erhebung startet?
Mit empirio.ai, einem Online-Umfrage-Tool aus Deutschland, legst du deinen Fragebogen kostenlos an und schickst ihn zuerst an wenige Personen für einen Pretest. Die Daten liegen zu 100 Prozent in der EU.