Kurz zusammengefasst
- Reliabilität betrifft die Konsistenz der Messung.
- Validität betrifft die Begründung einer Interpretation der Messwerte.
- Eine einzelne Kennzahl ersetzt keine Prüfung von Inhalt und Einsatzkontext.
Zwei verschiedene Qualitätsfragen
Reliabilität fragt, ob ein Messverfahren unter geeigneten Bedingungen hinreichend konsistente Werte liefert. Validität fragt, ob die beabsichtigte Schlussfolgerung aus den Messwerten gerechtfertigt ist. Eine Messung kann sehr gleichmäßig sein und dennoch am interessierenden Gegenstand vorbeigehen.
OpenStax stellt beide Konzepte bei der Beurteilung von Datenerhebungen gegenüber. Für deine Arbeit reicht es nicht, die Definitionen zu nennen. Beschreibe, welche Art von Wert du mit welchem Instrument erzeugst und welche Aussage du daraus tatsächlich ableiten möchtest.
Eigenes Beispiel: regelmäßige, aber unpassende Messung
Du möchtest im erfundenen Beispiel das Verständnis eines digitalen Werkzeugs erfassen. Eine Frage nach der Zahl der Logins kann zuverlässig wiederholt werden. Sie erfasst aber nicht direkt, ob die Person Funktionen verstanden hat. Auch viele Logins können durch technische Probleme statt durch Kompetenz entstehen.
Eine ergänzende Aufgabe, bei der Teilnehmende eine konkrete Funktion erklären oder anwenden, könnte näher am Verständnis liegen. Doch auch sie braucht klare Bewertungskriterien. Erkläre, welche Aspekte von „Verständnis“ deine Messung abdeckt und welche offenbleiben.
Geeignete Hinweise sammeln
Für eine mehrteilige Skala können Kennzahlen zur internen Konsistenz hilfreich sein. Sie zeigen aber nicht allein, ob die Items inhaltlich passen oder nur sehr ähnlich formuliert sind. Bei Bewertungen durch mehrere Personen kann die Übereinstimmung der Beurteilungen relevant sein; bei stabilen Eigenschaften eine erneute Messung.
Für die Validität prüfst du unter anderem Inhalt, beabsichtigte Verwendung und Beziehungen zu anderen geeigneten Beobachtungen. Ein Pretest kann Missverständnisse aufdecken; ein Vergleich mit einem passenden Außenkriterium kann eine bestimmte Interpretation stützen. Kein einzelner Schritt beweist universelle Gültigkeit.
Wähle Prüfungen nach dem Instrument. Die interne Konsistenz eines einzelnen Items ist nicht auf die gleiche Weise berechenbar wie bei einer Skala. Eine auf eine Gruppe bezogene Validierungsangabe lässt sich zudem nicht ungeprüft auf stark veränderte Fragen oder andere Zielgruppen übertragen.
Messgrenzen im Bericht konkret benennen
Nenne Instrument, Version, Zielgruppe, Berechnung und verfügbare Qualitätsbelege. Wenn du Items übersetzt oder kürzt, beschreibe die Änderung und prüfe ihre Folgen. Eine Quelle über das Originalinstrument ersetzt keine Begründung für deine veränderte Fassung.
Formuliere Einschränkungen als konkrete Grenzen der Interpretation: „Der Login-Indikator beschreibt Nutzungsvorgänge, aber nicht sicher das Funktionsverständnis.“ Das hilft Lesern mehr als die pauschale Aussage, die Validität könne nicht garantiert werden.
Einordnung für die finale Abgabe
Viele formale Themen wirken zunächst wie reine Schreibarbeit. Für die gedruckte Abgabe sind sie aber genauso wichtig: Was im Dokument fehlt, falsch platziert ist oder uneinheitlich formatiert wurde, erscheint später auch in der gebundenen Fassung.
Nutze den Beitrag deshalb nicht isoliert, sondern prüfe ihn zusammen mit Deckblatt, Inhaltsverzeichnis, Seitenzahlen, Quellenangaben und Anhang. Erst wenn die Datei vollständig ist, sollte sie als finale PDF für Druck und Bindung vorbereitet werden.
Praktische Kontrolle vor dem PDF-Export
- Stimmen Überschriften, Kapitelstruktur und Seitenzahlen?
- Sind Quellen, Abbildungen und Tabellen vollständig eingebunden?
- Sind Pflichtbestandteile wie Erklärung, Anhang oder Deckblatt enthalten, falls gefordert?
- Wurde die finale PDF-Datei nach dem Export noch einmal geöffnet und geprüft?
Checkliste
- Das beabsichtigte Konstrukt ist definiert.
- Messung und Schlussfolgerung sind verbunden.
- Reliabilitätsprüfung passt zum Instrument.
- Inhaltliche Validitätsargumente sind vorhanden.
- Änderungen und Grenzen sind konkret berichtet.
Typische Fehler
- Hohe interne Konsistenz als Beweis für inhaltliche Validität ausgeben.
- Eine Prüfung unpassend auf ein Einzelitem übertragen.
- Validierungsangaben einer Originalskala nach deutlicher Änderung ungeprüft übernehmen.
Deine fertige Arbeit drucken und binden
Wenn Inhalt und finale PDF geprüft sind, kannst du die Druckausführung passend zu deinen Abgabevorgaben konfigurieren.
Druck und Bindung konfigurierenWeiterführende Inhalte
Vertiefe passende Themen zu Aufbau, Quellenarbeit, Formatierung und Abgabe deiner wissenschaftlichen Arbeit.
Häufige Fragen
Kann ein Instrument reliabel, aber nicht valide sein?
Ja. Es kann regelmäßig ähnliche Werte liefern und trotzdem etwas anderes erfassen als beabsichtigt. Die konkrete Interpretation benötigt deshalb eigene Belege.
Muss ich immer Cronbachs Alpha berechnen?
Nein. Diese Kennzahl betrifft bestimmte Fragen zu mehrteiligen Skalen und hat Voraussetzungen und Grenzen. Wähle eine Qualitätsprüfung passend zum tatsächlichen Instrument und deiner Fragestellung.
Ist ein Fragebogen nach einem Pretest valide?
Ein Pretest kann Verständnisprobleme aufzeigen und Verbesserungen begründen. Er liefert jedoch nicht automatisch alle erforderlichen Belege für jede spätere Interpretation der Antworten.