Objektivität verhindert, dass subjektive Einflüsse das Ergebnis verzerren.

Drei Aspekte der Objektivität:

1. Durchführungsobjektivität

   • Einheitliche Testanweisungen

   • Gleiche Testbedingungen (Material, Zeitbegrenzung, Umgebung)

   • Festgelegter Umgang mit Fragen der Testperson

   Beispiel: Klassenlehrer*in gibt den Schüler*innen für die Prüfung die gleiche Klassenarbeit, jeder hat die selbe Durchführungszeit und einheitliche Anweisungen.

2. Auswertungsobjektivität

   • Das Testergebnis darf nicht vom Auswerter abhängen

   • Hohe Auswertungsobjektivität: Multiple-Choice-Aufgaben

   • Schwieriger bei: Offenen Antwortformaten –> hier braucht man klare, überprüfte Auswertungsregeln

   • Messbar durch Übereinstimmung verschiedener Auswerter

   Beispiel: Zwei Lehrer*innen korrigieren die gleiche offene Fragestellung bei einer Klausur. Damit beide die gleiche Punktzahl vergeben, können Musterlösungen oder Beispielantworten helfen.

3. Interpretationsobjektivität

   • Das Verständnis und die Schlussfolgerung aus Testergebnissen sollen unabhängig vom Anwender sein

   • Wichtig: klare Interpretationsregeln, Normtabellen und Vergleichswerte

   Beispiel: Ein Intelligenztest wird von zwei Personen unabhängig ausgewertet. Durch die Hilfe der Normtabelle kommen beide zu dem gleichen Ergebnis/ Interpretation.

Der Test ist reliabel, wenn er bei wiederholter Durchführung unter gleichen Bedingungen ähnliche Ergebnisse liefert

Wie wird die Reliabilität beschrieben und was sind die Grenzwerte?

Der Reliabilitätskoeffizienten (Rel) liegt zwischen 0 und 1. Ein guter Test sollte den Wert 0,7 nicht unterschreiten

Die Methoden / Arten der Reliabilität:

1.        Der Retest-Reliabilität

- Durchführung desselben Tests zu zwei unterschiedlichen Zeitpunkten

Einflussfaktoren: Übungseffekte, Veränderung des Merkmals über die Zeit

2.        Parralleltest- Reliabilität

- Dadurch können Übungs- und Erinnerungseffekte, sowie Merkmalsveränderung eliminiert/kontrolliert werden

- Ein Test wird in zwei Varianten angeboten (ähnliche Items)

3.        Testhalbierungs-Reliabilität

- Test wird in zwei Hälften geteilt (Nur eine Testdurchführung nötig)

- Da keine Testwiederholung möglich ist, wird der Test in zwei Hälften geteilt

(möglichst parallele Testformen)

- kürzeres Testverfahren (möglich im Gruppenvergleich)

4.        Innere/Interne Konsistenz

- Jedes Item eines Tests ist ein eigenständiger Testteil

- Die innere Konsistenz prüft die Korrelation zwischen den Testteilen (Alpha muss immer über 0,7 sein)

- Messen die Items einheitlich dasselbe Konstrukt

• wirtschaftlichkeit eines Tests 

•  finanzielle Aufwand für das Testmaterial (Anschaffung des Tests) 

• der zeitliche Aufwand für die Testdurchführung ( Testzeit)

Erkenntnisgewinn > entstehende Kosten 

- wichtigstes Gütekriterium
- Objektivität und Reliabilität liefern nur die günstigen Voraussetzungen für das Erreichen einer hohen Validität

- hohe Validität: erlaubt die Ergebnisse eines Tests die Generalisierung des in der Testsituation beobachteten Verhaltens auf das zu messende Verhalten außerhalb der Testsituation.

- Korrelation der Testwerte in der Testsituation mit einem korrespondierenden Verhalten außerhalb der Testsituation

- Validität eines Tests nicht nur mit einer einzigen Korrelation belegbar -----sondern vor allem wenn das Ausmaß, in dem die Angemessenheit und die Güte von Interpretationen und Maßnahmen auf Basis von Testwerten durch empirische Belege und theoretische Argumente gestützt sind

• Leistungstest = Forderung , dass eine leistungsfähigere Person einen besseren Testwert als eine schwächere Person erhält → sollte sich widerspiegeln 

→ Leistungsfähigkeit wird durch die Testwerte dargestellt 

• sollte sich auf interindividuelle als auch intraindividuelle Differenzen beziehen

Skalenniveau: 

• Nominal (reicht nicht aus zur Messung)

• Ordinal (leistungsfähigere Person besser ist → einmal hier messen ) 

• Intervall ( Größe inter- und intraindividueller Differenzen) 

• Rational (kaum verwendet) 

• empirisch Überprüfbar ob mathematische Regelmäßigkeiten gegeben sind

• je definierte die Fragebögen →mehr informationen

• Erfolgreich, wenn sich das gleiche Verhalten im Test und außerhalb des Tests zeigen (z.B. leistungsstark im Test und in der Schule)

• Zeitliche Verfügbarkeit des Kriteriums (Gegenwart/Zukunft)

  -> Übereinstimmungsvalidität (konkurrenter Validität)

  -> Vorhersagevalidität ( prognostische Validität)

-Ist der gesamte Inhaltsbereich durch die Testitems vollständig/ angemessen abgebildet?

-wird durch logische und fachliche Überlegungen bestimmt

-Bsp.: Rechtschreibkenntnisse werden anhand eines Diktates überprüft

Beispiel:

Ein Intelligenztest hat hohe Konstruktvalidität, wenn er wirklich Intelligenz misst –

und nicht Bildungsstand, Motivation oder Testangst.

Man unterscheidet zwei Ansätze zur Beurteilung:

Struktursuchende deskriptive Vorgehensweise (explorativ):

Mit exploratorischer Faktorenanalyse (EFA) wird untersucht, wie die Testaufgaben zusammenhängen und welche Dimensionen sie bilden.

-> Diese Struktur kann man dann in ein theoretisches Modell einordnen (z.B. nomologisches Netzwerk: theoriekonformer Zusammenhänge mit anderen Tests)

Strukturprüfende Vorgehensweise (Theoriegeleitet):

Prüfung ob Ergebnisse zu theoretischen Erwartungen passen - durch konvergente (ähnliche Tests korrelieren hoch) und diskriminante bzw. divergente Validität (unähnliche Tests korrelieren niedrig).