Welche Aspekte der Objektivität gibt es?

Durchführungsobjektivität

• Testergebnis nicht abhängig von Testleiter

• Standardisierung eines Tests erhöht Durchführungsobjektivität (z.B. gleiche Zeitvorgabe) —> Bedingungen sollen in jedem Test konstant sein

• Ziel = Vermeidung von Verzerrung durch Verhalten von Testleiter

Auswertungsobjektivität

• Testergebnis ist nicht abhängig von Person, die den Test auswertet (Testauswerter)

• Auswertungsobjektivität bei Multiple-Choice problemlos erreichbar

• Auswertungsobjektivität bei offenen Fragen benötigen eindeutige und konkrete Auswertungsrichtlinien, um einheitliche Überprüfung zu gewährleisten

• Je einheitlicher die Auswertungsregeln, desto objektiver die Ergebnisse

Interpretationsobjektivität

• unterschiedliche Testauswerter sollen zu gleichen Schlussfolgerungen kommen

• Sicherstellung durch Normtabellen, eindeutige Bedingungen und Regeln (Testautor kann in Testmanual Hilfestellung geben)

Wie können diese in der Praxis gewährleistet werden?

Durchführungsobjektivität

• Testperson stellt in Testsituation die einzige Variationsquelle dar

• Alle anderen Bedingungen = konstant/kontrolliert  —> stellen keine Störvariablen dar

• Interaktion zwischen Testleiter und Testperson soll vermieden werden

• Beispiel: bei einem Konzentrationstest liest der Testleiter immer denselben Text vor

Auswertungsobjektivität

• Auswertungskriterien für Test festlegen und diese konstant anwenden

• Vgl. Punktesystem für Antworten

• Beispiel: Bewertungsrichtlinie, welche Antworten wie viele Punkte erhalten (schwache Antworten = 1 Punkt, starke Antworten = zwei Punkte)

Interpretationsobjektivität

• Einheitliches Bewertungsschema

• Beispiel: Zwei Psychologen, die den gleichen Test auswerten, sollen beide feststellen, dass die Frau hochintelligent ist

—> Normtabelle ermöglicht Interpretationsobjektivität

• Test ist reliabel (zuverlässig), wenn er das Merkmal, das er misst, ohne Messfehler misst.

Sie wird durch den Reliabilitätskoeffizienten (Rel) erfasst (zwischen 0 und 1):

• Rel = 1: keine Messfehler, perfekte Zuverlässigkeit

• Rel = 0: ausschließlich Messfehler

-> Guter Test nicht unter Rel= 0,7 aufweisen

Beispiel Auswirkung von Messfehlern:

• Reliables Messinstrument = Meterstab -> Messung von Körpergröße einer Person

• Vorstellung: Maßband aus Gummiband -> Ungenaue Messung -> Maßband kann zufällig gedehnt werden

• -> Fehlurteil

Ausmaß der Reliabilität bestimmen -> Man unterscheidet vier Vorgehensweisen:

1. Retest-Reliabilität

2. Paralleltest-Reliabilität

3. Testhalbierungs-Reliabilität

4. Innere Koonsistenz

möglich zeitlich, psychisch & körperlich 

belastend sein.

• geht um die Testperson und nicht um den Testleiter

• gesellschafttliche Normen können Zumutbarkeit beeinflussen

wesentlich beeinflusst durch 2 Faktoren (finanzieller Aufwand und zeitlicher)

• die Testperson kann das Ergebnis des Testes nicht manipulieren

• Messprinzip darf nicht durchschaut werden (geringe Augenscheinvalidität)

• Verzerrung

• Verfälschung im Sinne der Sozialen Erwünschtheit

• Leistungstest sind unproblematisch, Persönlichkeitsfragebögen anfällig & Objektive Test nicht durchschaubar

…beschreibt wie gut ein Test tatsächlich das misst, was er messen soll

- Objektivität und Reliabilität sind keine Garantie für Validität

1. Inhaltsvalidität
Misst ob ein Test das zu erfassende Merkmal inhaltlich vollständig und repräsentativ abbildet.
Beispiel: Ein Diktat-Test misst direkt Rechtschreibkenntnisse

2. Augenscheinvalidität
Beschreibt ob ein Test vom Augenschein her plausibel und für Außenstehende verständlich erscheint.
Beispiel: Ein Intelligenztest mit Denkaufgaben wirkt glaubwürdig, um Intelligenz zu messen

3. Konstruktvalidität
Gibt an, ob der Test tatsächlich das theoretische Konstrukt misst, das er messen soll.
Konvergente Validität: Hohe Korrelation mit Tests, die dasselbe Konstrukt messen
Beispiel: Neuer IQ-Test korreliert hoch mit einem älteren IQ-Test

Diskriminante Validität: Geringe Korrelation mit Tests, die ein anderes Konstrukt messen.
Beispiel: Konzentrationstest korreliert wenig mit Intelligenztest

Der struktursuchende Ansatz untersucht mit Faktorenanalysen, ob die Testaufgaben wirklich das geplante Konstrukt (zB Intelligenz) erfassen

4. Kriteriumsvalidität
Zeigt, wie gut Testergebnisse ein Verhalten oder Kriterium außerhalb der Testsituation vorhersagen.
Beispiel: Ein Schulreifetest sagt den späteren Schulerfolg der Kinder zuverlässig voraus

• Unfairness durch Itembias vermeiden = für verschiedene Personengruppen schwierig

• Culture-Fair-Tests: keine hohe sprachliche Fähigkeit

• Durchführungsfairness: keine Vorraussetzungen für die Durchführungen notwendig

• Testroutine: unterschiedliche Testerfahrungen oder Vertrautheit mit Testsituationen können beeinflussen