Methodik

Wie hängen empirische Testwerte mit den zu messenden (tatsächlichen) Merkmalsausprägungen zusammen?

Welchen Anforderungen muss ein Test genügen, um von den empirischen Testwerten auf die tatsächliche Ausprägung des Merkmals schliessen zu können?

• Tagesform
• Motivation
• and. Merkmale

• Durchführung
• Auswertung
• Interpretation

• Reliabilität
• Validität

1. Objektivität
2. Reliabilität
3. Validität
    
4. Skalierung
5. Normierung
6. Testökonomie
7. Nützlichkeit
8. Zumutbarkeit
9. Unverfälschbarkeit
10. Fairness

Stellt die Vergleichbarkeit von Testleistungen verschiedener Testpersonen sicher. Standardisierung der Testdurchführung, Testauswertung & Testinterpretation.

Test ist objektiv, wenn er dasjenige Merkmal, das er misst, unabhängig von Testleiter und Testauswerter misst.

1. Durchführungsobjektivität (gleiche Durchführungsbedingungen, unabhängigkeit des Testleiters)
    
2. Auswertungsobjektivität (Testergebnis unabhängig von Auswerter, bei offenen Fragen schwieriger)
    
3. Interpretationsobjektivität (Interpretation unabhängig vom Testleiter, Grad der Eindeutigkeit mit der verschiedene Anwender dem gleichen numerischen Wert (Test score) die gleiche Merkmalsausprägung zuordnen)

Messpräzison / Messgenauigkeit

Test ist reliabel (zuverlässig), wenn er das Merkmal, das er misst, exakt, d.h. ohne Messfehler misst.

Reliabilität ist statistische beurteilbar.

1. Retest-Reliabilität
2. Paralleltest-Reliabilität
3. Testhalbierungs-Reliabilität
4. Innere Konsistenz (zb. Cronbach alpha)

Bezeichnet den Grad der inhaltlichen Übereinstimmung, mit der ein Test misst, was er messen soll, bzw. die Generalisierbarkeit des gemessenen Merkmals auf das Verhalten ausserhalb der Testsituation.

Test ist valide (gültig), wenn er das Merkmal das er messen soll, auch wirklich misst und nicht irgendein anderes.

1. Inhaltsvalidität (inwieweit wird das zu messende Merkmal repräsentativ erfasst wird)
    
2. Augenscheinvalidität (inwieweit Validitätsanspruch vom blossen Augenschein für Laien gerechtfertigt erscheint)
    
3. Kriteriumsvalidität (Wenn vom Verhalten der Testperson innerhalb der Testsituation erfolgreich auf ein Kriterium (das Verhalten ausserhalb der Testsituation) geschlossen werden kann --> praktische Anwendbarkeit)
    
4. Konstruktvalidität (Rückschluss vom Verhalten der Testperson innerhalb der Testsituation auf zugrundeliegende psychologische Persönlichkeitsmerkmale)

Erfüllt, wenn die laut Verrechnungsregel resultierenden Testwerte die empirischen Merkmalsrelationen adäquat abbilden. 

Erstellen eines Bezugssystems, mit dessen Hilfe die Ergebnisse einer Testperson im Vergleich zu den Merkmalsausprägungen anderer Personen eindeutig eigeordnet und interpretiert werden können.

Wichtig:
Eistichprobe muss repräsentativ sein --> Geltungsbereich & Zielgruppe definieren
Normen dürfen nicht veraltet sein
Normen liefern Hinweise über Interpretationsobjektivität

Wenn Test gemessen am diagnostischen Erkenntnisgewinn relativ wenig finanzielle & zeitliche Ressourcen beansprucht.

Test ist zumutbar, wenn er absolut und relativ zu dem aus seiner Anwendung resultierenden Nutzen die zu testende Person in psychischer sowie körperlicher Hinsicht nicht überbelastet.

Wenn für das von ihm gemessenen Merkaml praktische Relevanz besteht und die auf seiner Grundlage getroffene Entscheidung mehr Nutzen als Schaden erwarten lassen.

Wenn Verfahren derart konstruiert ist, dass die zu testende Person durch gezieltes Testverhalten die konkreten Ausprägungen ihrer Testwerte nicht steuern bzw. verzerren kann.

Wenn resultierende Testwerte zu keiner systematischen Benachteiligung bestimmter Personen aufgrund ihrer Zugehörigkeit zu ethnischen, soziokulturellen oder geschlechtsspezifischen Gruppen führen.

Diagnostik ist eher erkundend, bezeichnend & prognosestellend. 

Intervention ist die eigentliche Massnahme, die Veränderungen beabsichtigt.

Diagnostik kann zu Intervention führen, Intervention setzt Diagnostik voraus.

1. Fragestellung: Es hat zuwenige Plätze für Maturanden die Medizin studieren wollen, also will man Verfahren entwickeln, welches eine Auswahl trifft.
    
2. Untersuchungsszenario: Vorselektion, man lässt nur diejenigen zum Medizinstudium zu, welche die besten Chancen habe, erfolgreich abzuschliessen.
    
3. Bestimmung des Untersuchungsverfahrens: Wie kann man herausfinden, welche Maturanden die besten Erfolgschancen haben? --> Eignungstest
   Wenn neuer Test, dann formaler & inhaltlicher Aufbau festlegen
    
4. Untersuchungsphase: Eignungstest wir an Maturanden angewandt
    
5. Auswertung & Interpretation der Ergebnisse, Vergleich mti Normen: Überprüfen, ob diejenigen Maturanden, welche beim Test am besten abschneiden auch wirklich die grösste Wahrscheinlichkeit haben, den Abschluss zu bestehen --> Kriteriumsvalidität
    
6. Reichen die gewonnenen Informationen um Fragestellung zu beantworten: Eventuell muss Eignungstest überarbeitet werden; es werden nur diejenigen Aufgaben verwendet, die die erfolgreichen von anderen Studenten trennen
    
7. Diagnose, Prognose, Intervention: Wenn sich Test bewährt, Vorschlag diesen anzuwenden.
    
8. Evaluation: Nach einiger Zeit Nacherhebung durchführen. Valide Schlussfolgerungen wenn sowohl Studierende, welche sehr gute Ergebnisse im im Eignungstest erzielten, sowie solche welche schlechte Ergebnisse erzielten, erfasst werden können (Streuung in Testwerten). Oder Vergleich der Abschlussrate vor und nach Einführung des Eignungstests.

Weil Reliabilität & Objektivität zwar Voraussetzungen der Validität sind, sie jedoch nicht garantieren dass der Test valide ist. Ein Test kann nie valide sein, wenn er nicht reliabel und objektiv ist. Er kann aber nicht valide sein und trotzdem reliabel und objektiv.

• Weil er reliabel und objektiv sein muss
• Da in Psychologie oft Konstrukte untersucht werden, die nicht direkt gemessen werden können (latente). Deshalb müssen diese erst definiert und operationalisiert werden. Daher ist Validität nicht direkt, sondern nur durch Schlüsse über Beziehungen zu anderen Variablen / Konstrukten messbar.

• Leistungstests
   
• Psychometrische Persönlichkeitstests
   
• Projektive Verfahren / Persönlichkeitsentfaltungsverfahren (nicht psychometrisch)
   
• Apparative Tests

Nominalskala

Ordinal-, Intervall- & Verhältnisskala

Anwendungsmöglichkeiten des Tests.

inhaltliche Validität, Kriteriumsvalidität

enger Geltungsbereich ist testtheoretische geeigneter

mehr Anforderungen an den Test.

mehr Anforderungen an den Test.

• Intuitive Strategie (deduktiv)
• Rationale Strategie (deduktiv)
   
• Externale / kriteriumsorientierte Strategie (induktiv)
• Internale / Faktoranalytische Strategie (induktiv)