testkonstruktion

wichtigster Vertreter der Badness-Fit-Indizes

mittlere Diskrepanz der implizierten Matrix pro Freiheitsgrad interpretieren

es lässt Konfidenzintervall berechnen, dass Null möglichst mit einschließen sollte

Promax

Direkte Oblimin

Maximum Likelihood

Generalized Least Square GLS

Unweighted Least Squares ULS

Asymptotically Distribution Free ADF

Korrelation von Items mit mit den Skalen und oder Testwerten anderer Fragebögen oder Kriterien

strebt Eindeutigkeit Zuordnung der Items zu Faktor an

1) bei einer Testung einer einzelnen Person zwischen den Teilen des Tests

2) intraindividuell (mehrfach Testung)

3) interindividuell (verschiedene Teilnehmer einer einzelnen Testug)

Differenzskalennievau (logarithmierte Verhältnisskala)

Logit Einheit (durch Logit-transformation)

Annahme: Ausprägung einer Person auf einer beobachteten Variable setzt sich aus gewichtete Kombination von Ausprägung auf latenter Variable plus Fehlerterm zusammen

z.B. PAF

schiefwinkilge Rotation

Korrelationen werden zugelassen

-> quadrierte Ladungen lassen sich nicht zeilenweise aufsummieren um die Kommunalität zu erhalten

-> Eigenwerte lassen sich nicht zum Maß für die aufgeklärte Gesamtvarianz adieren

+korrelierte Faktoren sind einfacher zu betrachten

Aspekt eines Rasch-skalierten Tests

Durch zwei Arten invarianter Vergleiche gekennzeichnet:

Vergleiche zwischen Personen sind invariant über die spezifischen Maße und Items

Vergleiche zwischen Items sind invariant über spezifische Personen

Speedtest

Test zur Messung von heterogenen Merkmalen

Messwerte können um eine multiplikative Konstante verschoben sein d.h. in unterschiedlichen Einheiten gemessen

Messung muss eindimensional sein (jedes Item läd nur auf einem FAktor

Faktorladung und Fehlerterme dürfen in der Höhe variieren

strengeres Kriterium als lokale Unabhängigkeit für Eindimensionalität

Gegeben, wenn für einzelne Person die Lösungswahrscheinlichkeiten zweier beliebiger Items multipliziert werden dürfen um kombinierte Lösungswahrscheinlichkeit zu erhalten

Bsp. externale Konstruktion

in MMPI angewendet

Items werden aus Pool ausgewählt, die signifikant zwischen zwei Gruppen unterscheiden (psychisch auffällig vs unauffällig)

+einfache Auswertung

+erleichert Anwendung PTT erheblich

-hohe Zufallslösung, muss durch längere Tests ausgeglichen werden

-Informationsverlust

Bei mittlerer Itemschwieirgkeit ( und hohe Streuung)

Hauptachsenanalyse (principal axis factor analysis PAF)

Hauptkomponentenanalyse (principal components analysis PCA)

Quote falscher Alarme

Versuchen Ausmaß der Modellgüte in einem Index zu quantifizieren (wie Effektstärke zu interpretieren)

standardisierte Bereich zumeist 0-1Cut-off Wert

beruhen auf chiquadrat-Test und versuchen Sensivität gegenüber Stichprobengröße, Freiheistgraden bzw beiden durch Korrekturfaktor auszugleichen

kein Signifikanztest auch wenn hier ebenso Grenzen für Cut-off Werte willkürlich gesetzt werden

Vorzugsweise verschiedene Fit-indizes berichten (aus verschiedenen Klassen)

Kurzaufsatzaufgaben

Ergänzungsaufgaben

eher bei Fähigkeits und Leistungstest da endliche Anzahl objektiver Lösungen

+keine Zufallslösungen möglich

+qualitative  Auswertung möglich (durch Lösungsweg)

+unerlässlich bei Wissenstest, stilistische Begabungs-Test

-fehlende Standardisierung

-erschöpfende Musterlösung

-ggf. Verletzung stochastischer Unabhängigkeit

-Vergleich

-Objektivität

-Auswertungsaufwand

rechteckige Kästchen

lateinische Buchstaben

Steigung der Itemfunktion (ICC) wieder

Steigung der Tangente im Wendepunkt (p=.50)

je höher Trennschärfe desto steiler die Steigung (Null bis pluss unendlich)

aus Organsiationspsychologie ursprünglich " Verfahren der beruflichen Leistungsbeurteilung"

heute

Arbeits und Organisationspsychologie "anforderungsanalytische Fundierung zahlreicher Instrumente"

gute oder unbefriedigende Leistung zeigen sich in konkreten erfolgskritischen Ereignissen

umfangreicher und konkrtetere Situationen als AFA

Umsetzung in Erhebungsinstrument erfolgt mittels unabhängiger Einschätzung der Erfolgswirksamkeit (kurze Zusammenfassung Ereignisse als Anker)

Validität hinsichtlich Vorhersage späterer beruflicher Leistung vielfach empirisch bestätigt, für Verfahren mit Ziel der Maximierung der kriterienbezogenen Validität

Varimax (dominante Methode)

Quartimax

Equamax

In der PTT geht es darum wie Antworten auf Items zustande kommen

-> Zusammenhang von Fähigkeit der Person und Wahrscheinlichkeit mit der eine Person Aufgabe löst

Antwortmuster werden betrachtet (statt Rohwertvarianzen und Kovaraianzen)

In PTT wird Modelltest durchgeführt (Eindimesnionalität, Zulässigkeit Summation)

In PTT ist es möglich stichprobenunabhängige Item- und Personenkennwerte zu ermitteln

Prozentualer Anteil der richtigen Lösungen an allen Lösungen eines Items innerhalb der Stichprobe

Index sinkt je weniger richtige Lösungen vorliegen

Hohe bzw niedrige Itemschwierigkeit bedeutet niedrige Itemvarianz

wenn Varianz des Gesamtwertes der Skala steigt

                        dies geschieht je höher positive Korrelation zwischen Items

                        je mehr positiv korrelierter Items zu einer Skala zusammengefasst werden

Überschätzung wenn  die positive Korreliertheit der Items durch einen systematischen Fehler künstich erhöht wird
 

Itemparameter

Personenparameter

Itemtrennschärfe

Ratewahrscheinlichkeit

erschöpfend-> Summenwert liefert alle Informationen über Fähigkeitsausprägung

quantifizieren und klassifizieren

Suche nach Personengruppen die sich im Antwortmuster maximal unterscheiden

Innerhalb der klassen gilt Rasch-Modell

Items die zu zweiklassenlösung führen werden elimiert

Um eine eindeutige Näherungslösung in der CFA herbeizuführen, muss ein Indikator als Referenzvariable ausgewählt und festgesetzt werden

Häufiges Vorgehen:

~bester (= reliabelster) Einzelindikator wird auf 1 gesetzt -> Faktor hat Metrik der Referenzvariable

Alternativ:

~zugehörigen Residuen oder Varianzen auf 1 setzten

Anteil gemeinsamer Varianz (Item und Faktor) an Gesamtvarianz der beteiligten Variable