Ist die Unabhängigkeit vom Diagnostiker & Auswertungsobjektivität ist gegeben, wenn die Auswertung gleich ist, egal wer es macht

Benutzt man, um interne Konsistenz zu messen & Ein hohes α sollte nicht bei heterogenen Konstrukten angestrebt werden

Bei echten Kriterien liegt eine hohe Übereinstimmung zwischen Konstrukt und Kriterium und ein hoher Status des Kriteriums vor. & Target-Kriterien haben weder hohen Status noch hohe Übereinstimmung. & Beispiel für ein Quasi-Kriterium wäre die Validierung von einem neuen Test an einem alten Test

Diagnostik Testtheorie und Testentwicklung Würzburg Altklausurfragen

0.0 (0)

V. V.

Study

V. V.

About these flashcards

Diese Lernkarten decken zentrale Konzepte der psychologischen Diagnostik ab, insbesondere Testtheorie und Testentwicklung auf universitärem Niveau. Sie behandeln Begriffe wie Validität, Reliabilität und Trennschärfe, Modelle wie das Rasch-Modell sowie Methoden zur Erfassung von Intelligenz und Leistungstests. Studierende profitieren von diesem Set, da es prüfungsrelevante Inhalte kompakt zusammenfasst und durch Multiple-Choice-Fragen das Verständnis für Testkonstruktion und -bewertung vertieft.

Flashcards

Students

Language

German

Flashcards

Definition der psych. Diagnostik

Das Wort „Diagnostik“ kommt aus dem Lateinischen.

Psychologische Diagnostik ist dadurch erschwert, dass das zu messende Konstrukt nicht direkt beobachtbar ist.

Sie umfasst drei zentrale Teilaspekte

2.Teilaspekte der psych. Diagnostik

Psych. Diagnostik soll es ermöglichen eine Prognose über die Psyche abzugeben

Psych. Diagnostik soll die Ursachen eines mentalen Zustandes klären.

Diagnostik hat den Anspruch einer möglichst genauen Messung von Eigenschaften.

Gesetzliche Rahmenbestimmungen

Wer unbefugt ein fremdes Geheimnis, namentlich ein zum persönlichen Lebensbereich gehörendes Geheimnis oder ein Betriebs-oder Geschäftsgeheimnis, offenbart, das ihm als Berufspsychologen mit staatlich anerkannter wissenschaftlicher Abschlussprüfung… anvertraut worden oder sonst bekannt geworden ist, wird mit Freiheitsstrafe bis zu einem Jahr oder mit Geldstrafe bestraft.

Wer unbefugt ein fremdes Geheimnis, namentlich ein zum persönlichen Lebensbereich gehörendes Geheimnis oder ein Betriebs-oder Geschäftsgeheimnis, offenbart, das ihm als Gehilfe oder Praktikant eines Berufspsychologen mit staatlich anerkannter wissenschaftlicher Abschlussprüfung… anvertraut worden oder sonst bekannt geworden ist, wird mit Freiheitsstrafe bis zu einem Jahr oder mit Geldstrafe bestraft.

Psychologen haben kein Zeugnisverweigerungsrecht.

Grundvoraussetzungen psychometrischer Tests

Objektivität

Differenzierung

Normalität

Unabhängigkeit vom Diagnostiker

Reliabilität

Grundvoraussetzungen psychometrischer Tests 2

Komplette zeitliche Stabilität

Testwerte müssen Konstrukt nicht zwingend abbilden

Natürlichkeit

Validität

Standardisierung

Rationale Methode

Wird auch deduktive Methode genannt.

Ist nicht theoriegeleitet

Wird auch induktive Methode genannt

Liegt dem HAWIE Intelligenztest zugrunde.

Liegt dem NEO-FFI zugrunde.

Externale Methode

wird auch kriteriumsorientierte Methode genannt

Benötigt einen möglichst breit gefächerten Itempool

Liegt dem thematischen Apperzeptionstest zugrunde

Wird auch rationale Methode genannt.

Führt zu Skalen hoher Homogenität

Externale Methode 2

Es ist eine Kreuzvalidierung nötig

Der Ausgangspunkt ist eine Gruppe, die differenziert werden soll

Der Ausgangspunkt ist eine homogene Gruppe.

Induktive Methode

Innerhalb der Skalen muss eine Einfachstruktur und interne Konsistenz, welche der Homogenität entspricht, vorliegen

Liegt der Korrelationsrechnung zugrunde

Der Big-Five-Faktor Extraversion wurde durch Interpretation erschlossen.

Es müssen umfangreiche Stichproben erhoben werden

Induktive Methode 2

Führt tendenziell zu Skalen hoher Homogenität

Die Methode ist die Faktorenanalyse

Prototypenansatz

Prototypen repräsentieren Objekte verschiedener Gruppen

Es gibt Objekte, die innerhalb einer Gruppe andere mit größter Ähnlichkeit repräsentieren

Der Prototypenansatz besagt, dass sich Objekte in kognitive Kategorien einordnen lassen

Schwierigkeit: Speed-& Powertests

Bei Speedtests sind die Items so leicht, dass sie theoretisch von allen Probanden gelöst werden könnten

Die Differenzierung zwischen Probanden erfolgt bei Powertests durch die Begrenzung der Bearbeitungszeit

Ein Beispiel für einen Powertest ist der d2 Aufmerksamkeitstest

Bei Speedtests haben Itemkennwerte keine große Aussagekraft

Ein Beispiel für einen Powertest ist der Matrizentest

Schwierigkeitsindex einer Ratingskala

Wird berechnet mit der von allen Probanden erreichte Punktzahl minus von allen erreichbare Punktzahl durch die Anzahl der Versuchspersonen mal 100.

wird berechnet mit den von allen erreichte Punktzahl geteilt durch die von allen Probanden erreichbare Punktzahl mal 100

Wird berechnet mit den Punkten der besten Probanden minus der Punkte der schlechtesten mal 100.

Homogenität: Definition

Skalenhomogenität ist die Korrelation aller Items einer Skala.

Skalenhomogenität ist die Korrelation eines Items mit einer Skala

In der Klassischen Testtheorie sind Items homogen, wenn ihre Item-Charakteristik-Kurven gleichartig verlaufen

In der KTT sind Items homogen, wenn jeder Proband, der eine schwere Aufgabe löst, auch alle leichteren Aufgaben löst

In der KTT sind Items homogen, wenn die inhaltlich und formal übereinstimmen

Homogenität: Konstruktionsprinzipien

Homogenität ist bei externaler Skalenentwicklung meist hoch.

Homogenität ist bei induktiver Konstruktionsmethode meist hoch

Homogenität ist bei rationaler Methode bei eng begrenztem Konstrukt hoch.

Trennschärfe: Part-whole-Korrektur

Die Teil-Ganz-Korrektur soll die Unterschätzung der Trennschärfe korrigieren.

Die Teil-Ganz-Korrektur soll die Überschätzung der Trennschärfe korrigieren.

Die Trennschärfeindices werden dadurch stets größer.

Trennschärfe: Part-whole-Korrektur

Die Trennschärfeindices werden dadurch stets kleiner.

Je größer die Anzahl der Items einer Skala ist, desto kleiner der Effekt der part-whole-Korrektur

Je ähnlicher die Items einer Skala sind, desto kleiner sind die Effekte der part-whole-Korrektur

Trennschärfe

Produkt-Moment-Korrelation wendet man bei intervallskalierten Items an.

Biseriale Korrelation wendet man bei Intervallskalierten Items an.

Trennschärfe ist die Korrelation eines Items mit allen Items einer Skala.

Trennschärfe ist die Korrelation von Itemwert und Summenwert

Trennschärfe

Je kleiner die Trennschärfe, desto mehr trägt ein Item zur Differenzierung der Vp in Löser/ Nichtlöser bei

Trennschärfe und Homogenität sind essentiell dasselbe

Wenn die Trennschärfe hoch ist, sollte man besonders andere Kennwerte beachten

Je größer die Trennschärfe, desto mehr trägt ein Item zur Differenzierung der Vp in Löser/ Nichtlöser bei

Item A („Ich bin gewissenhaft“ ja/nein) ergab bei einer Stichprobe einen Trennschärfeindex von rit= .55 und einen Schwierigkeitsindex von P=66.7, wohingegen Item B („Mein Zimmer ist immer aufgeräumt“ ja/nein) rit=.60 und P=62.3 erreicht. Berechnen Sie den Selektionskennwert Sel= ��/��(��)= ��/��Wurzel(��).

Es wird Item A bevorzugt

Es wird Item B bevorzugt

Der Zusammenhang zwischen Schwierigkeit und Trennschärfe ist U-förmig

Objektivität

Ist die Unabhängigkeit vom Diagnostiker

Ist bei Konstruktion, Durchführung und Interpretation von Bedeutung

Durchführungsobjektivität ist das Ausmaß, in dem das Verhalten der Testperson eindeutig in Testwerten abgebildet wird.

Die statistische Vorgehensweise bei der Interpretation führt zu geringerer Objektivität als die klinische Vorgehensweise

Auswertungsobjektivität ist gegeben, wenn die Auswertung gleich ist, egal wer es macht

Was sind keine Nebengütekriterien

Skalierung

Zumutbarkeit

Akzeptanz

Validität

Unverfälschbarkeit

Was sind keine Nebengütekriterien?

Augenscheinvalidität

Fairness

Ökonomie

Objektivität

Natürlichkeit

Reliabilität

Ist die technische Messgenauigkeit

Ist keine Eigenschaft der Zufallsvariable

Ist eine Eigenschaft des Tests

Der Reliabilitätskoeffizient ist definiert als der Anteil der Varianz einer True-Score-Variablen, der auf die Varianz der Testvariable zurückgeführt werden kann

Reliabilität

Hohe Reliabilität ist Voraussetzung für eine hohe Objektivität

Zur Berechnung der Reliabilität ist in der Regel eine einfache Messung ausreichend

Für eine Berechnung muss man zwei zentrale Annahmen treffen

Der Truescore ist ein bedingter Erwartungswert der Testvariablen

Axiome der KTT

Der Erwartungswert des True-Scores ist 1

True-Score und Residuum korrelieren max. mit 1

Fehler sind unkorreliert

Testvariable setzt sich additiv aus Truescore und Fehler zusammen

Erwartungswert des Fehlers ist Null

Doppelte Messung

Retestmethode hat die Annahme, dass die Fehler exakt gleich sind

Paralleltestmethode nimmt eine perfekte zeitliche Stabilität an

Die Testhalbierungsmethode besagt, dass die Truescores beider Testhälften gleich sind

Reliabilität bedeutet perfekte zeitliche Stabilität.

Retest-reliabilität wird auch Wiederholungsreliabilität bzw. Split-Half-Reliabilität genannt

Doppelte Messung

Bei der Testhalbierungsmethode werden Powertests anhand der Bearbeitungszeit aufgeteilt. Powertest nicht gleich Speedtest

Bei Pseudo-Paralleltests wird nur die Reihenfolge der Items verändert

Der d2 Aufmerksamkeitstest ist ein Beispiel dafür, wie Paralleltest und Retest dasselbe sein können.

Ein Problem bei der Testhalbierungsmethode sind Übungseffekte

Die Retestmethode kann problemlos bei Power-und Mischtests angewendet werden.

Spearman-Brown-Formel

Um die Unterschätzung der Trennschärfe zu verhindern

Um die Überschätzung der Reliabilität zu verhindern

Um bei Testhalbierung die Reliabilität auf einen ganzheitlichen Test hochzurechnen

Um Unterschätzung der Reliabilität zu verhindern

Um Überschätzung der Trennschärfe zu verhindern

Cronbachs α

Benutzt man, um interne Konsistenz zu messen

Je geringer die Items interkorrelieren, desto größer α

Hohes α bedeutet auch hohe Homogenität

Ein hohes α sollte nicht bei heterogenen Konstrukten angestrebt werden

Cronbachs α

Je mehr Items, desto höher α

α ist der Mittelwert aller möglichen Testhalbierungen

Bei einem kurzen Test und hohem α sind die Items redundant

Was gibt rtc an

Diskriminante Validität

Konstruktvalidität

Kriteriumsvalidität

Inhaltsvalidität

Definition von Validität

Ist nicht die Unabhängigkeit vom Diagnostiker

Ist die technische Messgenauigkeit

Gibt an, inwiefern der Test tatsächlich das Konstrukt misst

Ist der Anteil der Varianz der Testvariable, der sich auf die Truescore-Variable zurückführen lässt

Formen der Validitäten

Bei konvergenter Validität korrelieren die mit verschiedenen Methoden gemessenen Werte eines Konstruktes hoch.

Bei diskriminanter Validität korrelieren die mit verschiedenen Methoden gemessene Werte verschiedener Konstrukte hoch.

Kriteriumsbezogene Validität ist das Ausmaß, mit dem mittels Repräsentationsschluss vom Test auf das Zielmerkmal geschlossen werden kann.

Inhaltliche Validität wird auch logische Validität genannt.

Inhaltliche Validität wird auch triviale Validität genannt.

Formen der Validitäten

Bei der prädiktiven Validität werden Test und Kriterium gleichzeitig erhoben

Die konkurrente Validität ist häufig höher als die prädiktive Validität.

Inkrementelle Validität wird auch Vergleichsvalidität genannt.

Unter inkrementeller Validität fällt das, was zu einer Verbesserung der Vorhersage des Kriteriums dient.

Berechnung

Der Validitätskoeffizient ist der Zusammenhang zwischen Test und Konstrukt

Man kann einen Schulleistungstest anhand der Schulnoten nicht validieren, da die Noten immer lehrerabhängig sind

Inkrementelle Validität ist z.B. der Korrelationsschluss von IQ-Test und Berufserfolg

Die Korrelation der Truescore-Variablen ist stets größer als die Korrelation der Testscore-Variablen

Minderungskorrektur

Die Minderungskorrektur ist wegen der Unreliabilitäten der Testwerte nötig

Die Einfache Minderungskorrektur ist dann möglich, wenn beide Variablen fehlerfrei gemessen wurden

Der doppelt minderungskorrigierte Validitätsindex ist die theoretische Validität, wenn sowohl Test als auch Kriterium perfekt reliabel wären

Kriterien

Bei echten Kriterien liegt eine hohe Übereinstimmung zwischen Konstrukt und Kriterium und ein hoher Status des Kriteriums vor.

Bei echten Kriterien ist das Ziel die Maximierung der Trefferquote.

Quasi-Kriterien haben einen hohen Status, aber keine theoretische Übereinstimmung

Target-Kriterien haben weder hohen Status noch hohe Übereinstimmung.

Beispiel für ein Quasi-Kriterium wäre die Validierung von einem neuen Test an einem alten Test

Kriterien2

Aktuelle Kriterien werden auch Eigentliche Kriterien genannt.

Ultimative Kriterien sind erst mit Sicherheit spät im Leben bestimmbar

Aktuelle Kriterien sind leicht verfügbar.

Ultimative Kriterien sind meist komplexe Konstrukte

Kriterien 3

Bei der Kriteriumsdefizienz ist das ultimative Kriterium eigenständig

Bei der Kriteriumskontamination ist das aktuelle Kriterium eigenständig

Bei der Kriteriumsrelevanz gibt es eine wechselseitige Überlappung zwischen aktuellem und ultimativen Kriterium

Study

Diagnostik Testtheorie und Testentwicklung Würzburg Altklausurfragen

Create or copy sets of flashcards

Flashcards

Please log in

Google

Apple ID

Microsoft

Switch edu-ID

Edulog

Google

Apple ID

Microsoft

Switch edu-ID

Edulog