benötigt einen möglichst breit gefächerten Itempool & es ist eine Kreuzvalidierung nötig

Produkt-Moment-Korrelationen wendet man bei intervallskjalierten Items an & Trennschärfe ist die Korrelation von Itemwert und Summenwert

ist die Unabhängigkeit vom Diagnostiker & ist bei der Durchführung und Interpretation wichtig

Bei echten Kriterien liegt eine hohe Übereinstimmung zwischen Konstrukt und Kriterium und ein hoher Status des Kriteriums vor. & Target-Kriterien haben weder hohen Status noch hohe Übereinstimmung. & Beispiel für ein Quasi-Kriterium wäre die Validierung von einem neuen Test an einem alten Test.

diagnostik

134

0.0 (0)

M. L.

Study

M. L.

About these flashcards

Diese Lernkarten decken universitäre Konzepte der psychologischen Diagnostik ab. Sie konzentrieren sich auf die Bewertung von Tests, Items und Modellen, wobei die Validität, Reliabilität und Trennschärfe im Mittelpunkt stehen. Die Karteikarten behandeln auch die Anwendung des Rasch-Modells, die Interpretation von Daten und die Bewertung von Gütekriterien. Sie richten sich an Studierende und Fachleute, die ihre Kenntnisse in der psychologischen Diagnostik vertiefen möchten, insbesondere in der Testkonstruktion und -bewertung.

Flashcards

134

Students

Language

German

Flashcards

Definition der psychologischen Diagnostik

Das Wort „Diagnostik“ kommt aus dem Lateinischen

Das Wort „Diagnostik“ kommt aus dem Griechischen

Psychologische Diagnostik ist dadurch erschwert, dass das zu messende Konstrukt nicht direkt beobachtbar ist.

Sie umfasst zwei zentrale Teil-Aspekte (erkennen/bemerken/unterscheiden & entscheiden/beschließen)

Sie umfasst drei zentrale Teil-Aspekte

Teilaspekte der psychologischen Diagnostik

Psychologische Diagnostik soll es ermöglichen eine Prognose über die Psyche abzugeben

Psychologische Diagnostik soll die Ursachen eines mentalen Zustandes erklären

Diagnostik hat den Anspruch einer möglichst genauen Messung von Eigenschaften

Gestezlioche Rahmenbedignungen

Wer unbefugt ein fremdes Geheimnis, namentlich ein zum persönlichen Lebensbereich gehörendes Geheimnis oder ein Betriebs-oder Geschäftsgeheimnis, offenbart, das ihm als Berufspsychologen mit staatlich anerkannter wissenschaftlicher Abschlussprüfung… anvertraut worden oder sonst bekannt geworden ist, wird mit Freiheitsstrafe bis zu einem Jahr oder mit Geldstrafe bestraft.

Wer unbefugt ein fremdes Geheimnis, namentlich ein zum persönlichen Lebensbereich gehörendes Geheimnis oder ein Betriebs-oder Geschäftsgeheimnis, offenbart, das ihm als Gehilfe oder Praktikant eines Berufspsychologen mit staatlich anerkannter wissenschaftlicher Abschlussprüfung… anvertraut worden oder sonst bekannt geworden ist, wird mit Freiheitsstrafe bis zu einem Jahr oder mit Geldstrafe bestraft.

MA-Psychologen haben kein Zeugnisverweigerungsrecht

Schweigepflicht gilt für alle beteiligten

ausgebildete Psychotherapeuten haben ein Zeugnisverweigerungsrecht

Grundvorrausetzungen psychometrischer Tests

Objektivität / Unabhängigkeit vom Diagnostiker / Standardisierung

Differenzierung [erkennen/bemerken/unterscheiden]

Reliabilität

Validität

Normalität / komplette zeitliche Stabilität / Natürlichkeit / Testwerte müssen Konstrukt nicht zwingend abbilden

Rationale Methode

Wird auch deduktive Methode genannt

Ist nicht theoriegeleitet

Wird auch induktive Methode genannt

Liegt dem HAWIE Intelligenztest zugrunde

Liwgt dem NEO FFI zugrunde

Externale Methode

wird auch kriteriumsorientierte Methode genannt

benötigt einen möglichst breit gefächerten Itempool

liegt dem thematischen Apperzeptionstest zugrunde

es ist eine Kreuzvalidierung nötig

führt zu Skalen hoher Homogenität

Externale Methode

Wird auch rationale Methode genannt

Der Ausgangspunkt ist eine Gruppe, die differenziert werden soll

Der Ausgangspunkt ist eine homogene Gruppe

Wird auch kriteriumsbezogene Methode genannt

Es sind keine inhaltlichen oder dimensionalen Interpretationen (der Skala) möglich

Induktive Methode

Innerhalb der Skalen muss eine Einfachstruktur (niedrige Kotrrelation mit den Items anderer Skalen) und interne Konsistenz (hohe Korrelation zwischen den Items), welche der Homogenität entspricht, vorliegen.

Liegt der Korrelationsrechnung zugrunde (Faktorenanalyse)

Der Big5 Faktor Extraversion wurde durch Interpretation erschlossen

Es müssen umfangreiche Stichproben erhoben werden

Führt tendenziell zu Skalen hoher Homogenität

Prototypen-ANsatz

Prototypen repräsentieren Objekte verschiedener Gruppen

Es gibt Objekte, die innerhalb einer Gruppe andere mit größter Ähnlichkeit repräsentieren

Der Prototypenansatz besagt, dass sich Objekte in kognitive Kategorien einordnen lassen

Schwierigkeit: Speed & Power-Tests

Bei Speedtests sind die Items so leicht, dass sie theoretisch von allen Probanden gelöst werden könnten

Die Differenzierung zwischen Probanden erfolgt bei Powertests durch die Begrenzung der Bearbeitungszeit

Ein Beispiel für einen Power-Test ist der d2 Aufmerksamkeitstest

Bei Speedtests haben Itemkennwerte keine große Aussagekraft

Ein Beispiel für einen Powertest ist zB der Matrizentest; die Differenzierung ist Festgelegt durch den Schweregrad der Aufgabe

Schwierigkeitsindex einer Ratingskala

wird berechnet mit der von allen Probanden erreichte Punktzahl minus von allen erreichbare Punktzahl durch die Anzahl der Versuchspersonen mal 100

wird berechnet mit den von allen erreichte Punktzahl geteilt durch die von allen Probanden erreichbare Punktzahl mal 100

wird berechnet mit den Punkten der besten Probanden minus der Punkte der schlechtesten mal 100

Definition: Homogenität

Skalenhomogenität ist die Korrelation aller Items einer Skala

Skalenhomogenität ist die Korrelation eines Items mit einer Skala

In der klassischen Testtheorie sind Items homogen, wenn ihre Item Charakteristik Kurven gleichartig verlaufen

In der Klassischen Testtheorie sind Items homogen, wenn jeder Proband, der eine schwere Aufgabe löst, auch alle leichteren Aufgaben löst

In der Klassischen Testtheorie sind Items homogen, wenn die inhaltlich und formal übereinstimmen

Homogenität: Konstrukt-Prinzipien

Homogenität ist bei externaler Skalenentwicklung meist hoch

Homogenität ist bei induktiver Konstruktionsmethode meist hoch

Homogenität ist bei rationaler Methode bei eng begrenztem Konstrukt hoch

Trennschärfe: Part-Whole-Korrektur

die Teil-Ganz-Korrektur soll die Unterschätzung der Trennschärfe korrigieren

die Teil-Ganz-Korrektur soll die Überschätzung der Trennschärfe korrigieren

Die Trennschärfe-indices werden dadurch stets kleiner

Je größer die Anzahl der Items einer Skala ist, desto kleiner der Effekt der part-whole-Korrektur

Je ähnlicher die Items einer Skala sind, desto kleiner sind die Effekte der part-whole-Korrektur

Trennschärfe

Produkt-Moment-Korrelationen wendet man bei intervallskjalierten Items an

Biseriale Korrelationen wendet man bei Intervallskalierten Items an

Trennschärfe ist die Korrelation eines Items mit allen Items einer Skala

Trennschärfe ist die Korrelation von Itemwert und Summenwert

Trennschärfe

je kleiner die Trennschärfe, desto mehr trägt ein Item zur Differenzierung der VP in Löser / Nicht-Löser bei

je größer die Trennschärfe, desto mehr trägt ein Item zur Differenzierung der VP in Löser / Nicht-Löser bei

Trennschärfe und Homogenität sind essentiell dasselbe

wenn die Trennschärfe hoch ist, sollte man besonders andere Kennwerte beachten

extreme Schwierigkeits-indices verhindern hohe Trennschärfe-indices, sowie hohe Homogenität

Objektivität

ist die Unabhängigkeit vom Diagnostiker

ist bei Konstruktion, Durchführung und Interpretation von Bedeutung

ist bei der Durchführung und Interpretation wichtig

Durchführungsobjektivität ist das Ausmaß, in dem das Verhalten der Testperson eindeutig in Testwerten abgebildet wird

Objektivität

die statistische Vorgehensweise bei der Interpretation führt zu geringerer Objektivität als die klinische Vorgehensweise

die klinische Vorgehensweise bei der Interpretation führt zu einer geringeren Objektivität als die statistische

Auswertungsobjektivität ist gegeben, wenn die Auswertung gleich ist, egal wer es macht

Durchführungsobjektivität ist höher, je stärker das Verhalten des Testleiters und das Testmaterial variieren

Was sind keine Nebengütekriterien?

Skalierung

Zumutbarkeit

Akzeptanz

Unverfälschbarkeit

Validität

Was sind keine Nebengütekriterien ?

Augenscheinvalidität

Fairness / Transparenz / Normierung

Ökonomie / Utilität

Objektivität

Natürlichkeit

Reliabilität

ist die technische Messgenauigkeit

ist keine Eigenschaft der Zufallsvariable

ist eine Eigenschaft des Tests

Der Reliabilitätskoeffizient ist definiert als der Anteil der Varianz einer True-Score-Variablen, der auf die Varianz der Testvariable zurückgeführt werden kann

der Reliabilitätskoeffizient ist der Anteil der Varianz einer Testvariablen, der auf die Varianz der True-Score-Variablen zurückgeführt werden kann --> auf tatsächliche Unterschiede im gemessenen Merkmal, nicht auf Messfehler

Reliabilität

hohe Reliabilität ist Voraussetzung für eine hohe Objektivität

zur Berechnung der Reliabilität ist in der Regel eine einfache Messung ausreichend

zur Berechnung der Reliabilität ist in der Regel eine doppelte Messung ausreichend

für eine Berechnung muss man zwei zentrale Annahmen treffen

der True Score ist ein bedingter Erwartungswert der Testvariablen

Axiome der Klassischen Testtheorie

Cov(тi, εj) = 0

Cov(тi, εj) = 1

E(εi) = 0

E(εi) = 1

Axiome der Klassischen Testtheorie

Cov(ε1, ε2) = 0

Cov(ε1, ε2) = 1

Yi=тi+ εi

Axiome der KTT

der Erwaertungswert des Truescore ist 1

Truescore und Residuum korrelieren max mit 1

Fehler sind unkorreliert

Testvariable setzt sich additiv aus Truescore und Fehler zusammen

Erwartungswert des Fehlers ist 0

doppelte Messung

Re-test-methode hat die Annahme, dass die Fehler exakt gleich sind

Paralleltestmethode nimmt eine perfekte zeitliche Stabilität an

die Testhalbierungsmethode besagt, dass die Truescores beider Testhälften gleich sind

Reliabilität bedeutet perfekte zeitliche Stabilität

Re-test-reliabilität wird auch Wiederholungs-reliabilität bzw Split-Half-Reliabilität genannt

doppelte Messung

Bei der Testhalbierungsmethode werden Powertests anhand der Bearbeitungszeit aufgeteilt

Bei Pseudo-Paralleltests wird nur die Reihenfolge der Items verändert.

Der d2 Aufmerksamkeitstest ist ein Beispiel dafür, wie Paralleltest und Retest dasselbe sein können

Ein Problem bei der Testhalbierungsmethode sind Übungseffekte

Die Retestmethode kann problemlos bei Power-und Mischtests angewendet werden.

Spearman-Brown Formel

um die Unterschätzung der Trennschärfe zu verhindern

um die Überschätung der Reliabilität zu verhindern

um bei Testhalbierung die Reliabilität auf einen ganzheitlichen Test hochzurechnen

um Unterschätzung der Reliabilität zu verhindern

um Überschätzung der Trennschärfe zu verhindern

Eine Reliabilitätsanalyse eines Tests ergab eine ungenügende Reliabilitätsschätzung von Rel(Y)=.60. Nun soll ein neuer Test konstruiert werden. Der vorläufige wies 10 Items auf. Wie viele Items müssen noch aufgenommen werden, damit der Testscore eine Reliabilität von Rel(S)=.90 erzielt?

k = 6

k = 5

50 Items

15 Items

k = 1,5

Eine Reliabilitätsanalyse eines Tests ergab eine extrem hohe Reliabilitätsschätzung von Rel(Y)=.99. Nun soll ein neuer Test konstruiert werden. Der vorläufige wies extrem viele Items auf, nämlich 150. Um wie viele Items kann der Test verkürzt werden, damit der Testscore noch eine Reliabilität von Rel(S)=.91 erzielt?

k = 0,10

K = 0,20

30 Items

135 Items

120 Items

Cronbachs α

benutzt man, um interne Konsistenz zu messen

je geringer die Items interkorrelieren, desto größer α

hohes α sollte nicht bei heterogenen Konstrukten angestrebt werden

je mehr Items, desto höher α

Cronbachs α

Hohes α bedeutet auch hohe Homogenität

α ist der Mittelwert aller möglichen Testhalbierungen

bei einem kurzen Test und hohem α sind die Items redundant

Was gibt rtc an?

diskriminante Validität

Konstruktvalidität

Kriteriumsvalidität

Inhaltsvalidität

Definition von Validität

ist nicht die Unabhängigkeit vom Diagnostiker (Objektivität)

ist die technische Messgenauigkeit (Reliabilität)

gibt an, inwiefern der Test tatsächlich das Konstrukt misst

ist der Anteil der Varianz der Testvariable, der sich auf die Truescore Variable zurückführen lässt (Reliabilität)

Formen der Validitäten

Bei konvergenter Validität korrelieren die mit verschiedenen Methoden gemessenen Werte eines Konstruktes hoch.

Bei diskriminanter Validität korrelieren die mit verschiedenen Methoden gemessene Werte verschiedener Konstrukte hoch.

Kriteriumsbezogene Validität ist das Ausmaß, mit dem mittels Repräsentationsschluss vom Test auf das Zielmerkmal geschlossen werden kann.

Kriteriumsbezogene Validität ist der Grad der konzeptuellen Gemeinsamkeit zwischen Test und Kriterium

Inhaltiche Validität wird auch logische oder triviale Validität genannt

Formen der validitäten

Bei der prädiktiven Validität werden Test und Kriterium gleichzeitig erhoben.

Die konkurrente Validität ist häufig höher als die prädiktive Validität.

Inkrementelle Validität wird auch Vergleichsvalidität genannt.

Unter inkrementeller Validität fällt das, was zu einer Verbesserung der Vorhersage des Kriteriums dient.

Berechnung

Der Validitätskoeffizient ist der Zusammenhang zwischen Test und Konstrukt

Man kann einen Schulleistungstest anhand der Schulnoten nicht validieren, da die Noten immer lehrerabhängig sind.

Inkrementelle Validität ist z.B. der Korrelationsschluss von IQ-Test und Berufserfolg

Die Korrelation der Truescore-Variablen ist stets größer als die Korrelation der Testscore-Variablen

Minderungskorrektur

Die Minderungskorrektur ist wegen der Unreliabilitäten der Testwerte nötig

Die Einfache Minderungskorrektur ist dann möglich, wenn beide Variablen fehlerfrei gemessen wurden.

Der doppelt minderungskorrigierte Validitätsindex ist die theoretische Validität, wenn sowohl Test als auch Kriterium perfekt reliabel wären.

Kriterien

Bei echten Kriterien liegt eine hohe Übereinstimmung zwischen Konstrukt und Kriterium und ein hoher Status des Kriteriums vor.

Bei echten Kriterien ist das Ziel die Maximierung der Trefferquote.

Quasi-Kriterien haben einen hohen Status, aber keine theoretische Übereinstimmung.

Target-Kriterien haben weder hohen Status noch hohe Übereinstimmung.

Beispiel für ein Quasi-Kriterium wäre die Validierung von einem neuen Test an einem alten Test.

Kriterien

Aktuelle Kriterien werden auch Eigentliche Kriterien genannt.

Ultimative Kriterien sind erst mit Sicherheit spät im Leben bestimmbar.

Aktuelle Kriterien sind leicht verfügbar.

Ultimative Kriterien sind meist komplexe Konstrukte

Study

diagnostik

Create or copy sets of flashcards

Flashcards

Please log in

Google

Apple ID

Microsoft

Switch edu-ID

Edulog

Google

Apple ID

Microsoft

Switch edu-ID

Edulog