Diagnostik

(1) Kriteriumsvalidität - "korreliert die Messung hoch mit einer anderen konstruktvaliden Messung (dem Kriterium) hoch?"

(2) Inhaltsvalidität – „Kommt in dem Test das vor, was ich drin haben wollte?“ 

(3) Konstruktvalidität – „Grenzt sich der Test gut von ähnlichen Konstrukten ab?“

1. Aufmerksamkeits- und Konzentrationstests

2. Intelligenztests

3. Spezielle Fähigkeitstests 

• Intelligenztests als die vermutlich erfolgreichsten Verfahren der psychologischen Diagnostik
• Erstaunlich gute Vorhersagen in vielen Lebensbereichen
  • Schulerfolg
  • Ausbildungserfolg
  • Berufserfolg
  • Wohlstand
  • risiko-bezogene Verhaltensweisen
  • deviante und kriminelle Verhaltensweisen
  • stabile Partnerschaft (vs. Scheidungsrate)

1. Hamburg-Wechsler Intelligenztest (HAWI)
   • HAWIK-III (Hamburg-Wechsler-Intelligenztest für Kinder)
   • HAWIE-R (Hamburg-Wechsler-Intelligenztest für Erwachsene)
   • HAWIVA-III (Hannover-Wechsler-Intelligenztest für das Vorschulalter)
   •  AID-3 (Adaptives Intelligenzdiagnostikum 3)
2. Culture Fair Tests (CFT)
3. Berliner Intelligenzstrukturtest (BIS)
4. Intelligenzstrukturtest (IST 70)

1. Der mechanisch-technische Verständnistest (MTVT) von Lienert (1964) 
2. Mehrfachwahl-Wortschatztest MWT
3. PAI30 Test zur praktischen Alltagsintelligenz (Mariacher & Neubauer, 2005)
4. ABAT-R: Revidierter Allgemeiner Büroarbeitstest (Lienert & Schuler, 1994) 

• Bestimmen den Leistungsstandard eines Kindes in Bezug zu seinem Lebensalter
• Ziel: Rechtzeitige Hinweise auf behandlungsbedürftige Entwicklungsretardierungen 

1. GES: Griffiths Entwicklungsskalen zur Beurteilung der Entwicklung in den ersten beiden Lebensjahren (Brandt & Sticker, 2001)

• Differentialdiagnose
• Indikationsdiagnostik
• Rehabiltationsmaßnahmen
• Diagnostik bei Kindern und Jugendlichen
• Intelligenzminderung; Intelligenzabbau

• Leichte Intelligenzminderung
  • IQ 50-69 bzw. Intelligenzalter von 9 bis unter 12 Jahren bei Erwachsenen
  • meist Lernschwierigkeiten in der Schule
  • Arbeitsfähigkeit und gute soziale Beziehungen möglich
• Mittelgradige Intelligenzminderung
  • IQ 35-49 bzw. Intelligenzalter von 6 bis unter 9 Jahren
  • deutliche Entwicklungsverzögerungen in Kindheit
  • als Erwachsene auf Unterstützung bei Arbeit und Alltag angewiesen
  • Unabhängigkeit, ausreichende Kommunikation und Ausbildung möglich
• Schwere Intelligenzminderung
  • IQ 20-34 bzw. Intelligenzalter von 3 bis unter 6 Jahre
  • auf dauerhafte Unterstützung angewiesen
• Schwerste Intelligenzminderung
  • IQ < 20 bzw. Intelligenzalter unter 3 Jahre
  • Versorgung, Kontinenz, Kommunikation hochgradig beeinträchtigt

• Tests zu verschiedenen Formen der Aufmerksamkeit haben ein gemeinsames Merkmal: Sie erfassen, wie schnell und genau Probanden kritische Reize entdecken
• Die Tests unterscheiden sich vor allem darin, welche kritischen Reize verwendet und unter welchen Bedingungen diese dargeboten werde
• Die Bedingungen sind ausschlaggebend dafür, welche »Form« der Aufmerksamkeit gemessen wird

Alertnes:

• die generelle Ansprechbarkeit auf Reize
• keine spezielle Form der Aufmerksamkeit sondern eher eine Grundvoraussetzung
• verbreiteter Test zur Alertness ist der Subtest »Alertness" --> Vpn sollen beim Erscheinen eines Kreuzes auf dem Bildschirm sofort eine Antworttaste zu drücken. Es gibt keine anderen Reize, die zu ignorieren wären

Fokussierte oder selektive Aufmerksamkeit

• Beachtung eines bestimmten Reizes bzw. einiger weniger Reize innerhalb einer Reizklasse
• TAP Go/Nogo
  • Einzeldarbietung von ähnlichen Mustern, zwei Muster davon sind kritische Reize

Geteilte Aufmerksamkeit

• Beachtung von mindestens je einem Reiz aus zwei deutlich verschiedenen Reizklassen
• TAP Geteilte Aufmerksamkeit
  • Visuell: Wechselnde Kreuze in einer 4 × 4- Matrix – Quadrat?
  • Akustisch: Abwechselnd hoher und tiefer Ton – Unregelmäßigkeit?

Daueraufmerksamkeit

• Fokussierte oder geteilte Aufmerksamkeit über längere Zeit
• DAUF
  • Reihe von fünf bzw. sieben ständig wechselnden Dreiecken mit Spitze nach oben oder unten – vorher definierte Anzahl von Dreiecken mit Spitze nach unten(Dauer: 20 bzw. 35 min)

Vigilanz

• Beachtung seltener Reize über längere Zeit
• VIGIL
  • Hell aufleuchtender Punkt springt auf einer Kreisbahn (ähnlich Uhr) um einen Schritt – Doppelsprung (Dauer: 30, 35 oder 70 min)

• Der Test d2-R misst Aufmerksamkeit und Konzentration
• Reiner speedtest 
• Durchzustreichen sind alle Buchstaben d, sofern sie mit zwei Strichen versehen sind
• Die Zielobjekte verbergen sich unter ds mit einer »falschen« Strichzahl und ps mit unterschiedlich vielen Strichen 
• Ziel war ein Test mit einer einfachen und verständlichen Instruktion und einer Aufgabe, die von den Probanden ohne lange Einübung ausgeführt werden kann
• Papier-Bleistifttest --> Computerversion nicht äquivalent 
• Ursprünglich sollte der Test vor allem zur Feststellung der Kraftfahreignung dienen
• bewährtes, reliables und valides Verfahren
• wird heute von allen »allgemeinen Leistungstests« mit Abstand am häufigsten eingesetzt wird (Anwendungshäufigkeit von 89 %)
• verbesserung des Tests durch Revision: Viele Kritikpunkte wurden beachtete und möglichst wenig verändert um Validitätsergebnisse beibehalten zu können
• 798 visuelle Reize in 14 Zeilen
• 57 Zeichen pro Zeile
• 20 Sekunden Bearbeitungszeit pro Zeile
• Zwei Fehleraten: Verwechslungsfehler (kommen deutlich seltener vor) und Auslassungsfehler
• bei der Fehleranalyse wid untersucht, ob viele solcher Verwechlungsfehler (oder sogar Doppelte, also Falscher Buchstabe UND fasche Strichanzahl = seeeehr selten) vorkommen, was ein Hinweis auf Simulation ist --> Als bester Indikator für Simulation erwiesen sich die Fehler, bei denen die Probanden ein p mit zwei Strichen markierten
• Test hat hohe interne Konsistenz und Retest-Reliabilität 
• misst nicht nur kurz- sondern auch mittelfrisitige Konzentration
• Korreliert mit anderen Konzentrationstests und Aufmerksamkeitstests
• Der d2 diskriminiert erfolgreich zwischen Gesunden und bestimmten psychiatrisch auffälligen Gruppen
• zahlreiche Belege zur empirischen Validität --> Der Test wird deshalb auch gerne zur Validierung anderer Konzentrationstests herangezoge

• Intelligenztests als die vermutlich erfolgreichsten Verfahren der psychologischen Diagnostik
• erlauben in vielen Kernbereichen ertaunlich gute Vorhersagen und liefern zeitlich sehr stabile Kennwerte
• Korrelation mit Schul-, Ausbildungs-, und Berufserfolg liegt bei über .50
•  

Messintention:

• allgemeine Intelligenz (g) oder eine bestimmte Intelligenzkomponente
• ein Globalmaß oder (auch) Intelligenzstruktur bzw. mehrere Komponenten
• Intelligenz sprachfrei/kulturfair oder bildungsabhängig messen

Durchführungsbedingungen:

• Einzel- oder Gruppentestung
• Speed- oder Powertest
• Papier-und-Bleistift-Test oder Computertest
• Dauer der Testdurchführung

Zielgruppe:

• bestimmter Altersbereich
• bestimmter Intelligenzbereich
• Gesamtbevölkerung oder spezielle Personengruppe

• Standardisierung
• Differenzierung
• Objektivität
• Reliabilität
• Validität 

• Genau erkennen/unterscheiden: Messen und Testen
• Entscheiden/Beschließen: Prognose und Maßnahmen 

• Rationale Konstruktion
• Externale Konstruktion
• Induktive Konstruktion
• Prototypenansatz

• Schwierigkeit
• Trennschärfe
• Homogenität

Itemkennwerte können nur bei Niveautest und Mischformen sinnvoll verwendet werden

• Konstrukte/Messgegenstand nicht direkt beobachbar
• Oft nicht objektiv = zuverlässig = gültig!

• Merkmalsträger unterscheiden sich in diagnostisch relevanten Verhalten maximal
• Mittlere Itemschwierigkeit (% Personen, die Item lösen) fördert Differenzierbarkeit --> Itemanalyse
• Bei Randbereichen sind einige schwere/leichte Items sinnvoll!

Differenzierende Items:

• VP mit hoher Merkmalsausprägung bejahen, VP mit niedriger verneinen

Nichtdifferenzierende Items:

• alle VP sollen unabhängig der Merkmalsausprägung Ja/Nein ankreuzen
• Bsp: "Waren sie jemals im Leben auf einer Party?" 
• haben keinen diagnostischen Wert aber ...
• Funktionen: Eisbrecher, Übungsitems, Verschleierung der Messintention

? 

• Begriff aus dem griechischen = "zum unterscheiden geschickt"
• Zwei Aufgaben im diagn. Prozess:
  1. Messen eines Zustandes oder Eigenschaft --> Erkennen, bemerken, Unterscheiden
  2. Ableiten einer Prognose und ggf. Empfehlung von Maßnahmen --> Entscheiden, beschließen

• Konstrukte/ Messgegenstand nicht direkt beobachtbar
• oft nicht objektiv, damit nicht zuverlässig und damit nicht gültig!

• Schutz der Vetraulichkeit
  • Verletzung von Privatgeheimnissen ist verboten => sonst Strafe!
  • gilt auch für Assistenten, Praktis und Studierende
• Psycholog*innen haben kein Zeugnisverweigerungsrecht --> Können also gerichtlich zu Aussage gezwungen werden (Psychotherapeuten nicht!)
• Spannungne zw. Wirtschaftlichen-, technischen-, kulturellen- und sozialen Rahmenbedingungen

• inhaltlich besonders breit
• wichtig für fast alle Bereiche der Psychologie, insbesondere Medizin und Pädagogik
• Internationale Fachstandards

= Vereinheitlichung der Untersuchungsmethode, der Durchführung, Auswertung oder Interpretation der erhobenen Daten
= Die Standardisierung ist auch eine Voraussetzung für die Objektivität eines Testverfahrens

.Determinaten von diagnostisch relevantem Verhalten

• situative Bedingungen (konstant halten)
• Persönlichkeitsmerkmale
• Testinstruktionen

Gefördert durch:

• Gleichheit des Materials
• Gleichheit der Instruktionen
• genaue Anleitung zur Durchführung und Auswertung

• Merkmale, die direkt mess- & beobachtbar sind
• Bsp.: Größe; Alter; Wohnort; ... => also Antworten für Items eines Tests

• Variablen, die nicht direkt mess- oder beobachtbar sind sondern nur auf Basis von manifesten Variablen geschätzt werden können
• Bsp.: Zufriedenheit, Stress, Angst
• --> Diese Konstrukte werden meist anhand verschiedener Items erhoben
• Die Testwerte sind mit unsystematischen Messfehlern behaftet und weisen deshalb eine intraindividuelle Verteilung auf

• wird gemessen mit der Prozentzahl der Probanden, die die Items korrekt beantworten
• --> beschreibt also eig die "Leichtigkeit" der Items
  • Leistungstest: Anteil korrekter Antworten
  • Persönlichkeitstest: Anteil der zustimmenden Antworten (sensu Merkmal)

Schwierigkeitsindex P = wie viel % der Probanden einer Stichprobe ein Item im Sinne einer höheren Merkmalsausprägung beantwortet haben

• Je höher P, desto „leichter“ die Items
• Leichte Items haben hohe Schwierigkeitsindizees

Formel: P = NR/N * 100

• NR = Anzahl der VP, Antwort im Sinne des Merkmals
• N = Anzahl aller VP
• NR / N = SchwierigkeitsGRAD (klein p)

Beispiele:

• Leistungstest: wie viel % der Getesteten haben das Item richtig beantwortet
• Persönlichkeitstest: wie viel % haben in Richtung Konstrukt geantwortet
• --> multipliziert man das mit 100 erhält man den Schwierigkeitsindex P

Funktion:

• Schwierigkeit gibt an, wie gut ein Item zwischen Probanden differenzieren kann
• mit psychologischen Test wollen wir Unterschiede zwischen Personen messen, wir wollen also zwischen Personen differenzieren können
• Ein Item mit P=100 (leicht) oder P=0 (schwer) wird von allen gleich beantwortet → differenziert nicht
• Items mit P~50 werden sehr unterschiedlich beantwortet, besitzen also idR die meiste Varianz und können so viele Unterschiede aufdecken bei Probanden mit mittlerer Merkmalsausprägung
• Trotzdem wählen wir für optimale Differenzierung Items mit einer Schwierigkeit zwischen 5 und 95 - Warum?
• Darum: Items mit P~50 differenzieren nicht in den Extrembereichen
• Daher brauchen wir auch sehr schwierige (bis P=5) und sehr leichte Items (bis P=95), um auch beim oberen Ende der Normalverteilung eine Aussage machen zu können
• Also: Anstreben einer breiten Streuung der Schwierigkeit von Items in einer Skala um in allen Bereichen differenzieren zu können

1. Auf die Schwierigkeit der Items kann nur geschlossen werden, wenn das Leistungsniveau der Probanden bekannt ist (bzw. wenn die Stichprobe repräsentativ war)
   → Rasch-Skalierung
2.  Schwierigkeitskoeffizient kann nur interpretiert werden, wenn Einfluss von Zufall ausgeschlossen werden kann
   → Korrektur von Zufallseinflüssen
3. Schwierigkeitskoeffizient kann nur interpretiert werden, wenn alle Items beantwortet wurden (also nicht bei Zeitbegrenzung)
   → Korrektur für Zeitbegrenzung
4. Schwierigkeitsindex kann nur für dichotome Items (ja/nein, richtig/falsch) berechnet werden
   → Berechnung für abgestufte Bewertungsskalen

Problem: bei MC-Aufgaben im Intelligenztest kann man auch durch Raten richtig antworten

Ausgangssituation:

• Leistungstest mit vielen Items, die jeweils m Alternativantworten beinhalten, wurde einer Person vorgelegt
• für jedes Item gilt: 1 Alternativantwort ist richtig, m-1 Alternativantworten sind falsch (=Distraktoren)

→ für eine Stichprobe wird Anzahl von Personen, die Aufgabe richtig gelöst haben NR ersetzt durch Anzahl von Personen, die erwartungsgemäß diese Aufgabe durch Fähigkeit gelöst haben (=zufallskorrigierte Schwierigkeitsindex)

→ Man zieht von allen richtigen Antworten, die ab, die durch Raten entstanden sein könnten

Sonderfall:

• richtig-falsch Antworten (m=2)
• Ist NR = NF, dann könnte das Ergebnis ausschließlich durch Raten aller VP erklärt werden! 
• P=0 --> Das Item ist extrem schwer!

Schwierigkeitsindex P = wie viel % der Probanden einer Stichprobe ein Item im Sinne einer höheren Merkmalsausprägung beantwortet haben

•  Je höher P, desto „leichter“ die Items
• Leichte Items haben hohe Schwierigkeitsindizees

Formel: P = NR/N * 100

• NR = Anzahl der VP, Antwort im Sinne des Merkmals
• N = Anzahl aller VP
• NR / N = SchwierigkeitsGRAD (klein p)

= für eine Stichprobe wird Anzahl von Personen, die Aufgabe richtig gelöst haben NR ersetzt durch Anzahl von Personen, die erwartungsgemäß diese Aufgabe durch Fähigkeit gelöst haben

Die Formel bezieht sich auf EIN Item in einer Stichprobe

P =( (NR - (NF / m-1)) / N ) * 100

• P = zufallskorrigierter Schwierigkeitsindex
• NR = Anzahl der Vpn, die im Sinne des Merkmals antworten
• NF = Anzahl Vpn, die nicht im Sinne des Merkmals antwortne
• m = Anzahl der Antwortalternativen des Items
• N= Anzahl aller Vpn
• (NF/m-1) = Ratekoeffizient

Problem: Ist der Test zeitbegrenzt, werden die hinteren Items manchmal gar nicht beantwortet. Das geht in die Daten aber als „falsche Antwort“ ein!

Schwierigkeitskoeffizient kann aber nur interpretiert werden, wenn alle Items beantwortet wurden (also nicht bei Zeitbegrenzung also bei Speedtests)

Lösung: Man nimmt als N nicht alle VPs sondern die, die das Item überhaupt bearbeitet haben

Schwierigkeitsindex bei Zeitbegrenzung: P = NR / NB * 100

• P = Schwierigkeitsindex
• NR = Anzahl Vpn, die im Sinne des Merkmals antworten
• NB = Anzahl aller Vpn, die die Aufgabe überhaupt bearbeitet haben

Wir können auch die Zufallskorrektur bei Zeitbegrenzung machen, die beiden Korrekturmöglichkeiten bei Messungen also kombinieren

• Leistungstest lasse sich in Speed- und Powertest einteilen

Speedtest = Geschwindigkeits, Schnelligkeitstest

• Alle Items eines Tests sind so leicht, dass sie bei unbegrenzter Zeitvorgabe auch gelöst werden können
• Itemkennwerte (bes. Schwierigkeit) haben keine wirkliche Aussagekraft
• Differenzierung zw Probanden erfolgen durch Begrenzung der Bearbeitungszeit
• Werden häufig bei Konzentrationstest eingesetzt
• Beispiel:
  • d2 Aufmerksamkeits-Belastungstest

Powertest = Niveautest

• Einige Items eines Test sind so schwer, dass sie auch bei unbegrenzter Zeitvorgabe nicht von allen Probanden gelöst werden können
• Test misst das intellektuelle Niveau bzw. die "Denkkraft"(power)
• Beispiel:
  • Standard Progressive Matrices

Problem: Die Einteilung richtig-falsch lässt sich bei Bewertungsskalen nicht anwenden!

Lösung: Man codiert die Skalenstufen von 0 bis Y und errechnet das arithmetische Mittel der VP-Antworten --> Wir berücksichtigen also die Ausprägung der Antwort 

• Beachte: Antwort, die am wenigsten in Richtung Konstrukt zeigt, mit 0 codieren, sonst induzieren wir einen Bias und verzehren das Ergebnis!

Schwierigkeitsindex für mehrstufige Itemantworten:

Pm = ( Summe erreichte Punkte aller VPs / Summe erreichbare Punkte aller VPs) * 100