Modul 2 - VL 3

VL 3

0.0 (0)

B. F.

Study

B. F.

About these flashcards

Diese Karteikarten behandeln auf Universitätsniveau die Grundlagen der Testtheorie und -konstruktion in der Psychologie. Sie beleuchten zentrale Konzepte wie Reliabilität, Validität, Objektivität und Testökonomie, wobei besonders die Kriteriumsvalidität und Konstruktvalidität im Fokus stehen. Die Karteikarten eignen sich für Studierende der Psychologie, die sich mit der Entwicklung und Bewertung psychologischer Tests auseinandersetzen möchten, um fundierte diagnostische Instrumente zu erstellen und zu interpretieren.

Flashcards

Students

Language

German

Flashcards

VL 3:

17. Welche Aussagen zu Fairness sind richtig?

Fairness ist gegeben, wenn die Testwerte zu keiner systematischen Benachteiligung bestimmter Personengruppen führen.

Unfairness hat oft mit den Inhalten der Testitems zu tun.

Psychometrisch spricht man von „Itembias“: Ein Item ist für eine bestimmte Personengruppe trotz gleicher Merkmalsausprägung leichter.

Zu berücksichtigen sind neben Geschlecht, Alter, Hautfarbe auch andere Faktoren, wie sprachliche Kompetenz und Routine im Umgang mit Tests.

Ein internationales Testkuratorium hat bezüglich der Fairness ein Testbeurteilungssystem mit anerkannten Standards geschaffen.

VL 3:

16. Welche Aussagen zu Unverfälschbarkeit sind richtig?

Unverfälschbarkeit ist gegeben, wenn die Testperson durch gezieltes Testverhalten ihre Testwerte nicht steuern bzw. verzerren kann und sie deshalb nicht weiß, wie sie antworten muss, um sich in einem besonders günstigem „Licht“ darzustellen.

Wird durch hohe Augenscheinvalidität beeinträchtigt, wodurch es der Testperson gelingt das Messprinzip erkennen zu können.

Persönlichkeitsfragebogen sind generell nicht anfällig für Verzerrungen.

Objektive Persönlichkeitstests sind weniger anfällig für Unverfälschbarkeit.

Persönlichkeitsfragebogen sind prinzipiell anfällig für Verzerrungen.

VL 3:

15. Welche Aussagen zu Nützlichkeit und Zumutbarkeit sind richtig?

Nützlichkeit ist gegeben, wenn das vom Test gemessene Merkmal praktisch relevant ist und aus dem Testergebnis abgeleitete Maßnahmen mehr Nutzen als Schaden erwarten lässt.

Für einen Test besteht praktische Relevanz, wenn er ein Merkmal misst, das im Sinne der Kriteriumsvalidität nützliche Anwendungsmöglichkeiten aufweist.

Nützlichkeit ist gegeben, wenn der Test im Verhältnis zu seinem Nutzen die zu testende Person nicht über Gebühr belastet. Betrifft nur die zu testende Person.

Bei der Zumutbarkeit werden zeitliche, psychische und körperliche Aspekte unterschieden.

Die Zumutbarkeit ist leicht zu beurteilen, da die Zumutbarkeit von der Einschätzung der zu testenden Person und den gesellschaftlichen Normen abhängt.

VL 3:

14. Welche Aussagen zur Testökonomie sind richtig?

Bezieht sich auf die Wirtschaftlichkeit eines Tests und wird durch die Kosten bestimmt.

I.d.R. will man wenig Kosten verursachen, muss aber aufpassen, dass andere Gütekriterien nicht darunter leiden.

Gegeben, wenn der Test im Verhältnis zum diagnostischen Erkenntnisgewinn relativ wenig Kosten verursacht.

Kosten sind z.B. finanzieller Aufwand, wie bspw. Lizenzgebühren für Test oder Computer.

Kosten sind z.B. zeitlicher Aufwand, wie bspw. Bearbeitung, Vorbereitung, Auswertung und Rückmeldung.

VL 3:

13. Welche Aussagen zur Normierung sind richtig?

Normierungen sind gegeben, wenn ein Bezugssystem vorliegt, anhand die individuellen Testwerte verglichen und eindeutig interpretierbar werden können.

Der Test wird regelmäßig in einer großen und repräsentativen Eichstichprobe angewendet.

Zur Relativierung eines Testergebnisses an der Eichstichprobe gibt es vier verschiedene Techniken.

IQ-Werte, T-Werte, Centil-Werte, Stanine-Werte sind Beispiele für Prozentrangnormen.

Bei der Standardnorm kumuliert die in der Eichstichprobe erzielten Häufigkeiten der Testwerte bis einschließlich zu jenem Testwert, den die gerade interessierende Testperson erzielte.

VL 3:

12. Welche Aussagen zu Skalierungen sind richtig?

Eine Skalierung ist gegeben, wenn die Testwerte die empirischen Merkmalsrelationen adäquat abbilden.

Die Skalierung hängt vom Skalenniveau des Tests ab.

Zur Abbildung von "Größer / Kleiner Relationen" zwischen Testpersonen reicht die Nominalskala aus.

Die Messung auf Intervallskala erlaubt Beurteilung der Größe von Differenzen.

Im Rahmen der Item-Response-Theorie ist die Skalierung empirisch nicht überprüfbar.

VL 3:

11. Welche Aussagen zur Kriteriumsvalidität sind richtig?

Entspricht i.d.R. der Korrelation zwischen Test und Kriterium.

Bei der Übereinstimmungsvalidität wird in der Gegenwart ein vorliegendes Kriterium getestet. Test und Kriteriumswerte werden zu unterschiedlichen Zeitpunkten ermittelt.

Bei der Vorhersagevalidität wird ein zukünftiges Kriterium getestet: Kriterien werden nach der Testdurchführung erhoben.

Problem ist oft, eine einzige geeignete Kriteriumsvariable zu finden, sodass es oft sinnvoll ist einen Test mit mehreren Kriterien zu validieren.

Kriteriumsvalidität liegt im Schulreifetest vor, wenn Kinder, die im Test leistungsfähig sind, sich auch in der Schule als leistungsfähig erweisen & wenn Kinder, die im Test leistungsschwach sind, sich auch in der Schule als leistungsschwach erweisen.

VL 3:

10. Welche Aussagen zur Kriteriumsvalidität sind richtig?

Bezieht sich auf die praktische Anwendbarkeit eines Tests.

Kriteriumsvalidität ist gegeben, wenn vom Testergebnis auf ein Verhalten außerhalb der Testsituation auf „Kriterium“ geschlossen werden kann.

Die Kriteriumsvalidität dient der Überprüfung, ob ein Verfahren das angestrebte Merkmal gültig misst.

Um zu prüfen, ob ein Verfahren kriteriumsvalide ist, werden dessen Ergebnisse mit einem Innenkriterium verglichen (Strukturprüfung).

Zeigt sich ein geringer Zusammenhang zwischen den Ergebnissen, so ist das Verfahren valide. Dies entspricht i.d.R. der Korrelation zwischen Test und Kriterium.

VL 3:

9. Welche Aussagen zur Konstruktvalidität sind richtig?

Struktursuchende Ansätze, z.B. Explorative Faktorenanalyse, sind geeignet Messmodelle und theoretische Überlegungen zu beurteilen.

Strukturprüfende Ansätze: z.B. Konfirmatorische Faktorenanalyse, Item- Response-Theorie-Analyse, Multitrait-Multimethod-Analyse, sind geeignet Messmodelle und theoretische Überlegungen zu beurteilen.

Gültigkeit des Messmodells wird verworfen, wenn sich die Testitems theoriekonform als Indikator eines gemeinsamen latenten Konstrukts nachweisen lassen.

Konvergente Validität ist gegeben, wenn die Korrelation mit Tests, die das gleiche Merkmal messen sollen, gering ist.

Diskriminante bzw. divergente Validität ist gegeben, wenn die Korrelation mit Tests, die etwas anderes messen soll, hoch ist.

VL 3:

8. Welche Aussagen zur Konstruktvalidität sind richtig?

Oft können weder Inhalts- noch Kriteriumsvalidität zu einem eindeutigen, unzweifelhaften Ergebnis kommen, was der Test tatsächlich misst. Hier hilft die Konstruktvalidität.

Konstruktvalidität ist gegeben, wenn zahlreich gesicherte, theoretische Aussagen über die gemessenen Variablen mit Hilfe des Tests in einem fortdauernden Prozess bestätigt werden können.

In der Gegenwart vorliegendes Kriterium ist gegeben, wenn der Rückschluss vom Testergebnis auf das zugrundeliegende Merkmal wissenschaftlich fundiert ist.

Es müssen Messmodelle und theoretische Überlegungen verworfen werden.

Konstruktvalidität bezieht sich auf ein in der Realität gegebenes Problem.

VL 3:

7. Welche Aussagen zur Validität sind richtig?

Validität ist gegeben, wenn wirklich das gemessen wird, was gemessen werden soll und nicht irgendein anderes Merkmal!

Inhaltsvalidität ist gegeben, wenn ein Test das zumessende Merkmal repräsentativ erfasst.

Wird über den Cronbachs Alpha-Wert bestimmt.

Bei der Inhaltsvalidität werden die Testitems als nichtrepräsentative Stichprobe aus dem für das Merkmal relevante Itemuniversum verstanden.

Die Validität ist das wichtigstes Gütekriterium, da Validität die Generalisierung des in der Testsituation beobachteten Verhaltens erlaubt.

VL 3:

6. Welche Aussagen zur inneren Konsistenz sind richtig?

Es ist eine Verallgemeinerung der Testhalbierungsmethode, sodass jedes Item eines Tests als eigenständiger Testteil betrachtet wird.

Je stärker die Testteile untereinander positiv korrelieren, desto niedriger ist die interne Konsistenz des Tests.

Je höher Cronbachs-Alpha-Koeffizient, desto besser die innere Konsistenz

Je höher Cronbachs-Alpha-Koeffizient, desto schlechter die innere Konsistenz

Ein Wert ab 0,4 ist ein guter Cronbachs-Alpha-Koeffizient.

VL 3:

5. Welche Aussagen zur Testhalbierungs-Reliabilität sind richtig?

Oftmals ist es nicht möglich, einen Test zu wiederholen oder parallele Testformen herzustellen.

Der Test wird in 2 parallele Testhälften geteilt und die Testhalbierungs-Reliabilität als korrigierte Korrelation mittels Spearman-Brown-Formel errechnet.

Die Korrektur ist nötig, weil die beiden Testhälften kürzer sind als der Test selbst und ihre Korrelation die Reliabilität des Tests unterschätzt.

Die Korrektur ist nötig, weil die beiden Testhälften kürzer sind als der Test selbst und ihre Korrelation die Reliabilität des Tests überschätzt.

Der Test wird in 2 parallele Testhälften geteilt und die Testhalbierungs-Reliabilität als korrigierte Korrelation mittels Pearson Chi-Quadrat-Test errechnet.

VL 3:

4. Welche Aussagen zur Parallel-Reliabilität sind richtig?

Es werden 2 „parallele“ Testformen aus inhaltlich möglichst ähnlichen Items konstruiert.

Parallel sind 2 Testformen dann, wenn sie trotz nicht identischer Itemstichproben zu gleichen wahren Werten und Varianzen der Testwerte führen.

Reliabilität entspricht der Korrelation zwischen den beiden Testergebnissen.

Die Prüfung der Parallel-Reliabilität ist sehr leicht umzusetzen.

Reliabilität wird als Kovariation zwischen den beiden Testergebnissen ermittelt.

VL 3:

3. Welche Aussagen zur Reliabilität sind richtig?

Ein Test ist reliabel, wenn er das Merkmal, dass er misst, exakt und ohne Messfehler misst.

Die Reliabilität wird über den Reliabilitätskoeffizienten (Anteil der wahren Varianz an der Gesamtvarianz der Testwerte) bestimmt.

Die wahre Varianz ist die Merkmalsstreuung der wahren Testwerte. Der verbliebene Anteil an der Gesamtvarianz kommt aufgrund der Messfehler zustande.

Wertebereich liegt zwischen -1 und +1.

Ein guter Test sollte den Wert 0,3 nicht unterschreiten.

VL 3:

2. Welche Aussagen zur Auswertungsobjektivität sind richtig?

Die Auswertungsobjektivität ist gegeben, wenn das Testergebnis nicht vom Auswerter abhängt.

Entscheidend ist das Aufgabenformat der Testitems.

Bei gebundenen Antwortformaten (Multiple-Choice-Aufgaben) ist die Auswertungsobjektivität schwer realisierbar.

Bei offenen Antwortformaten müssen detaillierte Auswertungsregeln bzw. Kodiersysteme vorliegen, deren Anwendung empirisch überprüfbar sein muss.

Das Ausmaß der Auswertungsobjektivität lässt sich anhand der Übereinstimmung von verschiedenen Testauswertern mit dem „Konkordanzkoeffizienten W“ nach Kendall quantifizieren.

VL 3:

1. Welche Aussagen zur Durchführungsobjektivität sind richtig?

Durchführungsobjektivität ist nicht gegeben, wenn das Ergebnis nicht vom Testleiter abhängt

Die Durchführungsobjektivität steigt, wenn der Test standardisiert ist, indem die Durchführungsbedingungen von Untersuchung zu Untersuchung variieren.

Im Manual sind die genauen Durchführungsanweisungen bzgl. Testmaterial, Zeitbegrenzung, Instruktion, Umgang mit Rückfragen, etc. enthalten.

Man sollte die Interaktion zwischen Testleiter und Testperson vermeiden.

Um den "Testleitereffekt" auszuschließen, werden viele Untersuchungen mittlerweile am Computer durchgeführt.

Study

Modul 2 - VL 3

Create or copy sets of flashcards

Flashcards

Please log in

Google

Apple ID

Microsoft

Switch edu-ID

Edulog

Google

Apple ID

Microsoft

Switch edu-ID

Edulog