petaaa

wiisenswertes von petaa

wiisenswertes von petaa


M. B.
Diese Lernkarten behandeln auf Universitätsniveau die Grundlagen der statistischen Theorie und Methoden in der Medizin und Pharmazie. Sie konzentrieren sich auf die Analyse von Studien, die Bewertung von Effekten und die Interpretation von Ergebnissen, wobei Themen wie Stichproben, Hypothesen, Fehler und Validität im Vordergrund stehen. Besonders nützlich sind sie für Studierende und Forscher, die ihre Kenntnisse in der Auswertung von Daten und der Bewertung von Studien vertiefen möchten.
Cartes-fiches
180
Utilisateurs
1
Langue
Allemand
Catégorie
Médecine/Pharmacie
Niveau
Université
Créé / Mis à jour
06.05.2024 / 04.06.2024

Cartes-fiches

Multitrait –Multimethod Matrix (MTMM) in depth ; wie wird sie durchgeführt und was sagt sie aus?

Beispiel: MTMM für drei Traits und drei Methoden

Traits:

  1. Angst
  2. Depression
  3. Selbstwertgefühl

Methoden:

  1. Selbstbericht (Fragebogen)
  2. Lehrerbewertung (Fremdbericht)
  3. Verhaltensbeobachtung

Schritt 1: Datenerhebung

Für jeden Teilnehmer werden Daten zu allen drei Traits mit allen drei Methoden erhoben.

Beispiel-Daten:

  • Selbstbericht:
    • Angst: Fragebogen zur Angst
    • Depression: Fragebogen zur Depression
    • Selbstwertgefühl: Fragebogen zum Selbstwertgefühl
  • Lehrerbewertung:
    • Angst: Lehrerbewertung der Ängstlichkeit
    • Depression: Lehrerbewertung der depressiven Stimmung
    • Selbstwertgefühl: Lehrerbewertung des Selbstwertgefühls
  • Verhaltensbeobachtung:
    • Angst: Beobachtungsprotokoll der Ängstlichkeit
    • Depression: Beobachtungsprotokoll der depressiven Stimmung
    • Selbstwertgefühl: Beobachtungsprotokoll des Selbstwertgefühls

Schritt 2: Erstellung der Matrix

Die MTMM-Matrix wird erstellt, indem die Korrelationen zwischen allen Maßen berechnet werden.

Schritt 3: Interpretation der Matrix

Konvergente Validität:

  • Hohe Korrelationen zwischen verschiedenen Methoden, die dasselbe Trait messen, zeigen konvergente Validität.
    • Zum Beispiel sollten "Angst-SB", "Angst-TB" und "Angst-VB" hoch miteinander korrelieren.
    • In der Beispiel-Matrix sind die Korrelationen zwischen den verschiedenen Methoden für Angst (0.70, 0.65, 0.60) relativ hoch, was auf gute konvergente Validität hinweist.

Diskriminante Validität:

  • Niedrige Korrelationen zwischen verschiedenen Traits, gemessen mit der gleichen oder unterschiedlichen Methoden, zeigen diskriminante Validität.
    • Zum Beispiel sollten die Korrelationen zwischen "Angst-SB" und "Depression-SB" niedrig sein.
    • In der Beispiel-Matrix sind die Korrelationen zwischen Angst und Depression für Selbstbericht (0.30), Lehrerbewertung (0.25) und Verhaltensbeobachtung (0.20) relativ niedrig, was auf gute diskriminante Validität hinweist.

Multitrait – Multimethod Matrix (MTMM) was muss man bzgl. der methodenvarianz wisen?

  • Methodenvarianz: Dies ist die Varianz, die auf die Methode der Messung zurückzuführen ist, anstatt auf das eigentliche Konstrukt, das gemessen wird. Wenn zwei Maße, die dasselbe Konstrukt messen sollen, stark korrelieren, kann dies teilweise auf die Methodenvarianz zurückzuführen sein.

Identifikation der Methodenvarianz in der MTMM-Matrix

  1. Hohe Korrelationen innerhalb derselben Methode:
    • Wenn Maße für verschiedene Traits, die mit derselben Methode erhoben wurden, hoch korrelieren, kann dies auf Methodenvarianz hindeuten. Zum Beispiel könnte die Korrelation zwischen "Angst-SB" und "Depression-SB" höher sein, weil beide durch Selbstbericht erhoben wurden, und nicht unbedingt, weil Angst und Depression eng verbunden sind.
  2. Hohe Korrelationen zwischen verschiedenen Traits und Methoden:
    • Wenn es systematisch hohe Korrelationen zwischen verschiedenen Traits gibt, die mit verschiedenen Methoden erhoben wurden, könnte dies ebenfalls auf Methodenvarianz hinweisen. Dies ist jedoch seltener und oft weniger problematisch als hohe Korrelationen innerhalb derselben Methode.

Interpretation der Methodenvarianz in der MTMM-Matrix

  • Konvergente Validität:

    • Hohe Korrelationen zwischen verschiedenen Methoden, die dasselbe Trait messen (z.B. "Angst-SB", "Angst-TB", "Angst-VB"), deuten auf konvergente Validität hin. Diese hohen Korrelationen sollten idealerweise nicht ausschließlich durch Methodenvarianz erklärt werden können.
  • Diskriminante Validität:

    • Niedrige Korrelationen zwischen verschiedenen Traits, die mit derselben Methode gemessen wurden, sind wünschenswert und deuten darauf hin, dass die Methodenvarianz nicht die Hauptquelle der Varianz ist. Niedrige Korrelationen zwischen verschiedenen Traits, die mit verschiedenen Methoden gemessen wurden, unterstützen ebenfalls die diskriminante Validität.

Umgang mit Methodenvarianz

  1. Methodenmix:
    • Ein bewusster Einsatz verschiedener Methoden zur Messung desselben Traits hilft, die Methodenvarianz zu identifizieren und zu kontrollieren.
  2. Statistische Techniken

durch welche sozialen Interaktionen kann die Konstruktvalidität beeinträchtigt werden?

▪ Hypothesen-Raten: (Vpn versuchen das Ziel der Untersuchung zu erraten
und verhalten sich entsprechend)
• -> Versuchspersonen im Anschluss fragen, was das Ziel der Studie war
▪ Reaktivität der Untersuchungssituation (Evaluation Apprehension)
Vpn haben Angst untersucht zu werden
Vpn wollen positiven Eindruck machen (Soziale Erwünschtheit)
▪ -> Aufwärmphase
▪ Novitäts- und Störungseffekte
Vpn schlafen 1. Nacht im Schlaflabor unruhiger als zu Hause
(ökologische Validität)
-> Aufwärmphase
▪ Versuchsleitereffekte: Das Treatment ist konfundiert mit Erwartung der
Forschenden bezüglich der Wirkung des Treatments, die auf Vp übertragen
wird (Rosenthal Effekt)
-> in Medikamentenstudien Doppel-Verblindung
weder Studienteilnehmer noch Person, die Medikament verabreicht wissen, ob
Placebo oder Verum verabreicht wurde

▪ Diffusion oder Imitation des Treatments:
Vpn der EG und KG lernen voneinander
▪ Kompensatorische Angleichung der Treatments:
Durch kompensatorische Massnahmen soll die
Benachteiligung der KG ausgeglichen werden (zumeist auf
administrativ, institutioneller Ebene)
▪ Kompensatorische Rivalität:
Vpn der KG wissen, welche Behandlung EG bekommt und
versuchen zu kompensieren („Hawthorne effect»
Rosenthal & Rosnow, 2008, S. 218)
▪ Demoralisierung: Vpn der KG sind enttäuscht oder
verärgert über die Pseudo- oder Nicht-Behandlung
▪ In der Psychotherapie-Forschung sind dies
Beeinträchtigungen der Treatment Validität

beinträchtigung der konstruktvalidität; welche gründe gibts besides sozialer beeinflussung?

Inadäquate Explikation der Konstrukte
-> Präzise Definition und Explikation des Konstrukts (Konstrukt ist zu generell oder zu
spezifisch oder falsch spezifiziert)
▪ Mono-Operations-Bias: Konstrukte sind mit einer Operationalisierung zumeist
unterrepräsentiert (bezieht sich primär auf u.V.; z.B.: eine Dosis eines Treatments)
▪ Konfundierung des Konstrukts mit einem Level des Konstrukts (bezieht sich primär
auf u.V; z.B. bestimmte Dosis eines Treatments wird mit dem Treatment allgemein
gleichgesetzt)
-> mehrere Varianten des Treatments werden verabreicht
▪ Eingeschränkte Generalisierbarkeit über Konstrukte (Wie umfassend wird z.B. die
Bandbreite der erwünschten Wirkungen und unerwünschten Nebenwirkungen
abgebildet?)
▪ Mono-Method-Bias: Konstrukte werden mit einer Methode meist nur unzureichend
erfasst (bezieht sich primär auf a.V.; z.B. nur Fragebogenmessung)
▪ Zusammenwirken verschiedener Treatments (Medikamenteneffekt = Effekt des
Verums + Placeboeffekt)
 -> z.B. Placebokontrollgruppe
▪ Interaktion zwischen Testen und Treatment: Prätest sensibilisiert für die Wirkung des
Treatments (Reaktivität der Untersuchungssituation)
 -> Kontrollgruppe ohne Prämessung

um was gehts in der externen validität?

Der Text behandelt das Konzept der externen Validität in der empirischen Forschung, wie es in den Werken von Shadish et al. (2002) sowie Döring und Bortz (2016) beschrieben wird. Externe Validität bezieht sich darauf, ob die in einer Studie gefundenen kausalen Beziehungen auf andere Kontexte verallgemeinert werden können. Dabei wird untersucht, ob die Ergebnisse der Studie auch auf andere Personen, Settings, Zeitpunkte, Treatments (Behandlungen) und Outcomes (Ergebnisse) übertragbar sind. Der Text stellt zwei zentrale Fragen:

  1. Sind die in der Studie gefundenen kausalen Beziehungen auch für Variationen der in der konkreten Studie untersuchten Personen, Settings, Zeiten, Treatments und Outcomes gültig?
  2. Sind die in der Studie gefundenen kausalen Beziehungen auch für Personen, Settings, Zeiten, Treatments und Outcomes gültig, die nicht in der konkreten Studie untersucht wurden?

allgemeine Definition von zielpopulation, und wie können zielpopulationen unterschiedlich definiert sein?

Zielpopulation = Gesamtmenge aller Untersuchungseinheiten (Personen,
Verhaltensweisen, Objekte) über die in einer empirischen Untersuchung
wissenschaftliche Aussagen getroffen werden sollen. (S. 292)
▪ Zielpopulationen können unterschiedlich definiert werden:
• Erwachsene Bevölkerung eines Landes oder einer Region (z.B. bei Ermittlung von
Inzidenz- und Prävalenzraten)
• Patient:innen mit spezifischer Erkrankung (Major Depression) im erwerbsfähigen Alter
(zwischen 18 und 65 Jahren)
• Studierende der Universität Fribourg im Dezember 2022
▪ Die Zielpopulation ist abhängig von der Fragestellung.
Auch Massnahmen, Objekte, Verhaltensweisen können Zielpopulation
sein:
• Population aller Zwischenrufe im Parlament
• Population aller im Schweizerischen Fernsehen ausgestrahlten
Dokumentationssendungen

externe validität; wann ist eine Vollerhebung möglich/notwendig einer Population ?
 

Vollerhebung einer Population
• ist möglich, wenn die Population überschaubar und gut erreichbar ist
− alle Patienten einer Klinik in einem bestimmten Zeitraum
• Ist notwendig, wenn die Population klein und heterogen ist
− z.B. alle Beschäftigten des Departements für Psychologie

externe validität; wann ist eine Vollerhebung nicht möglich/notwendig bei einer Population ?

Vollerhebung einer Population ist nicht möglich, wenn
• Population nicht endlich ist
− Z.B. nationale Stereotype in allen täglich erscheinenden deutschsprachigen
Tageszeitungen
• Population nur teilweise bekannt ist
− Gesundheitszustand der heroinabhängigen Männer in der Schweiz
• die Art der Untersuchung die Population beeinträchtigt oder zerstört
− Crashtests zur Qualitätskontrolle der Jahresproduktion eines Autos
• Aufwand für Gesamterhebung zu gross ist

externe validität: Zielpopulation, Auswahlpopulation, Inferenzpopulation; was sind hier die unterschiede?

Zielpopulation (target population) =
Gesamtheit aller Personen / Objekte über die in einer empirischen Untersuchung
wissenschaftliche Aussagen getroffen werden sollen
• Auswahlpopulation (frame population) =
Gesamtheit aller Personen / Objekte, die prinzipiell eine Chance haben in die Stichprobe zu
gelangen
− Z.B. Zielpopulation = Gesamtheit der Einwohner des Kanton Fribourg
-> Auswahlpopulation = die im Telefonbuch in den Orten des Kantons gelisteten Personen
-> Unterabdeckung (undercoverage) der Zielpopulation durch die Auswahlpopulation, da viele
Personen nicht im Telefonbuch gelistet sind
− Da Personen nicht erreichbar sind oder Teilnahme verweigern (Non-Response), ist auch kein
direkter Schluss von Stichprobe auf die Auswahlpopulation möglich, sondern nur auf die
Inferenzpopulation
• Inferenzpopulation (inference population)
= Auswahlpopulation – Ausfälle. =
Gesamtheit aller Personen / Objekte aus der Stichprobe tatsächlich stammt
− Wird auf der Basis der vorliegenden Stichprobe und Vermutungen über Nicht-Erreichbarkeit u.
Teilnahmeverweigerung geschätzt

externe validität: Konstruktion, Rekrutierung und Erhebung von Stichproben, was ist dabei zu beachten?

Die einzelnen Schritte umfassen:

  1. Stichprobenkonstruktion:

    • Entscheidung über das Verfahren der Stichprobenwahl, zum Beispiel die bewusste Auswahl nach Quotenverfahren.
    • Festlegung des Umfangs der Stichprobe.
  2. Stichprobenrekrutierung:

    • Kontaktierung und Anwerbung von Teilnehmenden entsprechend der festgelegten Stichprobenkonstruktion.
  3. Stichprobenerhebung:

    • Durchführung der tatsächlichen Datenerhebung.
    • Bestimmung der endgültigen Stichprobe, zum Beispiel durch die Anzahl der Personen, die den Fragebogen plausibel ausgefüllt haben.

Diese Schritte sind entscheidend, um eine repräsentative und aussagekräftige Stichprobe zu erhalten, die valide Ergebnisse ermöglicht.

was gibts es für zufallsgesteueerte stichprobenarten und was ist bzgl. repräsentativität zu beachten?

Der Text beschreibt verschiedene zufallsgesteuerte (probabilistische) Auswahlmethoden für Stichproben, wie sie in den Arbeiten von Shadish et al. (2002) sowie Döring & Bortz (2016) beschrieben werden. Hier sind die Methoden und Beispiele dazu:

1. **Einfache Zufallsstichprobe**:
    - **Beschreibung**: Jede Einheit der Population hat die gleiche Chance, in die Stichprobe zu gelangen.
    - **Beispiel**: Eine Forscherin hat eine Liste aller Studierenden an einer Universität und wählt zufällig 100 Studierende aus, indem sie beispielsweise Lose zieht.

2. **Geschichtete bzw. stratifizierte Stichprobe (stratified random sample)**:
    - **Beschreibung**: Die Zielpopulation wird auf der Basis eines Merkmals in Teilpopulationen (Schichten) eingeteilt. Aus jeder Teilpopulation wird eine einfache Zufallsstichprobe entnommen. Dies erlaubt präzisere Schätzungen der Populationsparameter.
    - **Beispiel**: Eine Umfrage wird unter Studierenden durchgeführt, wobei die Population in Geschlechter (männlich, weiblich, divers) aufgeteilt wird. Aus jeder Geschlechtskategorie wird eine zufällige Stichprobe entnommen.

3. **Klumpenstichprobe (Cluster Sample)**:
    - **Beschreibung**: Eine Zufallsstichprobe von "Klumpen" (z.B. Schulen, Städte) wird gezogen, und in jedem ausgewählten Klumpen werden alle Einheiten (z.B. alle Schüler in den ausgewählten Schulen) untersucht.
    - **Beispiel**: Ein Forscher wählt zufällig 10 Schulen aus einer Region aus und untersucht alle Schüler in diesen Schulen.

4. **Mehrstufige Zufallsstichprobe (Multistage Random Sample)**:
    - Beschreibung: Kombination verschiedener Strategien. Zunächst wird eine Zufallsstichprobe von größeren Einheiten (z.B. Regionen) gezogen, dann innerhalb dieser Einheiten eine weitere Zufallsstichprobe von kleineren Einheiten (z.B. Schulen).
    - Beispiel: Zuerst werden zufällig 5 Regionen in einem Land ausgewählt, dann werden in jeder Region zufällig 3 Schulen ausgewählt, und schließlich werden aus jeder Schule zufällig 50 Schüler ausgewählt.

Wichtige Bedingungen für die Repräsentativität**:
- Nicht-Erreichbarkeit und Verweigerung müssen vernachlässigbar sein.
- Die Stichprobe muss groß sein (N ≥ 2000).

Stichprobenart: was ist de runterschied zwischen Zufallsgesteuerte (probabilistische) Auswahlmethoden und Nicht zufallsgesteuerte (nicht-probabilistische) Auswahlmethoden?

Zufallsgesteuerte (probabilistische) Auswahlmethoden

Merkmale:

  • Jede Einheit der Population hat eine bekannte, nicht-null Chance, ausgewählt zu werden.
  • Methoden garantieren, dass die Auswahl der Stichprobe auf Zufall basiert, was die Wahrscheinlichkeit von Verzerrungen minimiert.
  • Ziel ist eine repräsentative Stichprobe, die Rückschlüsse auf die gesamte Population zulässt.

Nicht zufallsgesteuerte (nicht-probabilistische) Auswahlmethoden

Merkmale:

  • Einheiten der Population werden auf nicht-zufällige Weise ausgewählt.
  • Nicht alle Einheiten haben eine bekannte oder gleiche Chance, ausgewählt zu werden.
  • Höheres Risiko für Verzerrungen, weniger verallgemeinerbare Ergebnisse.

Stichprobenart: Nicht zufallsgesteuerte (nicht-probabilistische) Auswahlmethode, was gibts hier für vershciedene MEthoden?

Gelegenheitsstichprobe, anfallende Stichprobe (convenience sample, ad-hoc
sample, accidential sample)
− untersucht werden Personen / Objekte die leicht erreichbar sind (z.B.
Bachelorstudierende in Psychologie),
− willkürliche Auswahl (bekannte Personen werden angesprochen)
− Selbstselektions-Stichproben. Personen melden sich auf Aushänge oder Annoncen -
> Sind i.d.R. motivierter
− Nicht repräsentativ, nicht für Beschreibung der Population brauchbar
• Heterogenen Stichprobe
besteht aus Gruppen, die sich in spez. Merkmalen so weit wie möglich
unterscheiden (z.B. soziodemographischer Merkmale: Schicht, Stadt-Land, Alter,
Sprachgruppe usw.). Ermöglicht Überprüfung der Generalisierbarkeit der Befunde
− Nicht repräsentativ, nicht für Beschreibung der Population brauchbar
• Quotenstichprobe (quota sampling)
Population ist hinsichtlich Zusammensetzung wichtiger Merkmale bekannt ->
Stichprobe wird im Hinblick auf diese Merkmale nachgebildet.
− z.B. Quotenstichprobe der Studierenden der Uni Fribourg: Anzahl Studierender aus
jedem Studienfach entspricht Anteil der Studierenden im Fach an der Population
− Trotz Merkmalsrepräsentativität können Stichprobenkennwerte gegenüber der
Population verzerrt sein

Defi Repräsentativität von Stichproben, und wie kann die Repräsentativität von Stichproben ausschauen?

Repräsentativität einer Stichprobe (sample representativeness)
gibt an, wie gut bzw. unverzerrt die Merkmalszusammensetzung in
der Stichprobe die Merkmalszusammensetzung in der Population
widerspiegelt.“ (Döring & Bortz, 2016, S. 298)
= Qualitätsmerkmal der Stichprobe
• Global-repräsentative Stichprobe
Zusammensetzung der Stichprobe entspricht in allen Merkmalen der
Zusammensetzung der Population.
-> zufallsgesteuerte (probabilistische) Ziehung der Stichprobe
− Setzt grosse Stichprobe voraus (N >= 2000)
• Merkmalspezifisch-repräsentative Stichprobe
-> nicht zufallsgesteuerte Quotenstichprobe
− Trotz Merkmalsrepräsentativität können Stichprobenkennwerte
gegenüber der Population verzerrt sein

was ist wichtig bzgl. nichtprepräsentativer stichproben zu betonen?

Personen (Settings, Zeiten, Treatments) werden in Stichprobe
aufgenommen, weil sie bestimmte Kriterien erfüllen und erreichbar sind
(z.B. Gelegenheitsstichprobe, Schneeballverfahren, Heterogenen
Stichprobe)
• Schwierig zu bestimmen, welche Population die Stichprobe genau
repräsentiert.
-> Meist wird aufgrund der Zusammensetzung der Stichprobe die Population
erschlossen.
▪ Generalisierung basiert auf der Einschätzung der Ähnlichkeit zwischen den
Studienbedingungen und den Kontexten, auf die generalisiert werden soll
(Proximal Similarity).
• -> Je ähnlicher andere Personen, Settings, Zeiten denen der Studie sind, um
so eher können die Resultate der Studie auf diese verallgemeinert werden

was ist einGrundproblem von Stuiden selsbt wenn sie auf Repräsentativität angelegt sind?

Nicht alle Vpn, die für die Untersuchung ausgewählt
wurden, werden erreicht.
▪ Wahrscheinlich unterrepräsentiert:
• schlecht erreichbare Personen
• misstrauische Personen
• unterbemittelte Personen
▪ Wahrscheinlich überrepräsentiert
• gut erreichbare Personen
• kooperative Personen

was gibts für Unterschiede zwischen freiwilligen
Studienteilnehmern und und Personen welche grundlegend nicht an Studien teilnehmen?
(Rosenthal & Rosnow, 1991, p. 225f)

Freiwillige haben / sind
▪ bessere Schulbildung, besonders wenn kein persönlicher Kontakt besteht
▪ höhere soziale Schicht
▪ intelligenter
▪ größeres Bedürfnis nach sozialer Anerkennung
▪ geselliger
▪ suche nach Erregung (arousal-seeking)
▪ weniger konventionell
▪ weiblich
▪ weniger autoritär
▪ Juden > Protestanten > Katholiken (in USA)
▪ nonkonformistischer
▪ aus Kleinstädten
▪ religiös interessiert
▪ altruistischer
▪ grössere Offenheit
▪ weniger angepasst
▪ jünger

was ist bzgl. der Verallgemeinerung von Forschungsergebnissen über verschiedene Subgruppen hinweg und die Bedeutung der externen Validität in wissenschaftlichen Studien zu beachten?

  • Verallgemeinerung auf verschiedene Subpopulationen:

    • Die zentrale Frage ist, ob die Forschungsergebnisse auch für unterschiedliche Subgruppen der Population gelten, wie z.B. für Personen verschiedener Altersstufen, sozialer Schichten oder geografischer Standorte.
  • Exploration der externen Validität:

    • Externe Validität bezieht sich darauf, inwieweit die Ergebnisse einer Studie auf andere Situationen oder Gruppen übertragen werden können.
    • Um die externe Validität zu testen, schlagen die Autoren vor, mehrere kleine Studien durchzuführen, bei denen die Population gezielt variiert wird. Dies bedeutet, dass unterschiedliche Subgruppen untersucht werden, um zu sehen, ob die Ergebnisse konsistent bleiben.
  • Vorteile kleiner, lokal kontrollierter Experimente:

    • Cook & Campbell (1979) argumentieren, dass viele kleine Experimente mit lokaler Kontrolle und Auswahl der Messinstrumente oft vorzuziehen sind gegenüber großen nationalen Experimenten.
    • Sie weisen darauf hin, dass die versprochene Standardisierung in großen Experimenten oft weder durchführbar noch wünschenswert ist, da sie die Heterogenität und Relevanz der Ergebnisse einschränken kann.

wann gibt es beeinträchtigungen der externen validität?

Interaktion zwischen (kausalem) Effekt und Untersuchungsteilnehmern:
Kann der Effekt über die Personengruppe der Untersuchung hinaus verallgemeinert werden? Auf welche Personengruppen?
• Z.B. wirken Medikamente anders bei Frauen vs. Männern, Jungen vs. Alten
• Wirkt kognitive VT zur Behandlung von PTSD in Ruanda ähnlich wie in der Schweiz?
• -> Vergleichbare Effekte bei verschiedener Personengruppen eV
▪ Interaktion zwischen (kausalem) Effekt und Treatment :
Kann der Effekt auf Variationen des Treatments oder Kombinationen des Treatments mit anderen Interventionen
verallgemeinert werden? Auf welche?
• Z.B. Wechselwirkungseffekte von Medikamenten
-> Vergleichbare Wirkung einer Substanz bei Verarbreichung anderer Substanzen eV
▪ Interaktion zwischen (kausalem) Effekt und Outcomevariablen:
Kann das gefundene Ergebnis auch auf andere Outcomvariablen verallgemeinert werden? Auf welche?
• Z.B. kann Wirkung von Psychotherapie je nach Outcome Variable verschieden sein. z.B. Reduktion depressiver Symptome, Reduktion
von Angst, Zunahme sozialer Kompetenzen, höhere Lebenszufriedenheit, positive Veränderung der Persönlichkeit
> Vergleichbare Effekte in verschiedenen Variablen eV
▪ Interaktion zwischen (kausalem) Effekt und Setting:
Existiert der gefundene Effekt auch in anderen Settings?
• Ist Wirkung kognitiver VT zur Behandlung von Depression in privaten Praxen ähnlich wie bei Universitären Psychotherapiezentren?
• -> Vergleichbare Effekte in verschiedenen Settings eV
▪ Kontextabhängige Mediatoreffekte
Unterscheiden sich Mediatoreffekte in Abhängigkeit von anderen Kontextfaktoren?
• Wahl des Berufs hängt von persönlichen Interessen und Fähigkeiten ab. Dieser Zusammenhang wird durch
Geschlechtsrollenerwartungen mediiert, aber durch weitere Faktoren, wie z.B. sozialem und kulturellem Hintergrund moderiert.
• -> Vergleichbare Mediatoreffekt bei verschiedenen Ausprägungen anderer Variablen eV
▪ Statistisch drückt sich Beeinträchtigungen der Generalisierbarkeit als Interaktion aus. Moderatoranalysen überprüfen eV

warum ist es wichtig erhobene Daten grundlegend zu kontrollieren bevor diese ausgewertet werden?

Hohe Wahrscheinlichkeit, dass Fehler beim Ausfüllen und /
oder Kodieren entstehen
▪ Entdecken von Kodierfehlern:
• Doppelte Eingabe der Daten (Standard in Klinischen
Zulassungsstudien)

fehlende daten bei einer Erhebung, warum gibt es diese und wass ist das problem?

Fehlende Daten gibt es, weil:
• Personen Fragen gar nicht, unvollständig oder falsch beantworten
• die Untersuchung abbrechen
• Fehler bei der Durchführung der Untersuchung passieren
• Daten bei der Eingabe verloren gehen etc.
▪ Konsequenzen von fehlenden Daten:
• Schätzungen der Parameter können verzerrt sein
• Generalisierbarkeit kann beeinträchtigt sein
• Power ist reduziert

was gibts es für verschiedene arten von missing values?

1.) Vollständig zufällig fehlende Werte (missing completely at random MCAR)
• Missing sind mit keiner interessierenden Variable assoziiert
• Vorhandene Daten sind ein Zufallssample des hypothetisch vollständigen Datensatzes ->
repräsentativ -> unverzerrte, aber weniger effiziente Schätzwerte
− Bsp. Daily Diary zu Stimmung u. Alkoholkonsum. Unsystematisches Vergessen der Eingabe
2.) Zufällig fehlende Werte (missing at random, MAR)
• Muster der Missings hängt mit beobachteten Daten zusammen -> potentiell verzerrte Schätzwerte
− Bsp. Daily Diary zu Stimmung u. Alkoholkonsum. Eingabe werden überwiegend am Wochenende vergessen, weil
Tagesroutine unregelmässiger ist.
• Reduktion der Verzerrung -> indem Missing mit Hilfe der vorhandenen Variablen, mit denen sie
zusammenhängen, geschätzt werden
− Da es fehlende Werte fast nur am Wochenende gibt, kann ihr Auftreten mit der beobachtbaren Variable Wochenende
erklärt werden. Die fehlenden Eingaben am Wochenende selbst sind zufällig.
3.) Nicht zufällig fehlende Werte (missing not at random, MNAR)
• Wenn Missing nicht (vollständig) mit anderen beobachteten Variablen erklärt werden können->
Verzerrte Schätzwerte
− Bsp. Daily Diary zu Stimmung u. Alkoholkonsum. Von exzessiven Trinkern werden Fragen nach Stimmung und Anzahl der
Drinks öfter nicht beantwortet (weil sie betrunken sind) als von anderen Personen, selbst wenn bekannte Variablen, wie
Wochenende kontrolliert sind.

welche strategien gibt es um missing values zu ersetzen?

-Missing werden nicht ersetzt

-Missing werden mit Mittelwert der Variable ersetzt

-Missing werden mit Regressionsgleichung + Zufallskomponente vorhergesagt

-EM-Algorithmus (Expectation-Maximization Algorithmus)--> in iterativer Algorithmus, der fehlende Daten vervollständigt und Modellparameter schätzt

-Multiple Imputation--> Fehlende Werte werden durch mehrere (m) plausible Schätzwerte ersetzt, um m pseudovollständige Datensätze zu erzeugen. Jede dieser Datensätze wird analysiert, und die Resultate werden zu einem gemeinsamen Schätzwert kombiniert.

 

missing values: values werden nicht ersetzt, was sind vor/nachteile?

Beschreibung: Fehlende Werte bleiben unverändert, d.h., sie werden im Datensatz belassen, wie sie sind. Vorteile:

  • Einfach zu implementieren.
  • Keine Verzerrung der vorhandenen Daten. Nachteile:
  • Kann zu Verlust von statistischer Power führen.
  • Analysen können unvollständig sein, da viele statistische Methoden keine fehlenden Werte tolerieren. Einsatz:
  • Geeignet, wenn der Anteil der fehlenden Werte gering ist oder spezielle Methoden wie „listwise deletion“ oder „pairwise deletion“ angewendet werden können.

missing values: Missing werden mit Mittelwert der Variable ersetzt, was sind vor/nachteile?

Beschreibung: Fehlende Werte werden durch den Mittelwert der entsprechenden Variable ersetzt. Vorteile:

  • Einfach zu implementieren.
  • Verhindert Datenverlust durch fehlende Werte. Nachteile:
  • Unverzerrte Schätzung nur bei vollständig zufälligen fehlenden Daten (Missing Completely at Random, MCAR).
  • Unterschätzt die Variabilität, da alle fehlenden Werte durch denselben Mittelwert ersetzt werden.
  • Kann die Varianz und die Korrelationen im Datensatz verzerren. Einsatz:
  • Nicht empfohlen, außer in sehr einfachen und spezifischen Szenarien.

missing values: Missing werden mit Regressionsgleichung + Zufallskomponente vorhergesagt, was sind vor/nachteile?

Beschreibung: Fehlende Werte werden durch Vorhersagen aus einer Regressionsgleichung ersetzt, die auf den vorhandenen Daten basiert. Eine Zufallskomponente wird hinzugefügt, um die natürliche Variabilität zu erhalten. Vorteile:

  • Nutzt vorhandene Daten, um informierte Schätzungen zu erstellen.
  • Erhält die Varianz besser als der Mittelwertersatz. Nachteile:
  • Unverzerrte Schätzung nur bei vollständig zufälligen fehlenden Daten (MCAR).
  • Komplexer in der Umsetzung als einfache Mittelwertersetzung. Einsatz:
  • Besser geeignet als Mittelwertersetzung, wenn die Annahmen erfüllt sind.

missing vaules: EM-Algorithmus (Expectation-Maximization Algorithmus), was sind vor/nachteile?

Beschreibung: Ein iterativer Algorithmus, der fehlende Daten vervollständigt und Modellparameter schätzt.

  • Expectation-Step: Fehlende Daten werden durch erwartete Werte vervollständigt, basierend auf den aktuellen Modellparametern.
  • Maximization-Step: Die Modellparameter werden durch Maximierung der Likelihoodfunktion der vervollständigten Daten geschätzt. Vorteile:
  • Flexibel und kann in vielen verschiedenen Modellen angewendet werden.
  • Berücksichtigt Unsicherheit in den fehlenden Daten. Nachteile:
  • Kann komplex und rechenintensiv sein.
  • Benötigt spezialisierte Software oder Programmierung. Einsatz:
  • Gut geeignet für komplexere Datensätze und Modelle, insbesondere wenn die Annahmen der Methode erfüllt sind.

missing values: multiple imputation, was sind vor/nachteile?

Beschreibung: Fehlende Werte werden durch mehrere (m) plausible Schätzwerte ersetzt, um m pseudovollständige Datensätze zu erzeugen. Jede dieser Datensätze wird analysiert, und die Resultate werden zu einem gemeinsamen Schätzwert kombiniert. Vorteile:

  • Liefert unverzerrte Schätzungen und reflektiert die Unsicherheit durch die Imputation.
  • Flexibel und kann in einer Vielzahl von Modellen verwendet werden. Nachteile:
  • Aufwendig und komplex in der Umsetzung.
  • Benötigt spezialisierte Software. Einsatz:
  • Empfohlen, wenn die Genauigkeit der Schätzung und die Erhaltung der Varianz wichtig sind, insbesondere bei einem größeren Anteil fehlender Werte.

was sind die Grundkomponenten der Reliabilitäähh?

= Qualität der Messung
= Zuverlässigkeit, Wiederholbarkeit, Konsistenz
= theoretisches Konzept
kann aus vorliegenden Daten erschlossen werden

wie stellen die Bogenschützen den Zuammenhang zw. validi und Reliabili dar?

  1. Reliabel, aber nicht valide (Reliable, Not Valid):

    • Beschreibung: Die Treffer sind eng beieinander (hohe Reliabilität), aber weit vom Zielmittelpunkt entfernt (niedrige Validität).
    • Interpretation: Die Messungen sind konsistent und wiederholbar, aber sie messen nicht das, was sie messen sollen. Ein Beispiel könnte ein Thermometer sein, das immer 2 Grad zu hoch anzeigt. Die Messung ist zuverlässig, aber nicht korrekt.
  2. Valid, aber nicht reliabel (Valid, Not Reliable):

    • Beschreibung: Die Treffer sind rund um den Zielmittelpunkt verteilt, aber weit gestreut (hohe Validität, aber niedrige Reliabilität).
    • Interpretation: Die Messungen sind im Durchschnitt korrekt (sie treffen das Ziel), aber sie sind nicht konsistent. Ein Beispiel könnte ein Fragebogen sein, der tendenziell richtige Werte liefert, aber von einer Messung zur nächsten stark schwankt.
  3. Weder reliabel noch valide (Neither Reliable Nor Valid):

    • Beschreibung: Die Treffer sind weit gestreut und nicht im Bereich des Zielmittelpunkts (niedrige Reliabilität und niedrige Validität).
    • Interpretation: Die Messungen sind weder konsistent noch korrekt. Sie sind zufällig verteilt und liefern keine verlässlichen oder genauen Ergebnisse. Ein Beispiel könnte ein ungenaues und unzuverlässiges Messinstrument sein.
  4. Sowohl reliabel als auch valide (Both Reliable and Valid):

    • Beschreibung: Die Treffer sind eng beieinander und nahe dem Zielmittelpunkt (hohe Reliabilität und hohe Validität).
    • Interpretation: Die Messungen sind sowohl konsistent als auch korrekt. Sie liefern wiederholbare und genaue Ergebnisse. Ein Beispiel könnte ein kalibriertes Thermometer sein, das die Temperatur genau und zuverlässig misst.

Zusammenfassung

  • Reliabilität bezieht sich auf die Konsistenz und Wiederholbarkeit der Messungen. Hohe Reliabilität bedeutet, dass die Ergebnisse bei wiederholten Messungen ähnlich sind.
  • Validität bezieht sich auf die Genauigkeit und Richtigkeit der Messungen. Hohe Validität bedeutet, dass die Messungen das messen, was sie tatsächlich messen sollen.

welche verschiedenen reliabilitätsarten hats denn so?

Inter-Rater Reliabilität
• Konsistenz von Urteilen, die von verschiedenen Beurteilern stammen (Mass der Intersubjektivität).
− Bei Beobachtungskategorien: Anteil Übereinstimmung in Prozent, Cohens Kappa
− bei kontinuierlichen Massen: Korrelation zwischen Beobachtern (Masse der Internen Konsistenz).
▪ Test-Retest Reliabilität
• Stabiles Konstrukt (Trait) wird wiederholt mit dem gleichen Instrument gemessen.
• Korrelation r(Xt1, Xt2) ist abhängig vom Zeitintervall.
▪ Parallel-Test-Reliabilität
• Korrelation r(XA, XB) zwischen zwei parallelen Versionen (A und B) des gleichen Instruments.
▪ Interne Konsistenz
• Ähnlichkeit der Einzelitems, die das gleiche Konstrukt messen?
• Durchschnittliche Inter-Item-Korrelation
• Durchschnittliche Korrelation zwischen Einzelitems und Gesamtscore
• Split-Half-Reliabilität
• Cronbachs Alpha

aus was setzt sich der klassischen testtehorie der messwert zusammen?

aus dem wahren wert und messfheler, man muss also viele messungen miteinander vergleichen dann, kann man auf geteilte varianz der scores schauen und der messfehler kann dadurch eliminiert werden

wie berechnet man Korrelationskoeffizienten (auch Pearson-Korrelationskoeffizient genannt) zwischen zwei Variablen X1X_1X1 und X2X_2X2? und bei wlechen reliabiliformen spielt der test ne grosse rolle?

r=(kovarianz von X1,X2) / (SD(X1)*SD(X2)

wird r.g. eingesetzt um die retest reliabili X1 vs X2 mit einander vergleichen zu können

oder auch die splithalt reliabili zu generieren --> das wird dann allerdings noch mit speraman brown formel adjustiert um reliabili für gesamten test zu predicten

auch cronbachs alpha(interne konsistenz) wird leicht adjustiert auf grundlage dießer formel berechnet

 

wie wird die reliabilität der klssischen testtheorie dem grunde nach berechnet?

Varianz des wahren wertes (simuliert in form von Kovarianz der verschiedenen messungen) geteilt durch Varianz der einzelnen messungen (Simuliert durch eine Multiplikation der Standardabweichungen einer einzelnen werte) ; dabei gilt

  • r=1: Perfekte positive lineare Korrelation. Beide Variablen bewegen sich in die gleiche Richtung.
  • r=−1r : Perfekte negative lineare Korrelation. Beide Variablen bewegen sich in entgegengesetzte Richtungen.
  • r=0r = 0r=0: Keine lineare Korrelation. Es besteht keine lineare Beziehung zwischen den Variablen.

was kann man mit cronbachs alpha ausdrücken und welche komponenten sind in der formel enthalten?

Cronbach's Alpha (α\alphaα) ist ein Maß für die interne Konsistenz oder Homogenität eines Tests, also wie gut die Items eines Tests oder Fragebogens zusammenhängen. Es gibt an, inwieweit die Items eines Tests dasselbe Konstrukt messen und ist daher ein Indikator für die Reliabilität des Tests. Ein hoher Wert für Cronbach's Alpha zeigt an, dass die Items gut miteinander korrelieren und somit das gleiche zugrunde liegende Konzept messen.

Eigenschaften und Interpretation von Cronbach's Alpha

  • Wertebereich: Cronbach's Alpha kann Werte zwischen 0 und 1 annehmen.
    • Ein α\alphaα-Wert von 0 bedeutet keine interne Konsistenz.
    • Ein α\alphaα-Wert von 1 bedeutet perfekte interne Konsistenz.
  • k die Anzahl der Items im Test.
  • σi2\sigma^2_iσi2 die Varianz der einzelnen Items.
  • σX2\sigma^2_XσX2 die Varianz des Gesamtscores.

Bedeutung von Cronbach's Alpha

  • Interne Konsistenz: Hohe Werte deuten darauf hin, dass die Items im Test stark miteinander korrelieren, was bedeutet, dass sie wahrscheinlich dasselbe Konstrukt messen.
  • Testverlängerung: Ein Test mit hoher interner Konsistenz kann durch Hinzufügen weiterer ähnlicher Items verlängert werden, ohne die Reliabilität zu beeinträchtigen.
  • Testkürzung: Wenn der Test zu lang ist, können einige Items entfernt werden, ohne die interne Konsistenz stark zu beeinträchtigen, solange α\alphaα hoch bleibt.

wie lautet die formel von cronbachs alspha? rechne mit folgenden daten ne dufte lörung raus: Drei Items:
Var(Y1) = 0.8
Var(Y2) = 1.2
Var (Y3) = 1
Cov(Y1,Y2) = 0.5
Cov(Y1,Y3) = 0.4
Cov(Y2,Y3) = 0.6

α= ((k)/(k-1)) * (1−(Summe(Vari)/Var(Y)

alpha = (Anzahl der Items des Tests /(Anzahl der Items im test -1)) * (1-(Summe der Varianzen der EInzelitems)/(Varianz des Gesamtscores)

dabei Standardabweichung^2=varianz

(3/(3-1))*(1-(1+0,8+1,2)/(1+0,8+1,2+2*0,5+2*0,4+2*0,6)=1,5*0,5=0,75

Essentielle Tau-Äquivalenz asl Grundannahme von Cronbachs alphas; was hat dies zu bedeuten

Die Voraussetzung der essentiellen Tau-Äquivalenz ist eine wichtige Annahme, die erfüllt sein muss, damit Cronbach's Alpha eine zuverlässige Schätzung der internen Konsistenz eines Tests liefert. Diese Annahme betrifft die Beziehung zwischen den beobachteten Itemwerten und den zugrunde liegenden wahren Werten (Latentvariablen).

Essentielle Tau-Äquivalenz

Die Annahme der essentiellen Tau-Äquivalenz bedeutet, dass jedes Item eines Tests dieselbe wahre Varianz (den gleichen wahren Wert) misst, jedoch möglicherweise unterschiedliche Fehlerterme hat. Formal ausgedrückt, besagt diese Annahme, dass für jedes Item i:

Xi= tau + Ei

der beobachtete Wert des Items = der wahre Wert ist, der für alle Items gleich ist + ein Fehlerterm

In Worten bedeutet dies, dass jedes Item dasselbe Konstrukt misst (den gleichen wahren Wert hat), jedoch die Fehlerterme unterschiedlich sein können. Die wahre Varianz (die Varianz der wahren Werte) ist für alle Items gleich, aber die Fehlervarianzen können variieren.

Bedeutung der essentiellen Tau-Äquivalenz

  • Gleiche wahre Werte: Alle Items messen denselben wahren Wert, d.h., sie sind indikativ für dasselbe zugrunde liegende Konstrukt.
  • Unterschiedliche Fehlerterme: Die Fehlerterme können unterschiedlich sein, was bedeutet, dass die Items verschiedene Grade von Messfehlern haben können.
  • Cronbach's Alpha: Wenn die Annahme der essentiellen Tau-Äquivalenz erfüllt ist, liefert Cronbach's Alpha eine genaue Schätzung der internen Konsistenz. Wenn diese Annahme nicht erfüllt ist, kann Cronbach's Alpha die Reliabilität des Tests unterschätzen oder überschätzen.
  • Vergleich mit anderen Modellen

  • Tau-Äquivalente Modelle: Hier wird angenommen, dass nicht nur die wahren Werte, sondern auch die Fehlervarianzen für alle Items gleich sind. Dies ist eine strengere Voraussetzung als die essentielle Tau-Äquivalenz.
  • Kongenerische Modelle: Diese Modelle erlauben sowohl unterschiedliche wahre Werte als auch unterschiedliche Fehlervarianzen für die Items. Dies ist eine weniger restriktive Annahme als die essentielle Tau-Äquivalenz und realistischer für viele psychometrische Tests. Hier wäre jedoch Cronbach's Alpha nicht mehr eine angemessene Schätzung, und andere Maßzahlen wie McDonald's Omega könnten geeigneter sein.

Cronbachs Alpha
▪ Voraussetzung: Essentiell Ƭau-äquivalente Variablen; welche Komponenten zwischen den Items sollte gleich, welche können unterschiedlich sein?

•Mittelwerte d. Items können verschieden sein                                                                                                                                                                                      • Varianzen d. Items können verschieden sein
• Kovarianzen zwischen Items sollten gleich sein
(Spiegelt Einfluss der gemeinsamen latenten Variable)
• Fehlervarianzen d. Items können verschieden sein
• Fehler d. Items sind unkorreliert

welceh zusätzlichen fakten sollte man zum cronbachs alpha kennen?

Wird um so grösser, je höher die Korrelationen zwischen den Items sind
▪ Wird um so grösser, je mehr Items in die Skala eingehen
▪ Je mehr Items bereits in der Skala enthalten sind, umso weniger wird durch ein zusätzliches Item
mit gleicher Interkorrelation Cronbachs Alpha erhöht.
▪ Bewertung von Cronbachs Alpha:
• ≥ .70 (≤ 30% Messfehler) = ausreichend
• ≥ .80 (≤ 20% Messfehler) = zufriedenstellend
• ≥ .90 (≤ 10% Messfehler) = gut

Analyse der Internen Konsistenz von einzelnen Items? Wie gehe ich vor bzw. was gibts hier zu beachten?

wenn einzelne Items Cronbachs Alpha deutlich beeinträchtigen
-> Fehlerkontrolle
-> wenn kein Fehler vorliegt -> Item nicht in Score einbeziehen.
• Bei Ausschluss von Items:
− Skala wird reliabler für gegebene Stichprobe, aber
− Skaleninhalt ändert sich -> Problem für die Konstruktvalidität

Study