Flashcards
Operationalisierung von Wirksamkeitskriterien
Flashcards do conjunto (30)
- 1Welche Frage stellt man sich bei der Operationalisierung?Wie kann ein Interventionsziel in einen beobachtbaren Wert („Messwert“) überführt werden?
- 2An welchen Stellen können hierbei Probleme auftreten?
- 3Wann können Probleme entstehen?wenn das Kriterium (d.h. das latente Konstrukt, das ein Messinstrument zu messen vorgibt) den Zielzustand nur unzureichend abbildet („Asymmetrie“),
- 4Weil..?- Kriterium nur einen Teilaspekt des Zielzustandes abbildet (Bsp.: eine Aufklärungskampagne soll Frauen motivieren, Krebs-Früherkennungsangebote zu nutzen, aber gemessen wird lediglich das Wissen über Brustkrebs)
- Kriterium auf einer höheren Generalitätsebene angesiedelt ist als der Zielzustand (Bsp: eine Werbekampagne soll Verbraucher dazu ermuntern, mehr Energiesparlampen zu kaufen, aber gemessen wird das generelle Umweltbewusstsein per Fragebogen)
- Kriterium auf einer niedrigeren Generalitätsebene angesiedelt ist als der Zielzustand (Gegenbeispiel zu oben) - 5Probleme können außerdem entstehen, wenn...das Kriterium nicht reliabel und/oder konstruktvalide erfasst wird...
weil die Datenerfassung mit starken Messfehlern behaftet ist (Reliabilität)
weil das Messinstrument nicht das misst, was es messen soll (Konstruktvalidität)
- 6Probleme können außerdem entstehen, wenn...- es keine Passung zwischen der Intervention und dem angestrebten Zielzustand gibt (Bsp.: Es soll Verhalten verändert werden, aber es wird nur Wissen vermittelt)
- es in der Evaluationsstichprobe overinclusion oder underinclusion gibt
- die Wirksamkeit zu einem Zeitpunkt gemessen wird, zu dem die Wirkung noch gar nicht eingetreten ist
- das Messinstrument nicht den Voraussetzungen der Teilnehmenden entspricht (z.B. nicht altersangemessen ist)
- bei Veränderungsfragestellungen: wenn das Messinstrument nicht änderungssensitiv ist (später mehr) - 7Was versteht man unter multimodaler Diagnostik?Messung unterschiedlicher Facetten eines Konstrukts
- 8Was versteht man unter multimethodaler Diagnostik?Nutzung unterschiedlicher Herangehensweisen oder Datenquellen zur Erhöhung der Reliabilität (Messfehler mitteln sich über Methoden hinweg aus) und der Konstruktvalidität (um die Breite eines Konstrukts ggf. besser abbilden zu können)
Beispiel: Selbsteinschätzungen, Fremdeinschätzungen, Tests oder Verhaltensbeobachtungen, objektive Daten - 9Beschreibe Multimethodale Diagnostik der vier Wirksamkeitsebenen im Modell von Kirkpatrick (1987).
- 10Nenne Methoden der Datengewinnung.1.Selbstberichte/Selbstauskünfte/Fragebogen
2.Verhaltensmaße
3.Fremdeinschätzungen
4.Indirekte/implizite Verfahren
5.Projektive Verfahren - 11Nenne 2 Selbstauskunftsbeispiele.Aggressivitäts-Fragebogen (Buss & Perry)
Bully Victim Questionnaire (Olweus) - 12Nenne Vor- und Nachteile von Selbstauskünften.Vorteile:
- ökonomisch
- direkte Messung möglich
- Verhaltensintentionen korrelieren (unter Umständen) mit tatsächlichem Verhalten
Nachteile:
- Motivierte und unmotivierte Verzerrungen („Soziale Erwünschtheit“; Verankerungseffekte etc.)
- Konstruktvalidität fraglich („Subjektive Theorien“ anstatt „realistischer Selbsteinschätzung“)
- Personen haben ggf. eine invalide oder gar keine kognitive Repräsentation von dem zu messenden Konstrukt. - 13Nenne Beispiele zur Verhaltensmessung.reaktive Verhaltensmessung (Labor)
- Hot sauce paradigm
- Competitive Reaction Time Task
nicht reaktive Verhaltensmessung (Feld)
-Beobachtungsverfahren zur Analyse von aggressionsbezogenen Interaktionen im Schulunterricht (BAVIS)
-Beobachtungsbogen für aggressives Verhalten (BAV) - 14Was versteht man unter Competitive Reaction Time Task.Den Probanden wird dabei gesagt, man würde ein Geschicklichkeitsspiel gegen eine andere Person spielen. Jede Runde ertönt ein Signal und der Spieler muss so schnell wie möglich die Leertaste an einem Computer drücken. Wer schneller drückt, gewinnt. Der Verlierer einer Runde bekommt vom Gewinner ein unangenehmes Geräusch auf die Ohren gelegt. Lautstärke und Dauer des Geräusches kann der Gewinner bestimmen. Und je lauter und länger der Proband das Bestrafungs-Geräusch für den Gegner wählt, desto aggressiver soll sein Verhalten sein.
- 15Was versteht man unter hot sauce paradigm.Nach dem Spielen werden die Probanden aufgefordert, für eine andere Person einen Teller Chili zuzubereiten. Da steht also ein Topf mit Chili, von dem man eine Kelle nimmt und dann mit scharfer Sauce würzt. Dazu stehen verschieden scharfe Saucen zur Verfügung. Die Schärfe der Sauce, die der Proband auswählt und die Menge davon sind dann die Indikatoren für das Maß an Aggressivität.
- 16Nenne Beispiele der Fremdeinschätzung.Peer-Nominations-Verfahren
Soziometrische Verfahren (alle beurteilen alle)
Child Behavior Checklist (Elternfragebogen, Lehrerfragebogen) - 17Was versteht man unter Peer-Nominations-Verfahren?Verhalten von mehreren Zielpersonen wird gleichzeitig beobachtet und beurteilt
- 18Nenne Bsp. für indirekte Verfahren.lexikalische Entscheidungsaufgabe
story-stems (gibt Satzanfänge vor, Kinder beenden diese)
word completion task
IAT - 19Nenne Bsp. für projektive Verfahren.Thematischer Apperzeptionstest (TAT)
Rosenzweig Picture Frustrations Test (PFT)
Aggressions Motiv Gitter (AMG) - 20Was ist der TAT.Thematischer Apperzeptionstest
20 Bildtafeln mehrdeutiger Art, zu denen Geschichten fabuliert werden sollen - 21Was ist der PFT.Rosenzweig Picture-Frustration Test
Verfahren und dient der Untersuchung der Frustrationstoleranz in soz. Konfliktsituationen
PFT besteht aus 24 skizzenartig gezeichneten Situationen. In diesen Situationen richtet eine Person frustrierende Äußerungen an eine zweite, deren Antwort der Proband assoziativ ergänzen soll - 22Nenne Vor- und Nachteile von direkter Veränderungsmessung.direkte:
+ ökonomisch, valide für die subj. erlebte Veränderung
- anfällig für Verzerrungen & Verfälschungen (confirmation bias, selektive Gedächtniseffekte, Assimilationseffekte) - 23Nenne Vor- und Nachteile von indirekter Veränderungsmessung.+ weniger anfällig für Verfälschungen
- Positionseffekte (Testübung, Ermüdung, Erinnerung)
- Übertragungseffekte
- zwischenzeitliches Geschehen
- Response shifts - 24Was ist response shift.Veränderung des Bewertungshintergrunds für ein persönlich bedeutsames Konzept. Dieser Prozess ist für die Veränderungsmessung relevant, da er die Prä-Post-Differenz von Messungen beeinflussen kann.
- 25Was ist die Voraussetzung für indirekte Veränderungsmessung.Änderungssensitivität
- 26Was sind Gefahren für die Validität bei Selbstauskünften und Verhaltensmaßen?Soziale Erwünschtheit (Anerkennungsmotiv)
Selbstdarstellung („Impression Management“)
Symptomaggravation („faking bad“)
Akquieszenz (unabhängig vom Inhalt der Fragen zuzustimmen)
Aufforderungscharakter (z.B. der Itemformulierung)
Hawthorne-Effekt
Rosenthal-Effekt - 27Was ist der Hawthorne-Effekt?besagt, dass die Arbeitsleistung nicht nur eine Funktion "objektiver" physikalischer Arbeitsbedingungen ist, sondern davon abhängt, wie Arbeitsinhalte, Kollegen und Führungskräfte wahrgenommen werden
- 28Was ist der Rosenthal-Effekt?Resultat eines Versuchsleiter-Versuchspersonen-Verhältnisses, durch das sich positive Erwartungen des Versuchsleiters in Form einer „selbsterfüllenden Prophezeiung“ auf das Ergebnis des Experiments auswirken
- 29Was sind Quasi-indirekte Veränderungsmessungen?Man fragt die Beteiligten zum Zeitpunkt des Posttests danach, wie die Merkmalsausprägung zum Zeitpunkt des Prätests gewesen war („Retrospective Pretest“)
- 30Was sind Vor- und Nachteile hierbei?Vorteile:
ökonomisch
Kontrolle von „Response shifts“
Nachteile:
Aufforderungscharakter („demand characteristics“)
Selektive oder verzerrte Erinnerung