Sie sind auf Seite 1von 18

4.

Experiment

Ablauf des Experiments:


1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.

Fragestellung finden
Hypothesenbildung
Bestimmung der wichtigen Bestimmungsstcke (Variablen)
Operationalisierung der Variablen
Versuchsplan aufstellen
Kontrolle der Strvariablen bercksichtigen
Stichprobe bestimmen
Versuchsdurchfhrung
Versuchsauswertung
Hypothesenprfung
Diskussion
Bericht

Gerd Meier: Psychological Research; 10-03-30

page 1

Faculty II: Business Psychology

4. Experiment

Kriterien von Versuchsplnen


Experiment soll valide sein.
Validitt = es wird dasjenige gemessen, was gemessen werden soll
Interne Validitt
Unterschiede in der AV knnen eindeutig auf die Vernderung
der UV, d. h. auf die unterschiedlichen Behandlungen
(Versuchsbedingungen) zurckgefhrt werden
Externe Validitt
Die Schlussfolgerung von den Stichproben von Versuchseinheiten,
experimentellen Variablen und Umgebungen auf Populationen
ist zulssig.

Gerd Meier: Psychological Research; 10-03-30

page 2

Faculty II: Business Psychology

4. Experiment

Interne Validitt
Je hher die Primrvarianz im Verhltnis zur Sekundr- und
Fehlervarianz (Reliabilitt), desto grer die interne Validitt.
Jeder Einsatz von Kontrolltechniken zur Minimierung des
Einflusses der Strvariablen und damit zum Ausschluss von
Alternativerklrungen erhht die interne Validitt.
Die Kontrolltechniken verhindern die Vermischung der UV mit den
Strvariablen.
Vermischung = Konfundierung

Gerd Meier: Psychological Research; 10-03-30

page 3

Faculty II: Business Psychology

4. Experiment

Bedrohung der internen Validitt (insbesondere bei quasi- und vorexperimentellem


Design) nach Campbell & Stanley (1966)
Validittsbeeintrchtigender Strfaktor

Kurze Charakterisierung des Artefakts


Bsp.: Messung der Fhrungsqualitt - Vortrag - erneute Messung

1. Zeitgeschehen
(history)

Die beobachteten Effekte gehen nicht allein auf die


experimentelle Bedingungskonstellation, sondern
(zustzlich) auf unkontrollierte zwischenzeitliche
Ereignisse zurck, Bsp.: dazwischen Kurzarbeit

2. Reifung
(maturation)

Wenn sich der zu untersuchende Sachverhalt bezglich


biologischer (oder/und psychosozialer) Reifungsmerkmale
verndert, ist mit reifungsbedingten Effekten zu rechnen,
die den eigentlichen experimentellen Befund berlagern.
Bsp.: mehr Erfahrung, Sttigung, aber auch Ermdung

3. Mehrfache Testung
(test sophistication)

4. Instrumentierung
(instrumentation)

Gerd Meier: Psychological Research; 10-03-30

Besonders bei mehrfacher Erhebung derselben


Messdaten an ein und demselben Individuum knnen die
whrend des zweiten (dritten,...) Messzeitpunkts
erhobenen Daten aufgrund vorangegangener Testung
beeinflusst sein (z. B. sensibilisierende Erfahrung im
Umgang mit einem Test, bungseffekt) .
Die gemessenen Werte gehen z. T. auf die (zwischenzeitlich
erfolgte) Vernderung der Messinstrumente zurck (z.B.
aufgrund mangelnder Objektivitt und Reliabilitt eines Tests,
Wechsel der Beobachter, Vernderung der Beobachter).
page 4

Faculty II: Business Psychology

4. Experiment

Bedrohung der internen Validitt


Validittsbeeintrchtigender Strfaktor

Kurze Charakterisierung des Artefakts


Bsp.: Messung der Fhrungsqualitt - Vortrag - erneute Messung

5. Statistische
Regression
(regression)

Werden mehr oder weniger extrem verschiedene


Leistungsgruppen z.B. mithilfe eines Vortests gebildet,
dann kann die mangelnde Reliabilitt
(Testzuverlssigkeit) des Messinstruments zu einer
statistischen Regression zur Mitte bei der zweiten
(experimentellen) Testung fhren.
Bsp.: extrem gute vs. extrem schlechte Fhrungskrfte

6. Auswahlverzerrung
(selection)

Bei nicht-zuflliger Bildung von Versuchsgruppen knnen die


damit von Anfang an bestehenden systematischen
Ausgangsdifferenzen zwischen den Gruppen den eigentlichen
experimentellen Effekt berlagern. Bsp.: extrem gute
Fhrungskrfte sind intelligenter gewesen als extrem schlechte
Fhrungskrfte
Fallen im Untersuchungsverlauf Probanden von
verschiedenen Versuchsgruppen aus, so kann das die
eigentlichen experimentellen Effekte beeinflussen,
insofern die Ausfallquote fr die Gruppen systematisch
verschieden ist

7. Ausfalleffekte
(experimental
mortality)

Gerd Meier: Psychological Research; 10-03-30

page 5

Faculty II: Business Psychology

4. Experiment

Bedrohung der internen Validitt


Validittsbeeintrchtigender Strfaktor

Kurze Charakterisierung des Artefakts


Bsp.: Messung der Fhrungsqualitt - Vortrag - erneute Messung

8. Versuchsleitereffekte
(experimenter-bias
effects, sog.
Rosenthal-Effekte)

Bleiben die Eigenschaften, Verhaltensweisen oder/und


Versuchserwartungen des Untersuchers unkontrolliert,
kann das eine systematische Beeintrchtigung der
eigentlichen experimentellen Befunde nach sich ziehen.

9. Interaktive Effekte
(interactive effects;
carry-over
effects)

Wird ein Individuum unter verschiedenen


experimentellen Bedingungen untersucht und bleiben
dabei bertragungseffekte unkontrolliert, knnen
dadurch die experimentellen Befunde verflscht werden.
Bsp.: die extrem guten Fhrungskrfte knnen
insbesondere von der Testung profitieren, merken sich
mehr Items als die extrem schlechten Fhrungskrfte

Gerd Meier: Psychological Research; 10-03-30

page 6

Faculty II: Business Psychology

4. Experiment

Externe Validitt
Generalisierbarkeit der Untersuchungsergebnisse
= Reprsentativitt
Nicht nur Stichprobenrepsentanz, sondern auch
Reprsentativitt der spezifischen Untersuchungssituation
(Brunswik, 1956: oft mangelnde kologische Validit)
und der Variablen
(z. B. Extremgruppen knnen Aussagekraft mindern oder
Konformitt der Vpn mindern die Reprsentativitt)
Interne Validitt ist notwendige, aber nicht hinreichende
Bedingung fr die externe Validitt!
Gerd Meier: Psychological Research; 10-03-30

page 7

Faculty II: Business Psychology

4. Experiment

Externe Validitt
Einflussgren
1. Interaktion Testung UV:
Vortest und Behandlung sind nicht unabhngig
Vortest sensibilisiert
2. Interaktion Selektion UV
z. B. nur kooperative Vpn nehmen teil und die UV
wird davon beeinflusst
3. Reaktive Untersuchungssituationen
Effekt der UV hngt von der Versuchssituation ab
4. Interferenzen mehrfacher Behandlungen
bertragungseffekte zwischen Bedingungen
Gerd Meier: Psychological Research; 10-03-30

page 8

Faculty II: Business Psychology

4. Experiment

Versuchsplan:
Allgemeines Gliederungsschema:

Abbildung Sarris/Rei (2005; S. 64): Modifiziert nach Boesch & Eckensberger, 1969

Quasi-Experiment: Keine freie Zuteilung der Vp auf Gruppen mglich


Ex post facto: Die AV wird beobachtet, dann erfolgt rckblickend
Suche nach UV, z. B. Rauchen als Ursache fr Lungenkrebs
Gerd Meier: Psychological Research; 10-03-30

page 9

Faculty II: Business Psychology

4. Experiment

Was besagt ein Versuchsplan?


1. Anzahl und Stufen der unabhngigen Variablen
2. Hufigkeit der Messungen der abhngigen Variablen
3. Vor Versuchsbeginn erfolgte Verteilung der Versuchspersonen

Was kann der Versuchsplan nicht anzeigen?


1. Gte der operationalen Definition der Variablen
2. Genauigkeit der Messungen

Schematische Darstellung:
1. UV (Behandlung; treatment) wird mit X dargestellt
bei mehreren UVs: A, B, C ... (multifaktoriell)
2. AV erhlt den Buchstaben Y
bei mehreren AVs: P, Q, R ... (multivariat)
3. Versuchsgruppen erhalten G mit Index: G1, G2, G3 ...
Gerd Meier: Psychological Research; 10-03-30

page 10

Faculty II: Business Psychology

4. Experiment

Vorexperimentelle Versuchsplne
Einmalige Untersuchung einer vorgegebenen Gruppe

Zuordnung
V

Gruppe
G

Behandlung Messung
X
Y

Unzulnglichkeit:
Fr einen wissenschaftlichen Nachweis der Wirkung ist
ein Vergleich notwendig.
Die Schlussfolgerung basiert lediglich auf einer allgemeinen
Erwartung, was passiert wre, wenn X nicht eingetreten wre.
Es wird dabei mit mit anderen Gegebenheiten verglichen, die
nicht sorgfltig geplant wurden (z. B. an die man sich
zufllig erinnert).
Interne Validitt ist gleich Null!
Gerd Meier: Psychological Research; 10-03-30

page 11

Faculty II: Business Psychology

4. Experiment

Vorexperimentelle Versuchsplne
Vorher-Nachher-Messung an einer vorgegebenen Gruppe

Zuordnung

Gruppe

VorherNachher
Behandlung
messung
messung
X
Ynach
Yvor

Unzulnglichkeit:
Fr einen wissenschaftlichen Nachweis der Wirkung ist
ein Vergleich notwendig. Der ist hier gegeben.
Aber hat X wirklich eine Wirkung? Oder gibt es Alternativerklrungen?
Zeiteinflsse, Reifung, Testeffekte, Vernderung der Messinstrumente, statistische Regression, experimentelle
Einbuen, Auswahlverzerrungen
Interne Validitt ist gering!
Gerd Meier: Psychological Research; 10-03-30

page 12

Faculty II: Business Psychology

4. Experiment

Vorexperimentelle Versuchsplne
Statischer Gruppenvergleich mit zwei vorgegebenen Gruppen
Zuordnung

Gruppe

V
V

G1
G2

VorherNachher
Behandlung
messung
messung
X
Y1
Y2

z. B.
Geschwindigkeitsbeschrnkung
Auf Autobahnen
Ex-post-facto-Untersuchungen

Unzulnglichkeit:
Fr einen wissenschaftlichen Nachweis der Wirkung ist
ein Vergleich notwendig. Der ist hier gegeben.
Aber hat X wirklich eine Wirkung? Oder gibt es Alternativerklrungen?
experimentelle Einbuen, Auswahlverzerrungen
Interne Validitt ist eher gering!
Mglicher Einfluss auf externe Validitt: Interaktion von
Selektivitt und UV
Gerd Meier: Psychological Research; 10-03-30

page 13

Faculty II: Business Psychology

4. Experiment

Versuchsplan:
Die strengen experimentellen Designs werden untergliedert,
in
Versuchsplne mit Zufallsgruppenbildung
(Randomisierung, R),
Kontrollgruppenversuchsplne
Versuchsplne mit wiederholten Messungen
(Messwiederholung, W),
Vorher-Nachher-Versuchsplne
Versuchsplne mit Blockgruppenbildung (B (R)),
Mischversuchsplne.

Modifiziert aus Sarris/Rei (2005; S. 65)

Gerd Meier: Psychological Research; 10-03-30

page 14

Faculty II: Business Psychology

4. Experiment

Versuchsplan:
Versuchsplne mit Zufallsgruppenbildung
(Randomisierung, R),
Kontrollgruppenversuchsplne
unabhngiger Versuchsplan: Between Subjects-Design

Zufallsaufteilung einer Gesamtgruppe von N = 10 Probanden (links) in zwei gleiche groe Untergruppen (rechts)
(Aus Sarris, 1999).

Gerd Meier: Psychological Research; 10-03-30

page 15

Faculty II: Business Psychology

4. Experiment

Versuchsplan:
Versuchsplne mit Zufallsgruppenbildung
(Randomisierung, R),
Kontrollgruppenversuchsplne
Beispiel: Schachter-Experiment Einfluss Angst auf Kontaktwunsch

Erhhte Angst:
bser Zilstein

kaum Angst:
milder Zilstein

Zufallsaufteilung einer Gesamtgruppe von N = 10 Probanden (links) in zwei gleiche groe Untergruppen (rechts)
(Aus Sarris, 1999).

Gerd Meier: Psychological Research; 10-03-30

page 16

Faculty II: Business Psychology

4. Experiment

Versuchsplan:
Versuchsplne mit Zufallsgruppenbildung
(Randomisierung, R),
Kontrollgruppenversuchsplne
Maximiere die Primrvarianz

Erhhte Angst:
bser Zilstein:
Instruktion
strenger Blick
weier Kittel
kaum Angst:
milder Zilstein
Weitere Mglichkeit: Extremgruppenvergleiche (Quasi-Experiment)
mein Vergleich: extrem schchtern vs. extrem nicht schchtern
extrem introvertiert vs. extrem extravertiert
Gerd Meier: Psychological Research; 10-03-30

page 17

Faculty II: Business Psychology

4. Experiment

Versuchsplan (in unserer Notation aber ein vorexperimenteller Plan)


Versuchsplne mit wiederholten Messungen
(Messwiederholung, W),
Vorher-Nachher-Versuchsplne
abhngiger Versuchsplan: Within Subjects-Design

1.
AVMessung

UV

2.
AVMessung
Nachher

Vorher

Beispiel: Fricker, Odermatt, Schmid (2002) Einfluss Flugblatt auf


Bereitschaft Metall zu sammeln

Menge
Metall
vorher
Gerd Meier: Psychological Research; 10-03-30

Menge
Metall
nachher

Flugblatt
aktion
page 18

Faculty II: Business Psychology

4. Experiment

Experimenteller Versuchsplan mit Messwiederholung:

Zuordnung

Gruppe

Blockbildung
Blockbildung

Vp1
Vp2

Blockbildung

Vpn

Behandlung Behandlung
1
2
Randomisierung
Y11
Y12
Y21
Y22

Yn1

Yn2

Hier wird der bertragungseffekt ausgeschlossen ebenso wie


Zeiteinflsse und Reifung.

Gerd Meier: Psychological Research; 10-03-30

page 19

Faculty II: Business Psychology

4. Experiment

Versuchsplan:
Cross-over-Design (Ausbalancierungsmethode)
Zur Kontrolle von Abfolgeeffekten (X1 wirkt auf X2 und umgekehrt)

Gruppe
A
Gruppe
B

X
1

X
2

X
2

X
1

z. B. wie wirken verschiedene Problemlsungsstrategien bei der Lsung


mathematischer Aufgaben?
X1 und X2 enthalten unterschiedliche Strategien in der Instruktion;
evtl. werden in der jeweils 2. Bedingung beide Strategien genutzt.
Between Subjects-Faktor: Reihenfolge; Within Subjects-Faktor: UV
Wenn Carry-over-Effekte nur in 1 Reihenfolge, dann unabhngigen Versuchsplan
Gerd Meier: Psychological Research; 10-03-30

page 20

Faculty II: Business Psychology

10

4. Experiment

Versuchsplan:
Cross-over-Design (Ausbalancierungsmethode)
Zur Kontrolle von Positionseffekten (z. B. bungseffekt)

bei mehreren Bedingungen Zufallsabfolge


Block-Randomisierung, bei der jede Vp mehrere Abfolgen durchluft
z. B. ABBA-Balancierung (erst Abfolge AB, dann BA fr jede Vp)
Vollstndiges Ausbalancieren: alle Reihenfolgen sind bercksichtigt
Unvollstndiges Ausbalancieren: Methode des Lateinischen Quadrats
a
b
c
d
25% der Stichprobe
b
d
a
c
25% der Stichprobe
d
c
b
a
25% der Stichprobe
c
a
d
b
25% der Stichprobe

Gerd Meier: Psychological Research; 10-03-30

page 21

Faculty II: Business Psychology

4. Experiment

Versuchsplan:
Mischversuchsplne mit Vorher-Nachher-Messung und Kontrollgruppe
Split-Plot-Design (unabhngiger und abhngiger Versuchsplan)
Beispiel: Fricker, Odermatt, Schmid (2002) Einfluss Flugblatt auf
Bereitschaft Metall zu sammeln
Gebiete mit Flugblattaktion

Menge
Metall
vorher

Menge
Metall
nachher

Flugblatt
aktion

Gebiete ohne Flugblattaktion

Menge
Metall
vorher
Gerd Meier: Psychological Research; 10-03-30

Menge
Metall
nachher

Ohne
Behandlung

page 22

Faculty II: Business Psychology

11

4. Experiment

Versuchsplan:
Mischversuchsplne mit Vorher-Nachher-Messung und Kontrollgruppe
Salomon-Versuchsplan mit 4 Gruppen

Menge
Metall
vorher
Menge
Metall
vorher

Kein Vortest !!

Menge
Metall
nachher

Flugblatt
aktion
Ohne
Behandlung

Menge
Metall
nachher

Flugblatt
aktion

Menge
Metall
nachher
Menge
Metall
nachher

Ohne
Behandlung
Gerd Meier: Psychological Research; 10-03-30

page 23

Faculty II: Business Psychology

4. Experiment

Versuchsplan:
Versuchsplne mit Blockgruppenbildung (B (R)): Parallelisierung, Matching
Finden von Paaren mit gleichen oder hnlichen Ausprgungen einer
wichtigen Variablen, z. B. Intelligenz (experimentelle Zwillinge)
Dann Zufallsaufteilung: 1 Person in Experimental-, die andere in Kontrollgruppe

Gerd Meier: Psychological Research; 10-03-30

page 24

Faculty II: Business Psychology

12

4. Experiment

Versuchsplan:
Mehrfaktorielle Designs: mehrere UVs (mehrere AVs: multivariat)
Idealerweise vollstndige Kombination aller UVs mit gleich vielen Vpn in den Zellen
Beispiel eines Versuchsplanlayouts fr einen dreifaktoriellen
(2 x 2 x 3 faktoriellen) Versuchsplans mit unabhngigen Vpn
pro Zelle

a1

a2

b1

b2

b1

b2

c1

Vpn Gruppe 1

Vpn-Gruppe 2

Vpn-Gruppe 3

Vpn-Gruppe 4

c2

Vpn-Gruppe 5

Vpn-Gruppe 6

Vpn-Gruppe 7

Vpn-Gruppe 8

c3

Vpn-Gruppe 9

Vpn-Gruppe 10

Vpn-Gruppe 11

Vpn-Gruppe 12

Gerd Meier: Psychological Research; 10-03-30

page 25

Faculty II: Business Psychology

4. Experiment

Versuchsplan:
Mehrfaktorielle Designs
Hier sind die Effekte jeder UV getrennt von anderen UVs (Haupteffekte)
und die Wechselwirkungen analysierbar

Gerd Meier: Psychological Research; 10-03-30

page 26

Faculty II: Business Psychology

13

4. Experiment

Versuchsplan:
Mehrfaktorielle Designs

Beispiel aus Sedlmeier, Renkewitz (2008; S. 172): 4 mgliche Ergebnisse eines 2x2-Designs
Gerd Meier: Psychological Research; 10-03-30

page 27

Faculty II: Business Psychology

4. Experiment

Versuchsplan:
Hierarchischer Versuchsplan (Nested Designs: nicht vollstndig gekreuzt)

A1

B1

A2

A3

A4

VpVpGruppe Gruppe
1
2
VpVpGruppe Gruppe
3
4

B2
Erhebliche Validittsprobleme !
Gerd Meier: Psychological Research; 10-03-30

page 28

Faculty II: Business Psychology

14

4. Experiment

Flussdiagramm
aus Sarris (1992)

Gerd Meier: Psychological Research; 10-03-30

page 29

Faculty II: Business Psychology

4. Experiment

Ablauf des Experiments:


1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.

Fragestellung finden
Hypothesenbildung
Bestimmung der wichtigen Bestimmungsstcke (Variablen)
Operationalisierung der Variablen
Versuchsplan aufstellen
Kontrolle der Strvariablen bercksichtigen
Stichprobe bestimmen
Versuchsdurchfhrung
Versuchsauswertung
Hypothesenprfung
Diskussion
Bericht

Gerd Meier: Psychological Research; 10-03-30

page 30

Faculty II: Business Psychology

15

4. Experiment

Kontrolle der Strvariablen


(der Sekundrvarianz)
1. Eliminieren (z. B. Lrm durch Dmmung)
2. Konstanthalten (gleiche Bedingungen schaffen)
3. Parallelisieren (matching) (bekannte Vpn-unterschiede)
4. Balancieren (z. B. Bedingungsabfolge, Versuchsleiter)
Strfaktor wird quasi als UV eingebracht
5. Randomisieren (alle unbekannten Vpn-unterschiede)
Gerd Meier: Psychological Research; 10-03-30

page 31

Faculty II: Business Psychology

4. Experiment

Oberstes Ziel: Vermeidung der Konfundierung

Gerd Meier: Psychological Research; 10-03-30

page 32

Faculty II: Business Psychology

16

4. Experiment

Besondere Technik zur Kontrolle von Vpn- (Placebo-Effekt)


und Versuchsleitereffekten (Rosenthal-Effekte): Doppelblindstudie
(Kontrolle der Erwartungen; Hinweise werden als demand characteristics bezeichnet)

Gerd Meier: Psychological Research; 10-03-30

page 33

Faculty II: Business Psychology

4. Experiment

Ablauf des Experiments:


1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.

Fragestellung finden
Hypothesenbildung
Bestimmung der wichtigen Bestimmungsstcke (Variablen)
Operationalisierung der Variablen
Versuchsplan aufstellen
Kontrolle der Strvariablen bercksichtigen
Stichprobe bestimmen
Versuchsdurchfhrung
Versuchsauswertung
Hypothesenprfung
Diskussion
Bericht

Gerd Meier: Psychological Research; 10-03-30

page 34

Faculty II: Business Psychology

17

4. Experiment

Stichprobe wichtig fr
-

externe Validitt
Minimierung der Fehlervarianz:
dazu: gengend groe Stichprobe whlen

in der Regel keine Zufallsstichprobe mglich


hufig: anfallende Stichprobe
hier darauf achten,
dass Stichprobe in etwa der Grundgesamtheit entspricht

Gerd Meier: Psychological Research; 10-03-30

page 35

Faculty II: Business Psychology

4. Experiment

Optimale Stichprobengre hngt ab


- Anzahl der Gruppen
- erwartete Effektstrke
- gewnschter alpha-Fehler und Teststrke (1 beta)
Richtwerte adaptiert nach Bortz (1993, S. 248) bei alpha = 5%
und Teststrke = 80%
Effektstrke
schwach
mittel
stark
Varianzaufklrung (Primrvarianz)
Gruppenanzahl
2
3
4
5
6
Gerd Meier: Psychological Research; 10-03-30

bis 1%
393
322
274
240
215

bis 6%

bis 14%
64
52
45
39
35

page 36

26
21
18
16
14
Faculty II: Business Psychology

18