föreläsning 5: Confounds
den klassiska Confounds: all effekt intern validitet!
Historikförvirring en historikförvirring inträffar när det finns någon
extra experimentell händelse som påverkar den beroende variabeln. Det
förekommer vanligtvis för experiment som har lång varaktighet. För
exempel, anta att jag kör en klinisk prövning för en ny
elektrokonvulsiv terapi för depression. Jag har folk tar en
depression inventering före 15 veckors behandling och efter 15
vecka behandling. Det kan finnas ett antal mellanliggande faktorer som
kan ändra resultaten. Låt oss namnge och analysera några av dem.
en deltagare får skilsmässa,
en annan får ett nytt jobb,
dramatisk höjning av gaspriserna,
sommarvärmen slutar.
gör ett exempel där historikförvirring resulterar i ett typ i-fel. Gör
upp en där det resulterar i ett typ II-fel.
mognad Confound:
denna confound är ganska lik historien confound. Det förekommer i
experiment som har lång varaktighet. Även utan yttre händelser
förändras människor systematiskt. Barn växer upp, vuxna blir gamla.
Låt oss försöka göra en bedömning av ett års talterapiprogram för
2-åringar som ännu inte pratar. Det är uppenbart att under året kommer
nästan alla barn att se betydande vinster i talförmåga del av
att växa upp.
Instrumentation:
ibland förändras vårt instrument för mätning av DV (och IV) på
subtilt sätt. Vi blir mer skickliga på att utföra våra
– experiment. Till exempel kan IQ-testgivare göra ett bättre jobb med
– instruktionerna. Kan du tänka på andra exempel där det kan finnas en
instrumentationseffekt?
urval:
Detta är ett stort problem i experiment utan slumpmässig tilldelning. En
urvalsförvirring kan uppstå när det finns ett differentiellt urval
kriterier för behandlingstilldelning. Till exempel kommer vi att göra ett
– experiment för att testa effektiviteten av spanking på barns beteende.
föräldrar kan välja om de vill vara i
gruppen utan spanking eller spanking-gruppen. De i gruppen no spanking
lovar att inte smiska sina sexåringar för dåligt beteende; de
i spanking-gruppen lovar att smiska sina sexåringar för dåligt
beteende. Hur kan detta resultera i ett typ i-fel? Vad sägs om ett typ II
fel?
mer subtila exempel:
1. Livslängder för högskoleprofessorer.
2. Simpsons Paradox:
Berkeley graduate School Admissions Data
Bickel, Hammel, O-Connell (1975) vetenskap
totalt
kön | sökande | % antagen |
män | 8442 | 44% |
kvinnor | 4321 | 35% |
men resultaten verkade mer rättvisa på högskolanivå
College | män | kvinnor | ||||
App | Acc | % | App | Acc | % | |
till | 825 | 512 | 62% | 108 | 89 | 82% |
B | 560 | 353 | 63% | 25 | 17 | 68% |
C | 325 | 120 | 37% | 593 | 202 | 34% |
D | 417 | 138 | 33% | 375 | 131 | 35% |
191 | 53 | 28% | 393 | 94 | 24% | |
F | 272 | 16 | 6% | 341 | 24 | 7% |
Övergripande | 2590 | 1192 | 46% | 1835 | 557 | 30% |
Vad Hände?
Högskola | Acceptansgrad | Förhållande M / F |
A | 64% | 7.6 |
B | 63% | 22.4 |
C | 35% | .54 |
D | 34% | 1.11 |
E | 25% | .49 |
F | 6.5% | .80 |
Regression till medelvärdet
Detta är en form av selektionsbias. Antag att vi vill bedöma vår
toddler talterapi genom att jämföra förbättringen av icke-talande 2
åringar med talande tvååringar. Men vi måste vara medvetna om att en del
andel av de icke-talande tvååringarna kommer att komma ikapp till sina
kamrater utan något ingripande. Detta fenomen kallas regression
till medelvärdet. Det är ett problem när man singlar ut en grupp eftersom
de är mycket bra eller dåliga på något sätt och tilldelar dem till en
annan behandling.
dödlighet
människor hoppar av experiment. Detta är normalt främmande. Hur som helst,
ibland kan det ingripa-när bortfallet varierar över
villkor av specifika skäl.
Deltagareffekter (Efterfrågeegenskaper)
människor vill behaga experimenter. Period. De följer ibland
för bra. Tänk på exemplet med sannolikhetsinlärning.
experimenterande effekter I.
experimenter kan subtilt påverka deras resultat. De kanske känner till
– förhållandena och har en andel i resultatet. De kunde subtilt och
omedvetet förmedla differentiella instruktioner,information etc.
Fältövergripande fördomar
till exempel är fältet varmt på att visa biologiska baser för beteende
skillnader sådana könsskillnader. Det är ganska svårt att publicera en
finna att det inte finns några könsskillnader på en uppgift. Detta
representerar en `fältövergripande” experimenteffekt. De dramatiska
instanserna av experimentverkningar är förmodligen i den kommunala
tolkningen av tvetydiga eller motsägelsefulla fynd. Vi kommer att se ett
bra exempel på detta med Goulds omräkning av mätningen av
skallar i 19th Century.