Note to Epsy 5601 Students: een begrip van het verschil tussen populatie en ecologische validiteit is voldoende. Beheersing van de subcategorieën voor elke cursus is niet nodig.
externe validiteit
(Generalizability)
–Op wie kunnen de resultaten van het onderzoek worden toegepast–
Er zijn twee soorten onderzoekvaliditeit: intern (meer toepasbaar bij experimenteel onderzoek) en extern. Deze paragraaf behandelt de externe geldigheid.,
externe validiteit betreft de mate waarin de resultaten van een onderzoek buiten het monster kunnen worden gegeneraliseerd (toegepast). Met andere woorden, kun je wat je in je studie hebt gevonden toepassen op andere mensen (populatievaliditeit) of instellingen (ecologische validiteit). Een studie van de vijfde klassers in een landelijke school die vond een methode van het onderwijs spelling was superieur aan een andere kan niet van toepassing zijn met de derde klassers (bevolking) in een stedelijke school (ecologische).,
Bedreigingen voor de Externe Validiteit
Bevolking Validiteit de mate waarin de resultaten van een onderzoek kunnen worden gegeneraliseerd van het specifieke voorbeeld dat werd bestudeerd om een grotere groep proefpersonen
- de mate waarin men kan generaliseren van de studie monster tot een gedefinieerde populatie–
Als de steekproef is getrokken uit een toegankelijke bevolking, in plaats van de doelgroep, een veralgemening van de onderzoeksresultaten van de bevolking toegankelijk voor de doelgroep is riskant.
2., de mate waarin personologische variabelen interageren met behandelingseffecten–
als de studie een experiment is, kan het mogelijk zijn dat verschillende resultaten worden gevonden bij studenten van verschillende klassen (een personologische variabele).
ecologische Validiteit de mate waarin de resultaten van een experiment kunnen worden veralgemeend van de reeks door de onderzoeker gecreëerde omgevingscondities naar andere omgevingscondities (settings en conditions).,
- expliciete beschrijving van de experimentele behandeling (niet voldoende beschreven om anderen te repliceren)
als de onderzoeker niet voldoende beschrijft hoe hij of zij een onderzoek heeft uitgevoerd, is het moeilijk om vast te stellen of de resultaten van toepassing zijn op andere instellingen. - interferentie met meerdere behandelingen (katalysatoreffect)
als een onderzoeker meerdere behandelingen zou toepassen, is het moeilijk te bepalen hoe goed elk van de behandelingen afzonderlijk zou werken. Het kan zijn dat alleen de combinatie van de behandelingen effectief is., - Hawthorne effect(aandacht veroorzaakt verschillen)
patiënten presteren anders omdat ze weten dat ze worden onderzocht. “…De externe validiteit van het experiment wordt in gevaar gebracht omdat de bevindingen misschien niet veralgemenen tot een situatie waarin onderzoekers of anderen die bij het onderzoek betrokken waren niet aanwezig zijn” (Gall, Borg, & Gall, 1996, p. 475) - nieuwheid en ontwrichtingseffect (iets anders maakt een verschil)
Een behandeling kan werken omdat het nieuw is en de proefpersonen reageren op de uniciteit, in plaats van de werkelijke behandeling., Het tegenovergestelde kan ook voorkomen, de behandeling kan niet werken omdat het uniek is, maar gezien de tijd voor de proefpersonen aan te passen, het zou kunnen hebben gewerkt. - experimentator effect (het werkt alleen met deze experimentator)
de behandeling zou kunnen hebben gewerkt door de persoon die het implementeert. Gegeven een andere persoon, de behandeling zou helemaal niet werken. - pretest Sensibilisatie (pretest zet het stadium)
Een behandeling kan alleen werken als een pretest wordt gegeven. Omdat ze een pretest hebben genomen, kunnen de proefpersonen gevoeliger zijn voor de behandeling., Als ze geen pretest hadden genomen, zou de behandeling niet hebben gewerkt. - posttest Sensibilisatie (posttest helpt de behandeling “op zijn plaats vallen”)
De posttest kan een leerervaring worden. “De posttest kan er bijvoorbeeld toe leiden dat bepaalde ideeën die tijdens de behandeling worden gepresenteerd ‘op hun plaats vallen’ ” (p. 477). Als de proefpersonen geen posttest hadden ondergaan, zou de behandeling niet hebben gewerkt., - interactie van geschiedenis en behandelingseffect (…voor alles is er een tijd…)
niet alleen moeten onderzoekers voorzichtig zijn met het generaliseren naar een andere populatie, voorzichtigheid moet worden genomen om te generaliseren naar een andere periode. Naarmate de tijd verstrijkt, veranderen de omstandigheden waaronder behandelingen werken. - meting van de afhankelijke variabele (werkt misschien alleen met M/C-tests)
Een behandeling kan alleen duidelijk zijn bij bepaalde soorten metingen., Een lesmethode kan superieure resultaten opleveren wanneer de effectiviteit ervan wordt getest met een essay-test, maar laat geen verschillen zien wanneer de effectiviteit wordt gemeten met een multiple choice-test. - interactie tussen meettijd en behandelingseffect (het duurt even voordat de behandeling begint)
Het kan zijn dat het behandelingseffect pas enkele weken na het einde van de behandeling optreedt. In deze situatie zou een posttest aan het einde van de behandeling geen effect laten zien, maar een posttest een maand later kan een impact laten zien.
Del Siegle, Ph. D.,
Neag School of Education-University of Connecticut