Förstå intern och extern giltighet

Intern och extern validitet är begrepp som återspeglar huruvida resultaten av en studie är pålitliga och meningsfulla. Medan intern validitet avser hur väl en studie genomförs (dess struktur), relaterar extern validitet till hur tillämpliga resultaten är för den verkliga världen.

Vad är intern giltighet?

Intern validitet är i vilken utsträckning en studie fastställer en pålitlig orsak-och-effekt-relation mellan en behandling och ett resultat. Intern validitet återspeglar också att en given studie gör det möjligt att eliminera alternativa förklaringar för ett resultat.

Till exempel, om du genomför ett rökavvänjningsprogram med en grupp individer, hur säker kan du vara på att någon förbättring som ses i behandlingsgruppen beror på den behandling du administrerade?

Intern giltighet beror till stor del på procedurerna för en studie och hur noggrant den utförs.

Intern giltighet är inte ett ”ja eller nej” -typ. Istället överväger vi hur säkra vi kan vara på resultaten av en studie, baserat på om det undviker fällor som kan göra resultaten tveksamma.

Ju mindre chans det är att "förvirra" i en studie, desto högre är den interna giltigheten och desto mer självsäker kan vi vara i resultaten. Confounding avser en situation där andra faktorer spelar in som förvirrar resultatet av en studie. En studie kan till exempel göra oss osäkra på om vi kan lita på att vi har identifierat ovanstående "orsak-och-effekt" -scenario.

Kort sagt kan du bara vara säker på att din studie är internt giltig om du kan utesluta alternativa förklaringar till dina resultat. Som en kort sammanfattning kan du bara anta orsak och verkan när du uppfyller följande tre kriterier i din studie:

Orsaken föregick effekten i termer av tid.
Orsak och verkan varierar tillsammans.
Det finns inga andra troliga förklaringar för detta förhållande som du har observerat.

Faktorer som förbättrar intern giltighet

Om du vill förbättra den interna giltigheten av en studie, vill du överväga aspekter av din forskningsdesign som gör det mer sannolikt att du kan avvisa alternativa hypoteser. Det finns många faktorer som kan förbättra intern giltighet.

Bländande: Deltagare - och ibland forskare - som inte är medvetna om vilket ingripande de får (till exempel genom att använda placebo i en medicinstudie) för att undvika att denna kunskap påverkar deras uppfattningar och beteenden och därmed resultatet av studien
Experimentell manipulation: Manipulera en oberoende variabel i en studie (till exempel ge rökare ett stoppprogram) istället för att bara observera en förening utan att göra något ingrepp (undersöka sambandet mellan motion och rökbeteende)
Slumpmässigt urval: Välja dina deltagare slumpmässigt eller på ett sätt som de är representativa för den befolkning som du vill studera
Randomisering: Tilldela slumpmässigt deltagare till behandlings- och kontrollgrupper och säkerställer att det inte finns någon systematisk förspänning mellan grupper
Studieprotokoll: Följ specifika procedurer för administrering av behandlingen för att inte införa några effekter av till exempel att göra saker annorlunda med en grupp människor mot en annan grupp människor

Faktorer som hotar intern giltighet

Precis som det finns många sätt att säkerställa att en studie är internt giltig, finns det också en lista över potentiella hot mot intern giltighet som bör övervägas när man planerar en studie.

Nötning: Deltagare som hoppar av eller lämnar en studie, vilket innebär att resultaten baseras på ett partiskt urval av endast de personer som inte valde att lämna (och eventuellt alla som har något gemensamt, till exempel högre motivation)
Förvirrande: En situation där förändringar i en resultatvariabel kan anses ha beror på någon tredje variabel som är relaterad till den behandling du administrerade.
Diffusion: Detta avser behandlingen i en studie som sprider sig från behandlingsgruppen till kontrollgruppen genom att grupperna interagerar och pratar med eller observerar varandra. Detta kan också leda till en annan fråga som kallas förbittrad demoralisering, där en kontrollgrupp försöker mindre hårt eftersom de känner sig förbittrade över den grupp de befinner sig i.
Experimenterande partiskhet: En experiment som uppför sig på ett annat sätt med olika grupper i en studie, vilket leder till en inverkan på resultaten av denna studie (och elimineras genom att bli blind)
Historiska händelser: Kan påverka resultatet av studier som inträffar under en tidsperiod, såsom en förändring av den politiska ledaren eller naturkatastrof som påverkar hur deltagarna i studien känner och agerar
Instrumentation: Det är möjligt att "prime" deltagare i en studie på vissa sätt med de åtgärder som du använder, vilket får dem att reagera på ett annat sätt än vad de annars skulle ha gjort.
Mognande: Detta beskriver tidens inverkan som en variabel i en studie. Om en studie äger rum under en tidsperiod där det är möjligt att deltagarna naturligt förändrats på något sätt (blev äldre, blev trötta), kan det vara omöjligt att utesluta om effekterna i studien helt enkelt berodde på effekten av tid.
Statistisk regression: Den naturliga effekten av deltagare i extrema ändar av en åtgärd som faller i en viss riktning bara på grund av tidens gång snarare än effekten av en intervention
Testning: Att testa deltagare upprepade gånger med samma mått påverkar resultatet. Om du ger någon samma test tre gånger, är det inte troligt att de kommer att göra bättre när de lär sig testet eller blir vana vid testprocessen så att de svarar annorlunda?

Vad är extern giltighet?

Extern giltighet avser hur väl resultatet av en studie kan förväntas gälla för andra inställningar. Med andra ord hänvisar denna typ av giltighet till hur generaliserande resultaten är. Gäller till exempel resultaten andra människor, inställningar, situationer och tidsperioder?

Ekologisk validitet, en aspekt av extern validitet, hänvisar till huruvida en undersöknings resultat kan generaliseras till den verkliga världen.

Medan rigorösa forskningsmetoder kan säkerställa intern validitet, kan extern validitet å andra sidan begränsas av dessa metoder.

En annan term som kallas överförbarhet avser extern validitet och hänvisar till en kvalitativ forskningsdesign. Överförbarhet avser huruvida resultat överförs till situationer med liknande egenskaper.

Faktorer som förbättrar extern giltighet

Vad kan du göra för att förbättra din externa validitet?

Tänk på psykologisk realism: Se till att deltagarna upplever händelserna i en studie som en riktig händelse genom att berätta för dem en "omslagshistoria" om syftet med studien. I vissa fall kan deltagare i vissa fall uppträda annorlunda än vad de skulle göra i verkliga livet om de vet vad de kan förvänta sig eller vet vad syftet med studien är.
Gör ombearbetning eller kalibrering: Använd statistiska metoder för att justera för problem relaterade till extern validitet. Till exempel, om en studie hade ojämna grupper för någon egenskap (som ålder) kan omvägning användas.
Återskapa: Genomför studien igen med olika prover eller i olika inställningar för att se om du får samma resultat. När många studier har genomförts, Meta-analys kan också användas för att avgöra om effekten av en oberoende variabel är tillförlitlig (baserat på undersökningen av resultaten från ett stort antal studier om ett ämne).
Prova fältexperiment: Genomföra en studie utanför laboratoriet i en naturlig miljö.
Använd inkludering och uteslutningskriterier: Detta kommer att säkerställa att du tydligt har definierat den population som du studerar i din forskning.

Faktorer som hotar extern giltighet

Extern validitet hotas när en studie inte tar hänsyn till interaktioner mellan variabler i den verkliga världen.

Effekter före och efter test: När för- eller eftertestet på något sätt är relaterat till den effekt som ses i studien, så att orsak-och-effekt-förhållandet försvinner utan dessa extra tester
Exempel på funktioner: När någon del av det specifika provet var ansvarig för effekten (eller delvis ansvarig), vilket ledde till begränsad generalisering av resultaten
Urvalsbias: Betraktas som ett hot mot intern validitet, urvalsbias beskriver skillnader mellan grupper i en studie som kan relatera till den oberoende variabeln (än en gång, något som motivation eller vilja att delta i studien, specifika demografi hos individer är mer benägna att delta i en onlineundersökning).
Situationsfaktorer: Tid på dagen, plats, buller, forskaregenskaper och hur många åtgärder som används kan påverka generaliserbarheten av resultaten.

Intern mot extern giltighet

Intern och extern giltighet är som två sidor av samma mynt. Du kan ha en studie med god intern giltighet, men totalt sett kan det vara irrelevant för den verkliga världen. Å andra sidan kan du genomföra en fältstudie som är mycket relevant för den verkliga världen, men som inte har pålitliga resultat när det gäller att veta vilka variabler som orsakade de resultat du ser.

Likheter

Vad är likheterna mellan intern och extern giltighet? De är båda faktorer som bör beaktas vid utformningen av en studie, och båda har konsekvenser när det gäller om resultaten av en studie har betydelse. Båda är inte "antingen / eller" begrepp, och så kommer du alltid att bestämma i vilken grad din studie utför i termer av båda typerna av giltighet.

Var och en av dessa begrepp rapporteras vanligtvis i en forskningsartikel som publiceras i en vetenskaplig tidskrift. Detta för att andra forskare ska kunna utvärdera studien och fatta beslut om resultaten är användbara och giltiga.

Skillnader

Den väsentliga skillnaden mellan intern och extern validitet är att intern validitet avser strukturen i en studie och dess variabler medan extern validitet är relaterad till hur universella resultaten är. Det finns ytterligare skillnader mellan de två också.

Intern giltighet

Slutsatser är motiverade
Kontrollerar främmande variabler
Eliminerar alternativa förklaringar
Fokusera på noggrannhet och starka forskningsmetoder

Extern validitet

Resultaten kan generaliseras
Resultaten gäller praktiska situationer
Resultaten gäller hela världen
Resultaten kan översättas till ett annat sammanhang

Intern validitet fokuserar på att visa en skillnad som beror på den oberoende variabeln, medan externa validitetsresultat kan översättas till hela världen.

Exempel på giltighet

Ett exempel på en studie med god intern giltighet skulle vara om en forskare antar att användning av en särskild mindfulness-app kommer att minska negativt humör. För att testa denna hypotes tilldelar forskaren slumpmässigt ett urval av deltagare till en av två grupper: de som kommer att använda appen under en definierad period och de som deltar i en kontrolluppgif.webpt.

Forskaren ser till att det inte finns någon systematisk partiskhet i hur deltagarna tilldelas grupperna och blindar också sina forskningsassistenter till de grupper studenterna befinner sig i under experimentet.

Ett strikt studieprotokoll används som beskriver procedurerna för studien. Potentiella förvirrande variabler mäts tillsammans med humör, såsom deltagarnas socioekonomiska status, kön, ålder, bland andra faktorer. Om deltagarna avbryter studien undersöks deras egenskaper för att se till att det inte finns någon systematisk bias när det gäller vem som stannar i studien.

Ett exempel på en studie med god extern validitet skulle vara i exemplet ovan, forskaren såg också till att studien hade extern validitet genom att deltagarna använde appen hemma snarare än i laboratoriet. Forskaren definierar tydligt populationen av intresse och väljer ett representativt urval, och han / hon replikerar studien för olika tekniska enheter.

Ett ord från Verywell

Att ställa in ett experiment så att det har sund intern och extern giltighet innebär att man från början är uppmärksam på faktorer som kan påverka varje aspekt av din forskning.

Det är bäst att spendera extra tid på att utforma en strukturellt sund studie som har långtgående konsekvenser snarare än att snabbt rusa igenom designfasen bara för att upptäcka problem senare. Först när både intern och extern giltighet är hög kan du dra starka slutsatser om dina resultat.

En översikt över den vetenskapliga metoden