Hopp til innholdet

Kapittel 13 · Statistikk · 13.1

Statistikkens formål, grunnbegreper og data

Før du åpner en programvare, velger en test eller regner ut et eneste tall, er det ett spørsmål som styrer alt det andre: hva vil du oppnå? En statistisk analyse kan tjene noen få, ganske ulike formål – å beskrive et datasett, å sammenligne grupper eller betingelser, å forklare eller predikere en sammenheng, eller å avgjøre om to målemetoder samsvarer. Hvilket av disse du er ute etter, avgjør hvordan du bør se på dataene og hvilken metode som passer. Å hoppe rett på en test uten å ha stilt spørsmålet er den vanligste måten å ende opp med et teknisk korrekt svar på feil spørsmål. Denne seksjonen legger grunnlaget: hva statistikk kan og ikke kan svare på, hvorfor variasjon i det hele tatt gjør faget nødvendig, og hvordan vi setter navn på det vi måler.

Hva en analyse kan – og ikke kan – svare på

Statistikk kan fortelle deg at to ting varierer sammen: at lengre øyne har en tendens til å være mer nærsynte, at tykkere hornhinner går sammen med høyere avlest trykk. Den kan tallfeste hvor sterk en slik sammenheng er og hvor godt den holder utenfor akkurat de øynene du målte. Det den ikke kan gjøre alene, er å fortelle deg hvorfor sammenhengen er der.

Dette er kapittelets viktigste enkeltpoeng, og det er verdt å slå fast med en gang: korrelasjon er ikke det samme som årsak. At to variabler følges ad, betyr ikke at den ene forårsaker den andre. En tredje, bakenforliggende variabel kan drive dem begge; retningen kan være motsatt av det du antar; eller sammenhengen kan være ren tilfeldighet i akkurat ditt utvalg. Vi kommer tilbake til denne tråden gjennom hele kapittelet, og den kritiske lesingen av forskning i den siste seksjonen bygger i stor grad på den. Foreløpig er det nok å bære med seg advarselen: en statistisk sammenheng er en observasjon, ikke en forklaring.

Hvorfor variasjon gjør statistikk nødvendig

Statistikk trengs fordi kliniske data varierer. Uten variasjon ville faget vært overflødig.

Det er nyttig å skille to kilder til denne variasjonen. Den biologiske variasjonen er ekte forskjeller mellom enhetene: øyne er virkelig ulikt lange, trykk er virkelig ulike fra pasient til pasient. Den måletekniske variasjonen er usikkerheten i selve målingen: gjentar du den samme målingen på det samme øyet, får du ikke nøyaktig samme tall hver gang. Begge er reelle, og en stor del av dette kapittelet handler om å skille dem fra hverandre – den måletekniske delen får sin egen seksjon om måling og usikkerhet.

Skillet lar seg skjerpe med et begrepspar. Et deterministisk system gir nøyaktig samme resultat hver gang det gis samme utgangspunkt; et stokastisk system gir resultater som spriker, selv med tilsynelatende likt utgangspunkt. Husk fra kapittelet om geometrisk optikk at linseformelen 1s′=1s+1f gir én bestemt bildeavstand s′ for en gitt objektavstand og brennvidde – regner du den ut ti ganger, får du det samme svaret ti ganger. Det er deterministisk. Måler du derimot trykket i det samme øyet ti ganger etter hverandre, får du ti tall som ligger nær hverandre, men ikke er identiske. Det er stokastisk. Nettopp fordi kliniske størrelser oppfører seg stokastisk, trenger vi et apparat for å beskrive og resonnere om det som varierer – og det apparatet er sannsynlighet og statistikk.

Populasjon, utvalg, enhet og variabel

Fire begreper går igjen i alt som følger, og det lønner seg å ha dem klart fra hverandre.

En populasjon er hele mengden av enheter du vil uttale deg om – for eksempel alle nærsynte studenter, eller alle øyne som skal trykkmåles i en klinikk. Antallet enheter i populasjonen skrives N. Et utvalg er de enhetene du faktisk har observert – de du rakk å måle. Antallet i utvalget skrives n, og er nesten alltid mye mindre enn N. En enhet (eller analyseenhet) er det som måles: en pasient, et øye, en enkelt måling. Hva enheten er, må avgjøres bevisst – måler du begge øynene til hver pasient, er øyet og pasienten ikke det samme, og forskjellen får følger vi kommer tilbake til. En variabel er en egenskap som varierer mellom enhetene: trykket, alderen, kjønnet, synsstyrken.

Poenget med å måle et utvalg er nesten aldri utvalget i seg selv, men populasjonen bak. Du regner ut noen tall fra utvalget – gjennomsnittet x¯, standardavviket s, størrelsen n – og bruker dem til å slutte deg til de tilsvarende, ukjente tallene for hele populasjonen: gjennomsnittet μ, standardavviket σ. Denne slutningen fra det målte til det du vil vite, kalles statistisk inferens, og er selve kjernen i faget. Tallene som beskriver et utvalg, kalles statistikker; de sanne tallene som beskriver populasjonen, kalles parametere. De formelle definisjonene av x¯, s, μ og σ kommer i neste seksjon; her holder det å se hvilken vei slutningen går.

Trekkingen går fra populasjon til utvalg, den statistiske inferensen motsatt vei – fra x̄ og s til μ og σ.
Figur 13.1: Trekkingen går fra populasjon til utvalg, den statistiske inferensen motsatt vei – fra x¯ og s til μ og σ.

Variabeltyper og målenivå

Ikke alle variabler er av samme slag, og typen avgjør hva du har lov til å gjøre med tallene. Det grunnleggende skillet går mellom kvalitative og kvantitative variabler.

En kvalitativ (eller kategorisk) variabel plasserer enheten i en kategori uten at kategoriene er tall. Er kategoriene bare navn uten noen naturlig rekkefølge – kjønn, øye (høyre/venstre), kontaktlinsebruker (ja/nei) – kaller vi variabelen nominal. Har kategoriene en rangordning, men uten fast avstand mellom trinnene – tørrøyesymptomer gradert som ingen, milde eller alvorlige – kaller vi den ordinal. Du vet at «alvorlig» er verre enn «mild», men ikke at spranget mellom dem er like stort som mellom «ingen» og «mild».

En kvantitativ variabel er et tall det gir mening å regne med. Er den et telletall som bare kan ta atskilte verdier – antall bokstaver lest på synstavlen, antall øyne med et funn – er den diskret. Kan den i prinsippet ta en hvilken som helst verdi i et intervall – aksiallengde, trykk, hornhinnetykkelse, sfærisk ekvivalent – er den kontinuerlig. At et instrument bare viser to desimaler, gjør ikke størrelsen diskret; det er den underliggende størrelsen som teller.

Bak dette ligger en finere inndeling i fire målenivåer, tradisjonelt kalt nominal-, ordinal-, intervall- og forholdsnivå. De to første svarer til de kategoriske typene over. På intervallnivå er avstander meningsfulle, men nullpunktet er valgt, ikke absolutt – temperatur i celsius er det klassiske eksempelet: forskjellen mellom 20 °C og 30 °C er den samme som mellom 30 °C og 40 °C, men 40 °C er ikke «dobbelt så varmt» som 20 °C. På forholdsnivå finnes et ekte nullpunkt, slik at forholdstall gir mening: aksiallengde, trykk og de fleste fysiske størrelsene ligger her – et øye på 24 mm er virkelig dobbelt så langt som et tenkt øye på 12 mm. Skillet mellom intervall og forhold er sjelden avgjørende i praksis; skillet mellom kategorisk, ordinal og kontinuerlig er det ofte, fordi det bestemmer hvilke sentralmål og hvilke analyser som er tillatt.

Synsstyrke er et lærerikt grensetilfelle som er verdt et eget avsnitt. Husk fra kapittelet om eksponentialfunksjoner og logaritmer at LogMAR-verdien er tierlogaritmen til den minste oppløsningsvinkelen. Målestandarden for synsstyrke anbefaler at optotypene lages i trinn med konstant forhold 1:100.1 – altså nøyaktig 0.10 LogMAR fra linje til linje – og at hver linje har minst fem optotyper [7, avsn. V.1 og VII.1]. Med fem bokstaver på linja blir hver enkelt bokstav verdt 0.10/5=0.02 LogMAR. Det gjør LogMAR til en jevn, lineær skala der avstander er meningsfulle – i praksis en intervallskala. At skalaen også tar negative verdier, viser at nullpunktet er valgt (6/6), ikke absolutt. Snellen-brøkene (6/6, 6/12, 6/60) rangerer riktig – de forteller hvem som ser best – men de er ikke lineære i LogMAR, og på den tradisjonelle tavlen er linjetrinnene dessuten ujevne. Regn etter på linjerekken 6/5, 6/6, 6/9, 6/12, 6/18, 6/24, 6/36, 6/60: trinnet fra 6/a til 6/b er log10⁡(b/6)−log10⁡(a/6)=log10⁡(b/a), så det minste trinnet er log10⁡(6/5)≈0.08 LogMAR og det største log10⁡(60/36)≈0.22 – nesten tre ganger så stort. Konsekvensen er konkret og viktig: du kan regne et meningsfullt gjennomsnitt av LogMAR-verdier, men ikke av Snellen-desimalvisus. Å gjøre det siste gir systematisk feil svar, som et eksempel nedenfor viser i tall.

Paret og uparet data

En siste skjelning i denne seksjonen handler ikke om den enkelte variabelen, men om hvordan to sett med målinger henger sammen – og den avgjør senere hvilken analyse som er den rette.

Data er paret når to (eller flere) målinger naturlig hører sammen på den samme enheten. Høyre og venstre øye på samme pasient, trykket før og etter en behandling, den samme størrelsen målt med to instrumenter på det samme øyet, to gjentak av den samme målingen – alt dette er paret. Målingene kommer i sammenhørende par, og det ville være å kaste bort informasjon å behandle dem som om de var uavhengige.

Data er uparet når de kommer fra uavhengige grupper av ulike enheter. Trykket hos en gruppe nærsynte mot trykket hos en annen gruppe langsynte, hornhinnetykkelse hos kontaktlinsebrukere mot ikke-brukere – her er det ingen naturlig kobling mellom en bestemt enhet i den ene gruppen og en bestemt enhet i den andre. Om et datasett er paret eller uparet, er ikke en smakssak; det er en egenskap ved hvordan dataene ble til, og seksjonen om å velge analyse kommer til å bygge direkte på skillet.

Et forvarsel om studiedesign

Hvor mye du kan slutte fra et utvalg til en populasjon, avhenger av hvordan utvalget ble til. Et representativt utvalg – helst trukket tilfeldig fra populasjonen – gjør at det du finner, kan generaliseres. Et skjevt utvalg gjør at selv en aldri så nøyaktig analyse svarer på feil populasjon.

To begreper som seksjonen om kritisk lesing tar grundig for seg, er verdt å nevne allerede nå. Skjevhet (bias) er en systematisk feil i hvordan enhetene velges ut eller måles – ikke tilfeldig sprik, men en konsekvent forskyvning i én retning. Konfundering oppstår når en tredje variabel henger sammen med både det du tror er årsaken og det du måler som virkning, og dermed forvrenger sammenhengen mellom dem. Et klinisk eksempel du kjenner igjen: hornhinnetykkelsen påvirker hvor høyt trykk et applanasjonstonometer leser av. Er hornhinnen tykkere enn vanlig, leser det systematisk for høyt, og er den tynnere, for lavt; hornhinneødem – væskeansamling i hornhinnen – er unntaket, for det øker tykkelsen og gir likevel for lav avlesning [180, tab. II.1.2 og avsn. II.1.1.2]. Skal du sammenligne trykket mellom to grupper som også skiller seg i hornhinnetykkelse, er tykkelsen en konfunder du må ta høyde for. Grep som randomisering (tilfeldig fordeling) og blinding (at pasient eller undersøker ikke vet hvilken gruppe som er hvilken) finnes nettopp for å holde skjevhet og konfundering i sjakk. Vi lar det bli med forvarselet her; poenget er at spørsmålet «hvor kom dataene fra?» er like viktig som «hvilken test skal jeg bruke?».

Å avsløre variabeltyper i R

Gjennom kapittelet vises analysene i R. En naturlig første kommando på et nytt datasett er str(), som lister hver variabel med typen sin: num for tall, chr for tekst (kategorisk) og Factor for en kategorisk variabel med eksplisitt oppramsede nivåer.

R-kode

# str() viser typen til hver variabel i dataramma
str(klinikk[, c("SER", "IOP", "kjonn", "myopi")])
#> 'data.frame': 71 obs. of 4 variables:
#> $ SER : num -5.75 -7.75 -10.125 -10.75 -0.125 ...
#> $ IOP : num 16 11.3 15 16 11 11.3 15 10 16 17 ...
#> $ kjonn: chr "M" "M" "K" "K" ...
#> $ myopi: Factor w/ 2 levels "ja","nei": 1 1 1 1 2 1 1 1 1 1 ...
levels(klinikk$myopi) # de kategoriske nivaaene
#> [1] "ja" "nei"

SER og IOP leses som kontinuerlige tall (num), kjønn som ren tekst, og myopistatus (SER ≤−0.50 D) som en kategorisk variabel med de to nivåene «ja» og «nei» – akkurat den inndelingen dette avsnittet handler om, lest rett ut av dataene. Datasettet selv innføres i neste seksjon.

Eksempel 13.1.1

Ved en trykkmåling registreres det intraokulære trykket til 15.5 mmHg. Hvilken variabeltype og hvilket målenivå har variabelen «intraokulært trykk»?

Løsning: Vi anvender definisjonene direkte. Trykket er et tall det gir mening å regne med, og det kan i prinsippet ta en hvilken som helst verdi i et intervall – avlesningen 15.5 mmHg kunne like gjerne vært 15.6 mmHg. Variabelen er altså kvantitativ og kontinuerlig. Trykk har dessuten et ekte nullpunkt, så forholdstall gir mening; den ligger derfor på forholdsnivå. Intraokulært trykk er en kontinuerlig kvantitativ variabel på forholdsnivå.

Eksempel 13.1.2

Klassifiser hver av disse fire variablene fra en klinisk undersøkelse etter type (kategorisk, ordinal, diskret eller kontinuerlig) og oppgi målenivået: sfærisk ekvivalent (D), kjønn, antall bokstaver lest på synstavlen og tørrøyesymptomer gradert som ingen/milde/alvorlige.

Løsning: Vi bruker den samme inndelingen på hver variabel etter tur.

  • •

    Sfærisk ekvivalent: en underliggende størrelse som i prinsippet kan ta en hvilken som helst verdi i et intervall, men som rapporteres avrundet til utstyrets trinn på 0.25 D – kontinuerlig kvantitativ, forholdsnivå (i praksis behandlet som intervall/forhold).

  • •

    Kjønn: en kategori uten rangordning – kategorisk, nominalnivå.

  • •

    Antall bokstaver lest: et telletall – diskret kvantitativ, forholdsnivå.

  • •

    Tørrøyesymptomer (ingen/milde/alvorlige): rangordnede kategorier uten fast avstand – ordinal.

Fasit: kontinuerlig (forholdsnivå); kategorisk (nominalnivå); diskret (forholdsnivå); ordinal (ordinalnivå).

Eksempel 13.1.3

To øyne har synsstyrke 6/6 og 6/24. En kollega vil oppgi et «gjennomsnittssyn» og midler de to desimalvisusene 1.00 og 0.25. Regn ut gjennomsnittet både på hennes måte og ved å midle LogMAR-verdiene, oversett begge tilbake til Snellen, og avgjør hvilken metode som er riktig.

Løsning: LogMAR-verdien er −log av desimalvisus (kapittelet om eksponentialfunksjoner og logaritmer). Vi regner begge veier og sammenligner.

Riktig vei – midle på den lineære LogMAR-skalaen:

LogMAR⁢(6/6) =−log⁡1.00=0.00,
LogMAR⁢(6/24) =−log⁡0.25≈0.602,
gjennomsnitt =0.00+0.6022≈0.301.

LogMAR 0.301 svarer til desimalvisus 10−0.301≈0.50, altså 6/12.

Kollegaens vei – midle desimalvisus først:

1.00+0.252=0.625⇒LogMAR=−log⁡0.625≈0.204,

som ligger mellom 6/9 og 6/12, altså et sted rundt 6/9.6.

De to metodene spriker med nesten en hel linje. Riktig svar er 6/12: LogMAR er en lineær skala der aritmetisk gjennomsnitt er meningsfullt, mens desimalvisus er en logaritmisk omregning av den, så et aritmetisk gjennomsnitt der midler feil størrelse. Legg merke til hva LogMAR-veien egentlig gjorde: 10−0.301=0.50 er nettopp det geometriske gjennomsnittet 1.00⋅0.25 av de to desimalverdiene. Kollegaens aritmetiske middel er derfor systematisk for optimistisk – og på en tradisjonell Snellen-tavle kommer de ujevne linjetrinnene i tillegg.

Eksempel 13.1.4

Et kvalitetsprosjekt vil undersøke om to berøringsfrie tonometre – instrumenter som leser trykket av hornhinnens svar på en luftstråle, uten å røre øyet – er enige med Goldmann-applanasjon. Hver av 71 pasienter får det samme høyre øyet målt med alle tre instrumentene samme dag. For dette prosjektet: er utfallet deterministisk eller stokastisk, er instrumentenes målinger paret eller uparet, og hva er populasjon, utvalg og analyseenhet?

Løsning: Vi går gjennom begrepene fra seksjonen ett for ett og knytter dem til oppsettet. Utfallet er stokastisk: trykket i et øye er ikke et tall instrumentet leser feilfritt av – gjentar du målingen, spriker tallene, og tre instrumenter på det samme øyet gir tre tall som ikke er like. Målingene er parede: alle tre tallene stammer fra det samme øyet hos den samme pasienten, så hver avlesning hører sammen med de to andre på samme rad. Populasjonen er øynene man vil kunne uttale seg om – øyne som skal trykkmåles i klinikken, eller snevrere den pasientgruppen prosjektet rekrutterer fra; utvalget er de 71 målte pasientene; analyseenheten er det enkelte høyre øyet, ett per pasient, så radene er uavhengige av hverandre. Kort oppsummert: stokastisk, paret; populasjon = aktuelle øyne, utvalg = de 71 pasientene, enhet = det enkelte høyre øyet. Variasjonen her er dessuten både biologisk (ekte trykkforskjeller mellom øyne) og måleteknisk (usikkerheten i hvert instrument, og forskjellen mellom dem) – nettopp skillet dette prosjektet forsøker å tallfeste. Oppsettet er det samme som bak klinikkdatasettet som innføres i neste seksjon.

Oppgaver

Oppgave 13.1.1

Klassifiser hver av følgende variabler etter type (kategorisk, ordinal, diskret eller kontinuerlig) og oppgi målenivået (nominal, ordinal, intervall eller forhold):

  1. a)

    kjønn,

  2. b)

    sfærisk ekvivalent i dioptrier,

  3. c)

    kontaktlinsebruker (ja/nei),

  4. d)

    antall bokstaver lest på synstavlen,

  5. e)

    tørrøyesymptomer gradert som ingen, milde eller alvorlige.

Løsningsforslag

Oppgave 13.1.1: Vi anvender inndelingen fra seksjonen på hver variabel etter tur.

  1. a)

    Kjønn er en kategori uten rangordning: kategorisk, nominalnivå.

  2. b)

    Sfærisk ekvivalent er en underliggende størrelse som i prinsippet kan ta en hvilken som helst verdi i et intervall, selv om den rapporteres i 0.25 D-trinn: kontinuerlig kvantitativ, forholdsnivå.

  3. c)

    Kontaktlinsebruker (ja/nei) er to kategorier uten rekkefølge: kategorisk, nominalnivå.

  4. d)

    Antall bokstaver lest er et telletall med ekte nullpunkt: diskret kvantitativ, forholdsnivå.

  5. e)

    Tørrøyesymptomer (ingen/milde/alvorlige) er rangordnede kategorier uten fast avstand mellom trinnene: ordinal, ordinalnivå.

Oppgave 13.1.2

Avgjør for hvert tilfelle om utfallet er deterministisk eller stokastisk, og begrunn kort:

  1. a)

    du regner ut brennvidden til en linse med gitt styrke,

  2. b)

    du måler trykket på det samme øyet fem ganger etter hverandre,

  3. c)

    du regner ut effektiv styrke ved en gitt vertex-avstand,

  4. d)

    du måler aksiallengden på 30 forskjellige pasienter.

Løsningsforslag

Oppgave 13.1.2: Testen er den samme i alle fire tilfellene: gir samme utgangspunkt nøyaktig samme resultat hver gang?

  1. a)

    En beregning av brennvidden fra en gitt styrke gir samme tall hver gang den utføres – deterministisk.

  2. b)

    Fem trykkmålinger på det samme øyet gir fem tall som ligger nær hverandre, men ikke er identiske; den måletekniske variasjonen gjør utfallet stokastisk.

  3. c)

    Effektiv styrke ved en gitt vertex-avstand er en ren formelberegning med ett bestemt svar – deterministisk.

  4. d)

    Aksiallengden hos 30 forskjellige pasienter varierer både biologisk (øyne er virkelig ulikt lange) og måleteknisk – stokastisk.

Oppgave 13.1.3

En forsker vil undersøke om aksiallengden er større hos nærsynte enn hos ikke-nærsynte studenter. Hun måler høyre øye hos 74 studenter. Identifiser i denne studien populasjonen, utvalget, analyseenheten, minst to variabler med hver sin type og minst én kilde til variasjon i dataene.

Løsningsforslag

Oppgave 13.1.3: Vi går gjennom begrepene fra seksjonen ett for ett. Populasjonen er alle studentene forskeren vil uttale seg om – nærsynte og ikke-nærsynte studenter, ikke bare de målte. Utvalget er de 74 studentene som faktisk ble målt (n=74). Analyseenheten er høyre øye hos hver student; siden bare ett øye måles per student, faller øye og student her sammen som enhet, og de 74 radene er uavhengige – samme grep som biometridatasettet i kapittelet bruker. To variabler: aksiallengden (i mm) er en kontinuerlig kvantitativ variabel på forholdsnivå, og refraksjonsstatus (nærsynt/ikke-nærsynt) er en kategorisk variabel på nominalnivå. Kilder til variasjon: biologisk variasjon (ekte forskjeller i aksiallengde mellom øyne) og måleteknisk variasjon (gjentatte målinger på samme øye gir ikke identiske tall); én av dem er nok som svar. Populasjon = (nærsynte og ikke-nærsynte) studenter; utvalg = de 74 målte studentene; enhet = høyre øye per student; variabler = aksiallengde (kontinuerlig, forholdsnivå) og refraksjonsstatus (kategorisk, nominalnivå); variasjon = biologisk og/eller måleteknisk.

Oppgave 13.1.4

Avgjør for hver sammenligning om dataene er paret eller uparet, og begrunn:

  1. a)

    trykket i høyre mot venstre øye hos de samme 20 pasientene,

  2. b)

    hornhinnetykkelse hos kontaktlinsebrukere mot ikke-brukere,

  3. c)

    trykket målt med to ulike instrumenter på de samme øynene,

  4. d)

    aksiallengde hos nærsynte mot ikke-nærsynte,

  5. e)

    synsstyrke før mot etter en kontaktlinsetilpasning på det samme øyet.

Løsningsforslag

Oppgave 13.1.4: Testen fra seksjonen: hører målingene naturlig sammen på den samme enheten, eller kommer de fra uavhengige grupper av ulike enheter?

  1. a)

    Høyre og venstre øye hos den samme pasienten hører sammen i par – paret.

  2. b)

    Kontaktlinsebrukere og ikke-brukere er to uavhengige grupper av ulike personer, uten kobling mellom en bestemt bruker og en bestemt ikke-bruker – uparet.

  3. c)

    To instrumenter på de samme øynene gir to tall fra samme enhet, så hver måling hører sammen med sin makker – paret.

  4. d)

    Nærsynte og ikke-nærsynte er ulike enheter i uavhengige grupper – uparet.

  5. e)

    Før og etter tilpasningen måles det samme øyet, så de to tallene hører sammen – paret.

Oppgave 13.1.5

En avisartikkel melder at «kontaktlinsebrukere har mer tørre øyne enn ikke-brukere», basert på en enkelt klinikkundersøkelse. Vurder påstanden kritisk: foreslå minst én konfunderende variabel og minst én mulig skjevhet som kunne forklare sammenhengen uten at linsebruk er årsaken, og skisser ett konkret designgrep som ville styrket en årsakskonklusjon. Bruk gjennomgangstråden om at korrelasjon ikke er det samme som årsak.

Løsningsforslag

Oppgave 13.1.5: Åpen oppgave; ingen entydig fasit. Et godt svar navngir en konkret konfunder som henger sammen med både linsebruk og tørre øyne (for eksempel alder eller skjermbruk), en konkret skjevhet i klinikkutvalget (de som oppsøker klinikken, er ikke et tilfeldig utvalg av befolkningen), og et designgrep som randomisering eller oppfølging over tid – og bruker eksplisitt at en observert samvariasjon alene ikke skiller mellom disse forklaringene og en årsakssammenheng.

Alle løsningsforslag til kapittel 13