NIFU-notat om målefeil: Feilrapportering en betydelig større feilkilde enn feil som skyldes seleksjon
I et nytt notat undersøker NIFU graden av målefeil i Kandidatundersøkelsen og betydningen av henholdsvis seleksjon og feilrapportering for den totale målefeilen.
Kandidatundersøkelsen er en regelmessig spørreundersøkelse til nyutdannede mastere fra universiteter og høgskoler i Norge, som gjennomføres av NIFU på oppdrag fra Direktorat for høyere utdanning og kompetanse (HK-dir).
– Høy kvalitet i dataene er avgjørende, ettersom Kandidatundersøkelsen utgjør et viktig bidrag til kunnskapsgrunnlaget som informerer utdanningspolitikken i Norge, forklarer forsker ved NIFU Jannike Gottschalk Ballo.
Synkende svarprosent i spørreundersøkelser generelt (både i Norge og internasjonalt) har ført til bekymring for synkende datakvalitet. For eksempel ved at data som samles inn ikke representerer virkeligheten for den spesifikke gruppen undersøkelsen er ment å belyse.
Som datagrunnlag for analysene har NIFUs forskere brukt Kandidatundersøkelsens tidsseriedata i perioden 2015-2023, registerdata for samme populasjon og tidsperiode, samt kobling mellom besvarelsene i 2021-undersøkelsen og registerdata i samme år.
Analysene viser at feilrapportering utgjør en betydelig større feilkilde enn feil som skyldes seleksjon.
– Vi finner at seleksjonsskjevheten generelt i Kandidatundersøkelsen er lav i de variablene vi har undersøkt. Sosial bakgrunn og fagfelt har liten eller ingen betydning for seleksjonen, mens kvinner og eldre kandidater har noe større svartilbøyelighet enn menn og yngre kandidater, sier Ballo.
– Når vi undersøker variabelen lønn finner vi imidlertid en betydelig grad av feilrapportering.
Funnene peker på at svartilbøyelighet og særlig svarprosent i seg selv ikke er avgjørende for datakvalitet. Dette er i tråd med tidligere forskning. Resultatene viser at det til dels er en sammenheng mellom faktorene som predikerer svartilbøyelighet, og de som predikerer feilrapportering: respondenter med lav svartilbøyelighet feilrapporterer oftere.
«Implikasjoner av skjevheter i Kandidatundersøkelsen» (NIFU Arbeidsnotat 2024:13)
For mer informasjon, kontakt:
Jannike Gottschalk Ballo, forsker 2
416 72 039
jannike.gottschalk.ballo@nifu.no