Sambanden som var för bra för att vara sanna

Sammanfattning på svenska

Metodkritisk artikel som granskar varför studier av känslor, personlighet och social kognition med magnetkamera ofta redovisar mycket höga samband mellan hjärnaktivitet och psykologiska mått, ibland över 0,8. Författarna visar att sådana samband är högre än vad som är möjligt givet den begränsade tillförlitligheten hos både hjärnmåtten och de psykologiska måtten. De kontaktade därefter författarna till 55 artiklar för att få veta hur sambanden räknats fram. Mer än hälften bekräftade att de först beräknat samband för varje enskild mätpunkt i hjärnan, sedan valt ut de punkter som översteg ett tröskelvärde och slutligen redovisat medelvärdet av just dessa. Författarna visar hur ett sådant beroende urval blåser upp sambanden och ändå ger diagram som ser övertygande ut. De uppmanar till omräkning med metoder som inte har detta fel och menar att problemet är utbrett långt utanför just detta forskningsområde.

Viktigaste insikterna

• 01Många redovisade samband var högre än vad mätmetodernas tillförlitlighet över huvud taget tillåter
• 02Felet uppstår när man först väljer ut de mätpunkter som korrelerar starkast och sedan redovisar medelvärdet av dem
• 03Mer än hälften av de tillfrågade forskarna bekräftade att de använt just detta tillvägagångssätt
• 04Diagrammen ser övertygande ut trots att urvalet är beroende, vilket gör felet svårt att upptäcka utifrån
• 05Författarna menar att problemet finns i hjärnavbildningsforskning av många slag och inte bara inom detta område