Vetenskaplig vadslagning kan upptäcka forskningsresultat som är för bra för att vara sanna

Forskningsresultat som inte går att återupprepa är problematiskt inom alla forskningsfält. Nu visar forskare vid Handelshögskolan i Stockholm i ett internationellt projekt att vadslagning på vetenskapliga resultat kan vara ett sätt att minska detta problem.

I en unik studie visar forskarna att experter inom psykologi i hög utsträckning har rätt när de slår vad om vilka vetenskapliga resultat som är tillförlitliga. Vadslagningen, som sker i form av en prognosmarknad med riktiga pengar, kan även användas för att visa hur stor sannolikheten är för att resultatet från ett experiment är tillförlitligt eller inte.

− Att endast redovisa forskningsresultat baserat på ett enda experiment räcker ofta inte för att visa på ett samband. För att vara säker på att ett resultat är hållbart måste det upprepas många gånger. Trots detta publiceras ofta enskilda forskningsresultat som inte kan reproduceras i upprepade studier i väl ansedda tidskrifter, säger Anna Dreber, docent i nationalekonomi vid Handelshögskolan.

Anna Dreber har tillsammans med bl.a. Magnus Johannesson och Siri Isaksson vid Handelshögskolan tagit hjälp av vadslagning för att kalkylera i vilken mån en forskningsstudies resultat kan återupprepas i en annan studie.

Deltagarna kunde slå vad om huruvida olika resultat skulle återupprepas i andra studier och fick riktiga pengar som de kunde köpa och sälja aktier med, där aktierna gällde huruvida specifika resultat skulle återupprepas eller inte. Vadslagningen med psykologiexperterna lyckades förutspå 71% av återupprepningen, vilket är betydligt bättre än vad en enkät med samma deltagare lyckades med.

− Välrenommerade psykologiska tidskrifter verkar fokusera på att publicera häpnadsväckande resultat snarare än tillförlitliga resultat, säger Anna Dreber. Och dessa häpnadsväckande resultat håller inte alltid när de testas igen. Samtidigt finns det någon slags samlad visdom bland forskare om vilka resultat som är tillförlitliga, vilket väcker hopp om att det går att minska andelen osanna publicerade resultat.

Forskningsresultaten har publicerats i The Proceedings of the National Academy of Sciences (PNAS) och har finansierats av Jan Wallander och Tom Hedelius Stiftelse, Knut och Alice Wallenbergs Stiftelse samt Riksbankens Jubileumsfond. Andra forskare inom projektet är Thomas Pfeiffer vid New Zealand Institute for Advanced Study, Johan Almenberg vid Sveriges Riksbank, Brad Wilson vid Consensus Point, Yiling Chen vid Harvard University och Brian A. Nosek vid Virginia University.

För mer information, kontakta gärna:
Anna Dreber, docent i nationalekonomi på Handelshögskolan i Stockholm
Anna.Dreber@hhs.se
08-736 90 00