Forskningsfusk och forskningsdata

Den fjärde februari sände Vetenskapens värld ett program där ett inlägg handlade om forskningsfusk: vad händer när en forskare blir anmäld för forskningsfusk? Vilka system finns det för att kontrollera och avslöja eventuellt fusk? Det man kom fram till var att strukturen kring att avslöja forskningsfusk varken skyddar den som anmäler eller den som blir anmäld. Ofta ställs ord mot ord. Det är kanske så att en doktorand eller en ung forskare inte vågar säga ifrån då hen är rädd om sin forskningskarriär eller att forskningsinstitutionen inte vågar ta itu med anmälan då det kan innebära förlorat forskningsanslag och anseende.

När oegentligheter upptäcks kan forskningspublikationen dras tillbaka. Det betyder att resultat från den artikeln inte bör användas i framtida forskning. För det mesta dras artiklar tillbaka p.g.a. plagiering, allvarlig feltolkning av resultat, fabricerade forskningsdata eller självplagiering, d.v.s. när textstycken från egna tidigare publicerade texter används utan hänvisning.

Det tillhör forskningen att forskaren har sin forskningsdata välorganiserad samt att anteckningar, lab- och loggböcker finns sparade för att forskningsresultaten skall gå att duplicera och på det sättet prövas. Programmet drar paralleller till idrotten och de dopningskonroller som idrottare rutinmässigt och oanmällt utsätts för. Brian Deer, som upptäckte fusk i den sk. Wakefield-studien om kopplingen mellan vaccin och autism, menar att forskningsvärlden borde kontrolleras på samma sätt som idrottsvärlden: oanmälda besök för granskning av dokumentation från undersökningar etc. Wakefield studien drogs tillbaka tolv år efter publiceringen.

I Sverige har Vetenskapsrådet börjat med att kräva en datapubliceringsplan i samband med ansökan för forskningsanslag. De vill att forskarna ska beskriva om eller hur forskningsdatan kan göras öppet tillgängligt för att eventuellt användas inom andra forskningsprojekt men även för att öppet tillgängliggöra forskningsdata kan ge ökat antal citeringar. Frågan är om den kan ha ett annat syfte också? T.ex. att i framtiden kunna kontrollera forskningsresultaten mot forskningsdatan.

Fram tills för tre år sedan utreddes forskningsfusk av Vetenskapsrådet. Nu handläggs utredningar istället av en nationell myndighet, Centrala Etikprovningsnämnden. Sedan Centrala Etikprovningsnämnden tog över ansvaret har endast fyra fall av misstänkt forskningsfusk utretts. I Vetenskapens värld menar Madeleine Leijonhufvud, professor i straffrätt vid Stockholms Universitet, att det finns behov av ett helt nytt system för att hantera forskningsfusk, t.ex. att utländska experter kallas in eftersom den svenska forskningsvärlden är liten och alla känner alla. Kretsen som kan utreda forskningsfusk är därmed begränsad.

Det finns inte en databas eller källa för att söka för tillbakadragna artiklar. Däremot finns det ett blogg Retraction Watch där det skrivs om tillbakadragna artiklar. Det finns några studier gjorda kring tillbakadragna forskningspublikationer som t.ex. The persistence of error: a study of retracted article on the Internet and in personal libraries och A Comprehensive Survey of Retracted Articles from the Scholarly Literature. Den första undersöker artiklar som trots tillbakadragning fortfarande finns tillgängliga på webben och den senare undersöker tillbakadragna poster inom flera discipliner, inte endast inom medicin och life sciences.

Det som undersökningarna och även de medverkandena i TV-programmet efterfrågar är ett bättre sätt att medvetandegöra och diskutera tillbakadragen litteratur inom olika discipliner samt att skapa ett nytt oberoende system för att utreda forskningsfusk. Kanske ska vi ta efter Norge? Där kan man få fängelse för forskningsfusk.

Se Vetenskapens värld. Inslaget om forskningsfusk börjar ca 21:30 in i programmet. Fusk är ett problem även inom andra områden inom högskole- och universitetsvärlden. Läs nyheten om Stockholms universitet som lägger ner distanskurser p.g.a. fusk.

Ursprungligen publicerad i Biblioteksbloggen 2013-02-13

Av: Pieta Eklund

Altmetrics

I våras deltog några av oss på Bibliometrics at crossroads där Blaise Cronin var keynote-talare. Han pratade då om framtidens sätt att publicera sig och nämnde då bland annat alternative metrics.

Det pratas ju väldigt mycket om vilken impact en tidskrift har och det har räknats fram på det traditionella sättet: man räknar spridningen av artiklarna genom antalet citeringar. Det kan vara ett bra sätt att filtrera det du bör läsa inom ditt område, men det är kanske inte sättet du får de allra nyaste forskningsresultaten inom ditt område på. Det kan ju ta månader, i värsta fall år, innan en artikel får sin första citering. Altmetrics är ett annat sätt att titta på en publikations impact.

Jag håller inte på med så mycket databassökningar men häromdagen sökte jag i Scopus och vad ser jag där om inte Altmetrics. Altmetric-applikationen i Scopus samlar in data från sociala media (Twitter, Facebook, Pinterest, Google+), bloggar om vetenskap, online dagstidningar, webreferensverktyg  (ZoteroMedeley) när någon nämner något om ett akademiskt paper. De städar i datan och berikar den så att läsare kan se diskussionerna som forskningen har väckt i dess kontext. Altmetrics skriver att de följer ungefär hundratusen diskussioner i veckan med ca tre tusen nya artiklar om dagen.

Altmetrics i Scopus ser ut så här (bilden kommer från Altmetric  for Scopus):

altmetricsMen vad säger den? I den färggranna cirkeln kan du altmetric score för just den artikeln som du tittar på. Det är en kvantitativ mått på den uppmärksamheten som artikeln har fått.  Läs här om hur det kvantitativa måttet har räknats ut.

Färgerna visar vilka källor artikeln har diskuterats i, Sources visar fördelningen mellan källorna där artikeln har fått spridning. I exemplet till vänster har artikeln nämnts i bl.a. Twitter 299 gånger. Under reference managers kan du se bl.a. hur många läsare artikeln har i Mendeley. Om du vill se vilka som har spridit artikeln via Twitter klickar du på see datails eller direkt på 299 tweeters. I fönstret som öppnas kan du se twittrarens geografiska plats. Du kan m.a.o. se varifrån i världen intresset kommer ifrån.

Personligen tycker jag att det verkar intressant att direkt kunna se diskussionen som uppstår runt en artikel samt att även kunna delta i den diskussionen. Det kommer att bli intressant att se vad altmetrics kommer att ha för långsiktig effekt på vetenskaplig publicering.

Läs mer om Altmetrics på deras hemsida och varför inte testa din impact via ImpactStory.

Ursprungligen publicerad i Biblioteksbloggen 2012-09-25

Av: Pieta Eklund

Debatt om bedömning av HS-forskning på DN

Den 15 augusti publicerades en debattartikel om den svenska humanistiska och samhällsvetenskapliga forskningeni Dagens Nyheter. Professor Bo Rothstein (”Svensk samhällsforskning är alldeles för provinsiell”) ifrågasätter forskningens kvalitet och huruvida forskningen lever upp till en internationell kvalitetsstandard. Den här debatten har sin grund i formandet av nästa forskningsproposition och de diskussioner som har dykt upp i beredningsgruppen. En viktig fråga är vad forskning av högkvalitet är och hur ska den mätas. Inom den naturvetenskap och medicin har det länge varit självklart att forskning som blir internationellt erkänt och uppmärksammad är forskning av hög kvalitet.

Han kommer fram till att den forskningen inom samhällsvetenskap och humaniora som bedrivs i Sverige inte håller hög kvalitet. Han menar även att Vetenskapsrådet inte håller en hög kvalitet när rådet delar ut forskningsmedel. Från sin analys av forskare som har fått mer än 3 miljoner från Vetenskapsrådet är det hälften som har så få citeringar i Google Scholar att deras forskning inte kan sägas vara internationellt uppmärksammad.

Det problematiska är att citeringar inte är en tillförlitlig mått på kvalitet på forskningen och det andra är att mycket av den här typen av forskning publiceras i böcker och bokkapitel. Mätning av citeringar till dessa publikationstyper har inte kommit så långt som det har gjort för artiklar i Web of Science, Scopus eller Google Scholar. Också ett problem för samhällsvetenskaplig och humanistisk forskning är att citeringscyklar är väldigt mycket längre. En samhällsvetare kan fortfarande citera en text som har 50 år på nacken, det händer mer sällan inom teknik, naturvetenskap och medicin. Inom dessa områden är en publikation intressant för citeringar kanske endast några månader till några år.  Det är kanske inte heller så bra att endast belöna de som har blivit citerade ofta då det kan resultera i forskning som kanske skulle ha större potential för förnyelse och nydanande forskning än den forskning som genomförs av samma personer som alltid tidigare, därmed inte sagt att gamla rävar inte skulle ha potential för förnyelse och nya perspektiv.

Det finns en kommentar till artikeln som är viktig nämligen att forskningen måste bedömas bredare och av fler än forskarna själva. Jag tycker att man inte heller ska glömma att olika vetenskap har olika traditioner och förutsättningar och därför kanske ska bedömas på sina egna grunder för att vi ska kunna avgöra vad som är högkvalitativ forskning. Man jämför inte äpplen med päron.

Vill du läsa Arne Jarricks (huvudsekreterare för humaniora och samhällsvetenskap, VR) svar så kan du finna den här ”Ofta citerad forskning ingen garanti för kvalitet”.

Ursprungligen publicerad i Biblioteksbloggen 2012-08-16

Av: Pieta Eklund

Resurstilldelning baserat på publikationer

I dagarna är det meningen att alla högskolor och universitet ska skicka in ett remissvar på rapporten Prestationsbaserad resurstilldelning för universitet och högskolor av professorn Anders Flodström. Även många andra myndigheter, forskningsintensiva organisationer och andra intressenter har bjudits in att lämna in synpunkter på förslagen som Flodström har. Det har pågått diskussioner kring rapporten, olika resurstilldelningsmodeller samt för- och nackdelarna med citeringsbaserad resurstilldelning.

Det är inte oproblematiskt att använda citeringar för resurstilldelning av flera anledningar bl.a. en publikation får sina citeringar löpande under flera år, alla vetenskapsområden har olika publiceringstraditioner: naturvetenskapliga områden publicerar många artiklar och inom humanistiska områden har huvudkanalen att publicera sig varit böcker. Ofta är det endast citeringar i internationella vetenskapliga tidskrifter som räknas eller som ger poäng. Även institutionens storlek spelar roll för antalet citeringar, speciellt antalet publikationer som kan citeras. De mindre högskolorna, så som Högskolan i Borås, har inte samma förutsättningar att publicera samma mängd artiklar som de större universiteten. Jämför vi t.ex. antalet vetenskapliga artiklar publicerade av forskare verksamma vid Göteborgs universitet med antalet vetenskapliga artiklar publicerade av forskare verksamma vid Högskolan i Borås under 2011 så har GU 17 gånger fler publikationer som andra kan citera, än vi. För vår del är det även viktigt att observera, om citeringar används som mått, att vi har devisen ”Vetenskap för profession”. Forskare från Högskolan i Borås bör alltså samverka med företag och organisationer i närsamhället. Detta samarbete resulterar i viktiga och intressanta rapporter men de resulterar sällan i publikationer som ger några poäng i resurstilldelningsmodeller, oftast p.g.a. de publiceras i högskolans egen rapportserie, de publiceras på svenska så att deltagare och andra intressenter kan läsa resultaten och inte i internationella vetenskapliga tidskrifter. Läs även Olle Häggströms, ledamot i Vetenskapsrådets ämnesråd för naturvetenskap och teknikvetenskap samt professor i matematisk statistik på Chalmers, mycket läsvärda inlägg om det som han kallar för citeringsspelet.

Malmö högskola har tagit ett beslut om en indikatormodell, som inte är införd än, där både samverkan och open access tas till hänsyn, vilket är mycket intressant. Dessa två faktorer är viktiga att uppmärksamma vid resurstilldelning; samverkan p.g.a. orsaker nämnda i stycket ovan och för att open access-publicering fortfarande är relativt nytt och dessa tidskrifter inte har fått den spridningen än som tidskrifterna med den traditionella prenumerationsbaserade affärsmodellen har haft sedan länge.

Ytterligare en sak att uppmärksamma när vi diskuterar att basera resurstilldelningen på citeringar är att Högskolan i Borås har fått rättigheter att utfärda forskarexamen inom det konstnärliga området. Om en kollektion eller en design är forskningsresultatet, hur ska det citeras?

Ulf Kronman har skrivit ett förslag till en modell för resurstilldelning. Han föreslår att fördelningen baseras på en kombination av data både från Swepub, Vetenskapsrådets bibliometriska system och från Web of Science (WoS) och att tidskrifter och förlag som inte indexeras i WoS delas in i nivåer. Nivåindelningen av tidskrifter och förlag känns igen från den norska modellen. Läs en kort förklaring till den norska modellen av Per Ahlgren (bibliometriker vid Stockholms universitet).

Läs även några av de andras remissvar på rapporten:

1,  2,  3,  4,  5

Ursprungligen publicerad i Biblioteksbloggen 2012-03-13

Av: Pieta Eklund