Forskningskvalitetsutvärdering i Sverige FOKUS Vetenskapsrådet Hearings maj 2014
Disposition Bakgrund Arbetsprocess Förslag till modell just nu Fortsatt arbete Tidsplan Frågor och diskussion
UoH intäkter för forskning och forskarutbildning 2013 Företag i Sverige Org. utan 4% vinstsyfte inkl. stift. 13% Utl. 2% Övrigt 1% Prestationsbaserat EU 5% Kommuner och landsting 4% ALF-medel 4% Direkta anslag 40% Övriga statliga myndigheter 9% Forskningsråd 18%
Bakgrund Tidigare utredningar Forskningspropositionen 2012 Uppdraget från regeringen mars 2013
UPPDRAG (14 mars 2013): Att i samråd med Forte, Formas och VINNOVA utreda och lämna förslag till en modell för resursfördelning till universitet och högskolor som innefattar kollegial bedömning av forskningens kvalitet och relevans Göra det möjligt att fördela resurser på ett sådant sätt att det premierar kvalitet och prestation i forskning Bedömning av vetenskaplig kvalitet och av forskningens relevans och nytta för samhället Möjliggöra långsiktig planering på lärosätena Bör göras utifrån resp. forskningsområdes förutsättningar och områdesvis vart fjärde till sjätte år Kan innefatta indikatorer Ska redovisas 31 december 2014 Regeringsbeslut I:8 U2013/1700/F, 14 mars 2013
Vetenskapsrådets utgångspunkter Kvalitetsdrivande All bedömning görs av paneler Begriplig så enkel som möjligt Transparent Rättvis Inkludera alla forskningsområden Bred tolkning av relevans och samhällsnytta Balans mellan två principer: Resurseffektiv Informativ
Arbetsprocess Förstudie nov 2012 maj 2013 Löpande dialog och inhämtande av synpunkter inom och utom akademin Referensgrupper Avstämning med andra myndigheter Fyra möten och fyra hearings med universitet och högskolor: 8, 12, 16 maj
Bedömningskomponenter och föreslagen viktning FOKUS Forskningskvalitetsutvärdering i Sverige Övergripande syfte: Kvalitetsdrivande och verka för att forskningen ska bidra till samhällets utveckling Bakgrundsinformation (betygssätts ej) 70 % Vetenskaplig kvalitet Kvalitetsutvecklande faktorer Genomslag utanför akademin All forskning utvärderas vart sjätte år
Utvärderingsenheter 5 vetenskapsområden N T M S H 24 forskningsområden A B C D E F B H I J K L M N O P Q R S T U V W X Bygger på SCB:s och UKÄ:s klassificeringssystem Hänsyn kommer att tas till tvärvetenskap
Panelstruktur Subpaneler Huvudpaneler 24 X X 5 Vetenskaplig kvalitet Kvalitetsutvecklande faktorer Genomslag utanför akademin
Bakgrundsinformation till panelerna FOKUS Forskningskvalitetsutvärdering i Sverige Övergripande syfte: Kvalitetsdrivande och verka för att forskningen ska bidra till samhällets utveckling Bakgrundsinformation (betygssätts ej) 70 % Vetenskaplig kvalitet Kvalitetsutvecklande faktorer Genomslag utanför akademin Egen beskrivning: lärosätets vision och strategi forskningsprofil ledning, styrning och organisation Kvantitativa uppgifter: forskningsfinansiering forskande personal publikationsvolym
Vetenskaplig kvalitet FOKUS Forskningskvalitetsutvärdering i Sverige Övergripande syfte: Kvalitetsdrivande och verka för att forskningen ska bidra till samhällets utveckling Bakgrundsinformation (betygssätts ej) 70 % Vetenskaplig kvalitet Kvalitetsutvecklande faktorer Genomslag utanför akademin Vikt: 70 %, baserat på kvalitet i forskningsproduktionen på nivå forskningsområde. Kriterier: nytänkande och originalitet, betydelse för forskningsområdet, samt vetenskaplig tillförlitlighet ( rigour ). Panelernas omdömen omfattar toppresultat och kvalitet och potential överlag, dvs. spets och genomsnittskvalitet.
Vetenskaplig kvalitet Underlag till panelerna FOKUS Forskningskvalitetsutvärdering i Sverige Övergripande syfte: Kvalitetsdrivande och verka för att forskningen ska bidra till samhällets utveckling Bakgrundsinformation (betygssätts ej) 70 % Vetenskaplig kvalitet Kvalitetsutvecklande faktorer Genomslag utanför akademin Egen beskrivning Publiceringsprofil För att bedöma spets: - sakkunniggranskning (dvs. läsning/motsv.) av verk inom alla forskningsområden, görs av panelerna Alternativ för att bedöma genomsnittskvalitet: - extern sakkunniggranskning - citeringsanalys
Vetenskaplig kvalitet Underlag till panelerna FOKUS Forskningskvalitetsutvärdering i Sverige Övergripande syfte: Kvalitetsdrivande och verka för att forskningen ska bidra till samhällets utveckling Citeringsanalys Bakgrundsinformation (betygssätts ej) 70 % Vetenskaplig kvalitet Kvalitetsutvecklande faktorer Genomslag utanför akademin Underlag för att bedöma genomsnittskvalitet för ett forskningsområde ska kunna variera. Samma kombination av underlag ska gälla rikstäckande för varje forskningsområde. Exempel på kombinationer av underlag: Egen beskriving Exempel på forskningsområden Publikationsprofil Sakkunniggranskning "spets" Sakkunniggranskning övriga verk Matematik Fysik Kemiteknik mm Datavetenskap mm Klinisk medicin Vård- och hälsovet. Psykologi Statsvetenskap mm Historia och arkeologi Språk, litteratur mm
Kvalitetsutvecklande faktorer FOKUS Forskningskvalitetsutvärdering i Sverige Övergripande syfte: Kvalitetsdrivande och verka för att forskningen ska bidra till samhällets utveckling Bakgrundsinformation (betygssätts ej) 70 % Vetenskaplig kvalitet Kvalitetsutvecklande faktorer Genomslag utanför akademin Vikt:, bedömning på nivå vetenskapsområde Kriterier: potential för förnyelse och långsiktighet Kvalitetsutvecklande faktorer: Återväxt av nya forskare inkl. doktorander Internationellt och nationellt samarbete inom akademin Mobilitet Jämställdhet Integrering av forskning och undervisning Tillgång till forskningsinfrastruktur
Kvalitetsutvecklande faktorer Underlag till panelerna FOKUS Forskningskvalitetsutvärdering i Sverige Övergripande syfte: Kvalitetsdrivande och verka för att forskningen ska bidra till samhällets utveckling Bakgrundsinformation (betygssätts ej) 70 % Vetenskaplig kvalitet Kvalitetsutvecklande faktorer Genomslag utanför akademin Kvantitativa uppgifter om de kvalitetsutvecklande faktorerna Korta motiveringar och kommentarer i relation till lärosätets övergripande strategier
Forskningens genomslag utanför akademin FOKUS Forskningskvalitetsutvärdering i Sverige Övergripande syfte: Kvalitetsdrivande och verka för att forskningen ska bidra till samhällets utveckling Bakgrundsinformation (betygssätts ej) 70 % Vetenskaplig kvalitet Kvalitetsutvecklande faktorer Genomslag utanför akademin Definition: en framgångsrik tillämpning av forskning för att åstadkomma sociala, ekonomiska, miljömässiga eller kulturella effekter och nyttor ( impact ) Vikt:, bedömning på nivå vetenskapsområde Kriterier: räckvidd och betydelse
Forskningens genomslag utanför akademin Underlag till panelerna FOKUS Forskningskvalitetsutvärdering i Sverige Övergripande syfte: Kvalitetsdrivande och verka för att forskningen ska bidra till samhällets utveckling Bakgrundsinformation (betygssätts ej) 70 % Vetenskaplig kvalitet Kvalitetsutvecklande faktorer Genomslag utanför akademin Fallstudier, förslagsvis två per 50 FTE Egen beskrivning av strategier och resurser för att arbeta med resultatspridning och samverkan med det omgivande samhället, främjande av forskningsresultatens användning utanför akademin
Insamling av underlag till panelerna Huvudprinciper Minimera arbetsbördan för den enskilda forskaren Använda så mycket befintliga data som möjligt Underlag Befintliga data Personalstatistik FOKUS-specifik rapportering Till exempel beskrivningar, fallstudier och strategier Doktorander och doktorsexamina Ekonomistatistik Publikationer (SwePub, WoS)
Vad utvärderas?
Resultatet av utvärderingen för ett lärosäte
Fortsatt arbete fram till december 2014 Panelernas sammansättning Hur omvandla resultat till resurser? Kostnadsuppskattning inkl. cost-benefit Konsekvensanalyser
Tidsplan 2014 2015 2016 2017 2018 Remiss Förberedelser Genomförande VR lämnar sitt förslag 141231 Uppdrag från regeringen HT 2015 Resultat BP 2018 Ligger till grund för resursfördelning fr.o.m. 2018
Tack! Mer information: www.vr.se Kontakt: evaluation@vr.se
Frågor Synpunkter och frågor på modellen? Har vi valt rätt kvalitetsutvecklande faktorer? Hur säkerställer vi att tvärvetenskap inte missgynnas?