Genomsnittlig normerad citeringsgrad och Top 5% för 20 naturvetenskapliga institutioner vid Stockholms universitet Inledning Per Ahlgren, avd. för e-resurser, Stockholms universitetsbibliotek De resultat som presenteras i denna rapport baseras på artikeln [Colliander, C. & Ahlgren, P. (2011). The effects and their stability of field normalization baseline on relative performance with respect to citation impact: A case study of 20 natural science departments. Journal of Informetrics, 5(1), 101-113]. Fortsättningsvis av rapporten låter vi CA11 stå för denna artikel. Syftet med CA11 är tvådelat: (a) att studera effekterna av jämförelsegrupp, gällande fältnormering, på relativ prestation med avseende på citeringsimpact för 20 naturvetenskapliga institutioner vid Stockholms universitet (SU), och (b) att analysera de erhållna resultatens stabilitet. Observera, dock, att syftet med föreliggande rapport är att belysa de 20 naturvetenskapliga institutionernas impact i relation till följande, inom evaluativ bibliometri inte sällan använda, jämförelsegrupp (en av tre som behandlas i CA11): ISI/Thomson Reuters ämneskategorier. Det är känt att citeringsvolymerna varierar över vetenskapliga fält. Exempelvis är citeringsvolymerna inom teknikvetenskap betydligt mindre än inom medicin. Om enheter tillhörande fält med markant olika citeringsvolymer skall jämföras är någon form fältnormering lämplig. Här använder vi ISI/Thomson Reuters ämneskategorier i normeringssyfte. Ett dokument, tillhörande en given SUinstitution, jämförs med dokument i den ämneskategori, eller kategorier, som dokumentets tidskrift tilldelats. Data och metoder Datakälla för den studie som rapporteras i CA11, och därmed för denna rapport, är Web of Science (WoS). För varje SU-institution ingående i studien skapades en motsvarande sökfråga, och en mängd av bibliografiska poster returnerades och nerladdades i mitten av januari 2010. Sökfrågorna gällde dokument av typerna article, proceedings paper och review, där dokumentens databasår tillhör intervallet 2005-2007. Således gäller att varje returnerad post representerar antingen en artikel, ett proceedingspaper eller en review, och det dokument posten representerar tillfördes WoS under 2005-2007. Det gäller vidare att varje i studien beaktat dokument, inklusive icke SU-dokument, av någon av typerna proceedingspaper och review är publicerat i en tidskrift. Under den första veckan i februari 2010 nerladdades från WoS all data som behövdes för generering av citeringsvärden gällande jämförelsegrupper. Citeringsfönstrets slutpunkt var därmed den första veckan i februari 2010. Efter nerladdningen uppdaterades SU-dokumentens citeringsfrekvenser. Två indikatorer förekommer i rapporten: genomsnittlig normerad citeringsgrad (GNC) och Top-5%. Låt d var ett SU-dokument tillhörande en viss institution, I, där I har n dokument. För GNC divideras d:s citeringsfrekvens med ett förväntat citeringsvärde med avseende på citeringsfrekvenserna för 1
dokumenten i den ämneskategori (eller kategorier) som d:s tidskrift tilldelats, med hänsyn taget till dokumenttyp och databasår. För I genereras n normerade citeringsfrekvenser. Summan av dessa divideras sedan med n, vilket ger medelvärdet över de n normerade citeringsfrekvenserna (I:s värde på indikatorn). För Top-5% divideras I:s andel dokument bland de 5% högst citerade dokumenten, med avseende de ämneskategorier till vilka I:s dokument hör, med en förväntad andel (approximativt 0,05, eller 5%), där hänsyn tas till dokumenttyp och databasår. Ett indikatorvärde större än (mindre än) 1 betyder att I:s andel dokument bland de 5% högst citerade överstiger (understiger) den förväntade andelen. För mer detaljerad information angående data och metoder hänvisas läsaren till CA11. Resultat För varje SU-institution ingående i studien används i detta avsnitt en förkortning som beteckning på institutionen. I Appendix A listas dessa förkortningar, tillsammans med motsvarande institutionsnamn (och antal dokument). Det största värdet på indikatorn GNC har ok (Institutionen för organisk kemi), 2,11 (tabell 1; figur 1). ok:s dokument citeras då i genomsnitt drygt 110% mer än det förväntade citeringsvärdet. I själva verket gäller att dokumenten för 17 av studiens 20 institutioner citeras i genomsnitt mer än förväntat. Detta framgår tydligt av figur 1: 17 punkter ligger ovanför figurens referenslinje, tre nedanför. Tabell 1. GNC för 20 SU-institutioner (naturvetenskapliga fakulteten). Institution GNC Rang ok 2,11 20 itm 1,94 19 se 1,88 18 mk 1,86 17 fys 1,61 16 ink 1,51 15 zoo 1,50 14 ast 1,44 12,5 gmt 1,44 12,5 misu 1,40 11 foos 1,36 10 igg 1,27 9 ak 1,26 7,5 dbb 1,26 7,5 nk 1,20 6 bot 1,13 5 wgi 1,06 4 mf 0,93 3 mat 0,88 2 msf 0,65 1 2
Figur. 1. GNC och institutionsrang. Även ifråga om Top-5% har ok det största värdet, 4,09 (tabell 2; figur 2). Värdet innebär att ok:s andel dokument bland de 5% högst citerade överstiger den förväntade andelen med nära 310%. Mycket höga värden har även mk (Institutionen för miljökemi) och itm (Institutionen för tillämpad miljövetenskap), 3,87 och 3,48, respektive. 16 av studiens 20 institutioner har en andel dokument bland de 5% högst citerade som överstiger den förväntade (figur 2). Tabell 2. Top-5% för 20 SU-institutioner (naturvetenskapliga fakulteten). Institution Top-5% Rang ok 4,09 20 mk 3,87 19 itm 3,48 18 se 2,76 17 misu 2,31 16 gmt 2,22 15 ast 2,19 14 zoo 2,01 13 ak 1,86 11 foos 1,86 11 fys 1,86 11 bot 1,35 9 ink 1,33 8 dbb 1,32 7 igg 1,29 6 nk 1,09 5 wgi 0,87 4 mf 0,81 3 mat 0,42 2 msf 0,00 1 3
Figur 2. Top-5% och institutionsrang. Graden av överensstämmelse mellan de båda rangordningarna av de 20 institutionerna under GNC och Top-5% mättes med Kendall s tau-b. Associationen mellan ordningarna är tämligen hög, 0,74. Detta utfall avspeglas i figur 3. Flera skiften ifråga om rang kan dock observeras. Exempelvis har mk en högre rang (19) än itm (18) för Top-5%, men en lägre rang (17) än itm (19) för GNC (figur 3). Figur 3. Association mellan GNC och Top-5%. 4
Appendix A I tabell 3 ges de 20 institutionernas namn tillsammans med motsvarande förkortningar och antal dokument. Tabell 3. Institutionsnamn med motsvarande förkortningar och antal dokument. Förkortning Institutionsnamn Antal dokument ak Institutionen för analytisk kemi 45 ast Institutionen för astronomi 178 bot Botaniska institutionen 197 dbb Institutionen för biokemi och biofysik 258 foos Institutionen för fysikalisk kemi, oorganisk kemi och strukturkemi 347 fys Fysikum 315 gmt Institutionen för genetik, mikrobiologi och toxikologi 70 igg Institutionen för geologi och geokemi 129 ink Institutionen för naturgeografi och kvartärgeologi 154 itm Institutionen för tillämpad miljövetenskap 210 mat Matematiska institutionen 104 mf Institutionen för molekylärbiologi och funktionsgenomik 51 misu Meteorologiska institutionen 99 mk Institutionen för miljökemi 65 msf Medicinsk strålningsfysik 33 nk Institutionen för neurokemi 76 ok Institutionen för organisk kemi 268 se Systemekologiska institutionen 109 wgi Wenner-Grens institut 123 zoo Zoologiska institutionen 210 5