Forskningspropositionen öppnar för fler frågor om prestationsbaserad resurstilldelning

Så var det klart: Ingen omfördelning baserad på prestation (publicering och citering) för 2017 men däremot avisering om ett införande (när?) av en modell för samhällsimpact som VINNOVA tagit fram. Sedan en ny utredning som skall ta fram en modell för resurstilldelning som skall presenteras i budgetpropositionen 2018.

Cat picture borrowed from https://twitter.com/AcademiaObscura

Den aviserade ökningen av miniminivån från 8k till 12k (SEK) per student som i DN-debattartikeln endast angavs gälla högskolorna var förstås en otydlig formulering och innebär även en generell ökning även för universiteten. Synd, för annars hade det kunnat leda till att det faktiskt blev en reell ”utsmetning” av anslagen som de stora jättarna ofta beklagat sig så över, men som knappast skett i praktiken. Under 2009-2016 har endast 10 % av anslagen tilldelats till högskolorna och de nya universiteten (s.56).

Det hela är lite förvirrande, särskilt som det innebär att ryckigheten i hur resursfördelningen skall gå till fortsätter. Till exempel förklaras förra årets modell där alla lärosäten fick minst 5 miljoner, oavsett hur de presterade i kvalitetssnurran med att det skett vid flera tillfällen och att det hade som syfte att fler lärosäten skulle få ”möjligheter att utveckla sin forskning och utbildning på forskarnivå” (s.57). Men var det inte konstigt att Stockholms universitet var en sådan vinnare i den omfördelningen då de tilldelades över 22Mkr för att täcka upp för brister i fördelningsmodellen?

Så trots att regeringen fortsatt ställer sig bakom en prestationsbaserad tilldelningsmodell, så väljer den alltså att justera den med egna kriterier (eller för nästa år ingen omfördelning alls!) vilket innebär att det i praktiken är väldigt svårt för lärosätena att relatera till dess väntade utfall.

Hela propositionen finns tillgänglig här: http://www.regeringen.se/rattsdokument/proposition/2016/11/prop.-20161750/

Det finns massor av andra intressanta aspekter gällande öppen tillgång till data och SwePub, men det får vänta tills jag är tillbaks från veckans begivenhet, workshopen: Accelerated Academy i Leiden. Mitt bidrag heter The performativity of the citation (länk till ppt och abstract kommer efter presentationen).

Teknologi är blott politik med andra medel

Övergripande evalueringar av det svenska forskningspolitiska systemet saknas nästan helt. Detta är lite förvånande, med tanke på alla inspel till regeringens kommande forskningsproposition som just nu duggar tätt. Några tidningar reproducerar idag en TT-nyhet (1, 2, 3) om en aktuell OECD-rapport som i brist på källhänvisning eller ens avgivande av titeln på rapporten kunde ha gått mig förbi (Insert: Rapporten är en uppföljning av en tidigare utförd evaluering från 2012 (1)). På högskoleläckan gavs dock en länk till ett Vinnovaseminarium Cameldär rapporten hade diskuterats idag. Jag har endast hunnit skumma rapporten, och förutom att den verkar vederhäftig och faktaspäckad i sin analys (trots att den helt saknar referenser till empiriska källdata eller till och med referenser!) så ger den flera ganska kritiska kommentarer till svensk forskningspolitik av idag. I TT-nyheten framställs kritiken vara riktad mot den tidigare Alliansregeringen och även om pekpinnar riktas i den riktningen, så står det klart att även det akademiska ledarskapet vid de svenska lärosätena förtjänar granskning.

Det är notabelt att rapporten genomgående lyfter fram Vinnovas roll i den svenska forskningspolitiken: De skall ansvara för att samhälleliga utmaningar möts, de prisas för sina satsningar på EU-initiativ och att VINNOVA skulle kunna erbjuda ett korrelat mot dominansen av akademiker bland forskningsrådens ledamöter[!] (s 22)

Till rapportens mer specifika bidrag vill jag lyfta följande:

Resonemanget om kraven på ökade basanslag, som nästan enhälligt lyfts av akademin idag är särskilt viktigt att skärskåda och reflektera över:

“While Swedish universities have for some decades made it clear that they want to receive a higher proportion of their research income in the form of institutional funding or GUF*, evidence from international experience or statistics does not show any clear way to connect the proportion of university income from this source with overall performance” (s 13),

och lite längre ner verkar rapporten snarare lägga ansvaret på lärosätenas ledningar:

“it appears that Sweden’s “good but not sufficiently excellent” scientific performance points to a failure by university management to be selective combined with sub-optimal mechanisms affecting the allocation of funds (whether from TPF with its medium-sized instruments or from the way the universities allocate GUF Internally).” (ibid.)

Kan det månne vara att de flesta lärosätena har försökt kopiera den nationella resurstilldelningsprincipen (bibliometri och externa anslag) ner på fakultets-, institutions- eller till och med individnivå? Detta utan evidens att sådana modeller fungerar på dessa lägre nivåer. Ytterligare en aspekt är att lärosätenas ledningar riskerar att frånsäga sig möjligheten till strategiska satsningar när de bakbinds av de mekanistiska systemen?

Så här skriver jag och Pieta Eklund i ett längre utdrag ur vår rapport om resurstilldelningsmodeller vid svenska lärosäten:

“(L)ärosätenas ledningar riskerar att förlora möjligheten att bedriva ett aktivt kvalitetsgrundande arbete när till synes neutrala och förment sakliga data tillåts utöva direkt avräkning mot forskarnas prestationer i en resursfördelningsmodell. För att utveckla detta resonemang vill vi argumentera för att en tilltro till en alltför standardiserad, och en för vetenskapen generellt utvecklad bibliometrisk indikatormodell riskerar att bli en hämsko för den ledning som aktivt vill styra forskningen mot att utveckla egna profilområden och satsningar på vad som vid lärosätet uppfattas som starka miljöer. Det är exempelvis tveksamt om en indikatormodell som endast ger incitament att publicera i specifika kanaler kan gynna forskningens kvalitet annat än att stärka lärosätets prestation i den nationella tilldelningen. En sådan instrumentell syn på det vetenskapliga publicerandet är problematisk av flera skäl. Förutom att det helt missar publicerandets aktiva roll i den vetenskapliga praktiken som en integrerad del av vad det innebär ”att forska”, riskerar man att förlora initiativet att leda den egna verksamheten. När man sätter sin tillit till externa processer eller till och med de automatiserade verktyg som indikatormodellerna erbjuder så tvingas man att underställa sig detta verktygs agens och betrakta detta som styrande för de egna kvalitetsgranskningssystemen. Slutligen är detta kortsiktigt, då såväl indexets tekniska funktion som politikens inriktning och nationella modell är i ständig omvandling. Vad som gynnar lärosätet och dess forskare vid en tidpunkt kan mycket väl vara negligerbart, eller i värsta fall verka negativt i den ekonomiska fördelningen fyra till fem år senare när utfallet av prestationer mäts och värderas.” (Nelhans och Eklund, 2015, s 51-52)

En mycket glädjande uppmaning är att OECD-rapporten föreslår att Sverige skall satsa mer på foresight och andra övningar för att bättre identifiera strategiska områden värda att satsa på. Mindre glädjande är avsaknaden av humaniora och samhällsvetenskaperna med sin kritiska förmåga att granska och ställa den implicita teknikdeterminismen i “innovationssystem” i strålkastarljuset. Det behövs mer än tekniskt “know-how” för att nå framgång i forskning och innovation; det krävs reflexiv förmåga att relatera kortsiktiga lösningar till långsiktiga samhälleliga och ekologiska problem. Informationsteknologins snabba utveckling reser många frågor om övervakning och kontroll. Och att mänsklig integritet kommer i skymundan är mer regel än undantag. För vem kan förvägra reglering eller underrättelsetjänsters möjlighet att lyssna av krypterade elektroniska nätverk som Skype, WhatsApp och Kik, när det avslöjas att terroristerna bakom de avskyvärda attackerna i Paris verkar ha begagnat sig av dessa kommunikationsmedel för att undvika att bli upptäckta? Teknologi är blott politik med andra medel.

Referenser:

Nelhans, G. & Eklund, P. (2015). Resursfördelningsmodeller på bibliometrisk grund vid ett urval svenska lärosäten. Vetenskap för profession Nr. 30, ISSN 1654-6520. Borås: Högskolan i Borås (1).

OECD Reviews of Innovation Policy: Sweden 2015. Overall Assessment and Recommendations Preliminary Version (1).

* Här är en kort förkortningsordlista: TPF: Third Party Funding = externa anslag; GUF: General University Funds = basanslag, om jag förstår rapporten rätt.

Peer Review!

I dag kl 14:30 kommer Björklund presentera den nya forskningsproppen och varken “prestationsbaserad” bibliometri via citeringsanalys eller en variant av den norska “resultatbaserade” modellen verkar finnas med som huvudsaklig modell för det konkurensutsatta anslaget. Även anslag baserade på erhållna medel verkar försvinna ur modellen. I stället kommer en fördubblad andel (20% av anslagen) fördelas baserat på en peer reviewbaserad modell som Vetenskapsrådet kommer att få i uppdrag att ta fram. Den nya modellen anges vara baserad på “kvalitetskriterier”.

En livesändning kommer att finnas på regeringens hemsida och förhandsmaterialet kom i morse i form av en debattartikel i DN.

Således verkar regeringen ha gått på VR:s modell som de presenterade i sitt remissvar till Anders Flodströms utredning från i vintras. En indikation på att så skulle bli fallet kom redan i budgeten där Flodström utredning inte ens nämndes vid namn.

 

Det var en intressant utveckling.

 

Uppdatering to em:

Men det är viktigt att notera att detta handlar om fem år fram i tiden. Den nuvarande modellen ligger kvar åtminstone fram till ingången av 2018:

En utgångspunkt för kollegial bedömning bör vara att all forskning regelbundet utvärderas med områdesvisa utvärderingar under en cykel som varar fyra till sex år. En fördelning av resurser utifrån sådan bedömning av forskningens kvalitet kan dock inte vara aktuell att införa förrän tidigast 2018.

http://www.regeringen.se/content/1/c6/20/13/68/ab3950ad.pdf s 63

Bibliometrics at the Crossroads seminar

Yesterday I gave a seminar at the Bibliometrics at the crossroads half day seminar hosted by Chalmers Library and Borås University (#bibcross). First keynote speaker was Blaise Cronin, who gave a marvelously imaginative talk about his visions on scholarly publishing and bibliometric analysis in what could be described as a post academic setting where collaboration does not necessarily mean professor – to professor work, but a shared authorship roles between people both within and outside academia. He especially noted the quick changes and the fast uptake of research today and the demands it creates for publishers.

 

My own humble contribution was called: Inscribed and circumscribed by citations – Indicators, impact and quality in the humanities and social sciences. If anyone wants to summarize it, I would be most grateful…

 

Mer om utredningen om forskningsmedelstilldelning till lärosätena

Fortfarande finns mycket lite information om den rapport som var resultatet av den utvärdering som Anders Flodström arbetat med under det senaste året. I ett nummer av Universitetsläraren (18/2011) intervjuas dock Flodström, som meddelar att han avråder från den av Regeringen efterfrågade modellen att utnyttja peer review för fördelning av medel till lärosätena. Istället förordas att Kungliga Biblioteketes SwePub-databas utgöra grunden för ett system som skall kompletteras med ett system av “Impact Factor”. Hur exakt detta skall se ut framgår inte av svaren och vi får vänta på att rapporten publiceras för att ta del av de uppgifterna, men det lutar åt att de hittills utnyttjade systemet med fältnormerade publikations- och citeringsmått byts mot ett system som gissningsvis baseras på tidskrifters “Journal Impact Factor”. Flodström är noga med att framhålla att en bibliometrisk udd är nödvändig:

“– Till en sådan databas måste man också tillföra en ”impact factor”, (mängden citeringar) och där föreslår jag att Vetenskapsrådet ska stå för den informationen.” (Flodström i Universitetsläraren 18/2011)

Men “citeringar” eller “impact factor”, det är frågan…