Tampereen yliopisto edistää tutkijoiden avointa ja reilua arviointia

Tutkija törmää monessa kohtaa uraansa siihen, että häntä ja hänen tutkimustyötään arvioidaan ja verrataan muihin. Arviointia tehdään paitsi rekrytointien yhteydessä, myös esimerkiksi silloin, kun päätetään tutkijan urapolulla etenemisestä, erilaisista vastuutehtävistä, hankkeiden rahoituksesta tai palkasta.

Tutkimuksen kehittämispäällikkö Markku Ihonen Tampereen yliopistosta korostaa, että tutkijoiden arvioinnin tulisi olla paitsi yhdenvertaista ja oikeudenmukaista, myös läpinäkyvää ja ennustettavaa.

– Kun tutkija suunnittelee uraansa ja tekee valintojaan, hänen tulisi tietää, miten häntä arvioidaan ja mihin hänen kannattaa panostaa. 

Tampereen yliopisto on sitoutunut edistämään tutkijoiden vastuullista arviointia CoARA-yhteisön (Coalition for Advancing Research Assessment) tavoitteiden mukaisesti. Tähän liittyen yliopistossa on laadittu toimintasuunnitelma, joka valmistui huhtikuussa 2024.

– Vaikka Suomessa ja Tampereella on jo tehty paljon tutkijoiden vastuullisen arvioinnin kehittämiseksi, se ei silti tarkoita, että kaikki olisi ihanteellisesti. Tiedämme, että meillä on vielä paljonkin korjattavaa, Ihonen sanoo.

Käytännössä Tampereen yliopisto on tuottanut esimerkiksi ohjevideoita tutkijoiden vastuullisesta arvioinnista yhdessä Oulun ja Ruhrin yliopistojen kanssa. Avoimesti saatavilla olevat videot on hyväksytty osaksi CoARAn virallisia materiaaleja. Tänä syksynä aiheesta on tarkoitus tuottaa lisää materiaalia intraan ja perehdyttämiskoulutuksiin.

Mikä on helppoa, ei välttämättä ole luotettavaa

CoARA-yhteisö perustettiin loppuvuodesta 2022 toimeenpanemaan kansainvälistä Agreement on Reforming Research Assessment -sopimusta, joka valmistui aiemmin samana vuonna.

Ryhmittymään on liittynyt jo lähes yhdeksänsataa yliopistoa, tutkimuslaitosta ja tutkimuksen rahoittajaa eri puolilta maailmaa. Tampereelta mukana ovat sekä Tampereen yliopisto että Tampereen ammattikorkeakoulu.

Digitalisaatio on tehnyt tieteellisten julkaisujen ja niihin tehtyjen viittausten mittaamisesta aiempaa helpompaa. Se mikä on helppoa, ei kuitenkaan välttämättä ole luotettavaa.

– Esimerkiksi H-indeksi, jolla tutkijoiden meriittejä pyritään tiivistämään yhteen ainoaan lukuun, ei kohtele tutkijoita tasapuolisesti, koska eri alojen julkaisukäytännöt ovat erilaisia, Ihonen huomauttaa.

CoARA-yhteistyötä edelsi kansainvälinen DORA-julistus (San Francisco Declaration on Research Assessment), jossa vaadittiin tutkijoiden arvioinnissa käytettävien työkalujen vastuullisempaa käyttöä. Tampereen yliopisto allekirjoitti julistuksen vuonna 2018 ensimmäisenä yliopistona Suomessa.

CoARA menee tästä askeleen pidemmälle: tavoitteena on koko tutkimuksen arviointikulttuurin muutos ja tutkimuksen laadun ja vaikuttavuuden parantaminen. 

– Tässä tarvitsemme paitsi vertaisarviointia, myös luotettavaa ja hyvää metriikkaa, jota tulee myös osata käyttää oikein, Ihonen kiteyttää.

Kuva: Jonne Renvall / Tampereen yliopisto

Tärkeää sekä yliopistolle että tutkijoille

Tampereen yliopiston tutkimuksen vararehtori Tapio Visakorpi näkee, että vastuullinen arviointi on erittäin tärkeää sekä yliopiston että yksittäisen tutkijan kannalta.

– Yliopistona haluamme rekrytoida parhaat tutkijat yhteisöömme. Tämä onnistuu vain, jos arvioimme hakijat mahdollisimman oikeudenmukaisesti ja yhdenvertaisesti.

Visakorpi toimii yliopiston HR Excellence in Research -ohjausryhmän puheenjohtajana. Kehittämistyön yhtenä tavoitteena on varmistaa, että yliopistossa on vastuulliset rekrytointi- ja arviointikäytännöt.

– Tutkijoina olemme koko uramme ajan arvioinnin kohteena. Meillä on täysi oikeus olettaa, että meitä arvioidaan reilusti ja läpinäkyvästi, hän sanoo.

Tekoäly tuo arviointiin uusia haasteita

Markku Ihonen myöntää, että kokonaisen arviointikulttuurin muutos yliopistossa vie aikaa.

Hänen mukaansa esimerkiksi tutkijoiden H-indeksi saattaa edelleen vaikuttaa vähintään taustakeskusteluissa siihen, keitä avoimiin paikkoihin valitaan, vaikka sitä ei mainittaisi virallisissa arviointikriteereissä.

Uusi haaste reilulle ja vastuulliselle arvioinnille on tekoäly, jota käytetään jo paljon tutkimustyön ja vertaisarvioinnin apuna. Ongelmaa joudutaan pohtimaan myös Tampereen yliopistossa.

– Pahimmillaan tutkimusartikkeli tehdään tekoälyn avulla ja julkaisija arvioi sen tekoälyllä, jonka jälkeen tekoälyllä arvioidaan, onko tutkimus kovatasoinen. Lopulta tekoaälytauhkaa kertyy niin monta kerrosta, että kukaan ei enää ota selvää tutkimuksen laadusta, Ihonen pohtii.

Lue lisää tutkijoiden vastuullisesta arvioinnista Tampereen yliopistossa