Tutkimusrahoittajat kokeilevat arpajaisia tasaväkisten hakemusten ratkaisemiseen
Edistys – toteutunut ja lähteillä osoitettu parannus.
Mitä tapahtui?
Tutkimusrahoittajat ovat alkaneet käyttää arpajaisia tilanteissa, joissa parhaiksi arvioitujen hakemusten välille ei pystytä tekemään luotettavaa järjestystä. Menetelmässä asiantuntija-arviointi määrittää ensin laadun vähimmäistason, minkä jälkeen lähelle rahoitusrajaa sijoittuvien, käytännössä tasaväkisten hakemusten välillä ratkaisee arpa.
Sveitsin kansallinen tutkimussäätiö otti tällaisen menettelyn käyttöön vuonna 2022. Säätiön tilastollinen malli arvioi, ovatko hakemusten näennäiset sijoituserot riittävän suuria päätöksen perustaksi. Jos hakemusten mahdolliset sijoitukset menevät rahoitusrajan molemmin puolin eikä niitä voida erottaa toisistaan, ne siirretään arvontaan.
Research on Research Institute on kirjannut vuodesta 2022 alkaen 11 arpajaisiin perustuvaa kokeilua tai käyttöönottoa. Menetelmiä on käytetty tai testattu muun muassa Wellcome-järjestössä, Novo Nordisk -säätiössä ja Uuden-Seelannin terveysalan tutkimusneuvoston Explorer Grants -ohjelmassa. Uudessa-Seelannissa ohjelma on käyttänyt arvontaa vuodesta 2013 alkaen hakemuksiin, jotka täyttävät ennalta määritellyn laatukynnyksen.
Käytäntö on edelleen maailmanlaajuisesti harvinainen, eikä aineisto osoita, että se parantaisi tutkimuksen laatua tai rahoituksen vaikuttavuutta. Se osoittaa kuitenkin, että osa rahoittajista pitää arvioijien epävarmuuden tunnustamista perustellumpana kuin erittäin pienten piste-erojen käyttämistä ratkaisevana perusteena.
UUSI VAHVISTETTU TIETO
Mikä on uutta?
- Tutkimusrahoituksessa on siirrytty joissakin ohjelmissa kokeilemaan muodollista arvontaa asiantuntija-arvioiden epävarmoissa rajatapauksissa.
- Käytännön käyttö ja kokeilut ovat lisääntyneet vuodesta 2022 alkaen, mutta menetelmä on edelleen harvinainen.
Tämä on tapahtuman ensimmäinen päivitys Maailmankaiussa. Seuraavat olennaiset muutokset lisätään samaan tapahtumaketjuun.
Selkeä edistys
68 / 100Mikä meni eteenpäin?
– Tutkimusrahoituksessa on siirrytty joissakin ohjelmissa kokeilemaan muodollista arvontaa asiantuntija-arvioiden epävarmoissa rajatapauksissa. – Käytännön käyttö ja kokeilut ovat lisääntyneet vuodesta 2022 alkaen, mutta menetelmä on edelleen harvinainen.
Vahvistetut faktat
- Sveitsin kansallinen tutkimussäätiö otti osittaisen arvonnan käyttöön vuonna 2022.
- Arvonta koskee hakemuksia, joita arvioijat eivät pysty luotettavasti asettamaan järjestykseen rahoitusrajan läheisyydessä.
- Research on Research Institute on kirjannut vuodesta 2022 alkaen 11 arpajaisiin liittyvää kokeilua tai käyttöönottoa.
- Uuden-Seelannin Explorer Grants -ohjelma on käyttänyt arvontaa vuodesta 2013 alkaen.
- Käytännön maailmanlaajuisesta rahallisesta laajuudesta ei ole käyttökelpoisia kokonaislukuja.
Mitä tästä seuraa?
- 1
Tutkimusrahoituksen päätöksenteko voi muuttua avoimemmaksi tilanteissa, joissa asiantuntija-arvioiden erot ovat pieniä.
- 2
Hakijoiden mahdollisuudet saada rahoitusta voivat rajatapauksissa riippua aiempaa näkyvämmin sattumasta.
- 3
Mahdollinen vaikutus tutkimuksen monimuotoisuuteen ja uusien ideoiden rahoittamiseen jää tässä aineistossa todentamatta.
MERKITYS: MERKITTÄVÄ · 3/5
Miksi tämä on merkittävää?
Suoraa vaikutusta useimpien ihmisten arkeen ei ole osoitettu. Tutkimusta tekeville ihmisille ja tutkimuksesta rahoitettaville hankkeille muutos voi kuitenkin merkitä sitä, että tasaväkisten hakemusten ratkaisu riippuu aiempaa avoimemmin sattumasta eikä näennäisen täsmällisestä piste-erosta. Tämä voi pitkällä aikavälillä vaikuttaa siihen, millaisia tutkimuksia rahoitetaan, mutta aineisto ei osoita vielä, että arpajaiset parantaisivat tutkimustuloksia tai rahoituksen tehokkuutta.
MITÄ TÄSTÄ VOI SEURATA?
Kun asiantuntija-arviot eivät pysty luotettavasti erottamaan vaihtoehtoja toisistaan, päätöksenteon epävarmuuden tekeminen näkyväksi voi olla rehellisempää kuin näennäisen tarkan paremmuusjärjestyksen ylläpitäminen.
Vaikutusten laajuus
Palkit näyttävät, kuinka laajalle jutun lähteissä kuvatut seuraukset ulottuvat. Prosentti on toimituksellinen arvio lähteiden perusteella, ei ennuste.
Mitä emme vielä tiedä?
– Aineisto perustuu yhteen artikkeliin eikä osoita, parantaako arvonta tutkimuksen laatua, monimuotoisuutta tai rahoituksen vaikuttavuutta.
– Eri rahoittajien menetelmät poikkeavat toisistaan: arvonta voi koskea vain tasaväkisiä hakemuksia, kaikkia laatukynnyksen ylittäviä hakemuksia tai jopa oikeutta jättää täysi hakemus.
– Arvontojen kautta jaettavan rahoituksen kokonaismäärästä ei ole käyttökelpoista maailmanlaajuista tietoa.
AikajanaMiten tapahtuma on edennyt
- 2013: Uuden-Seelannin Explorer Grants -ohjelma alkaa käyttää arvontaa.
- 2018: Tutkimuksessa 43 arvioijaa arvioi samat 25 hakemusta ja oli niiden arvioista vain vähän yhtä mieltä.
- 2022: Sveitsin kansallinen tutkimussäätiö ottaa osittaisen arvonnan käyttöön; Research on Research Institute alkaa kirjata useita uusia kokeiluja ja käyttöönottoja.
- elokuuta 2026: Nature julkaisee katsauksen käytännön yleistymisestä.
AVOIN TARKISTUS
Yhteen lähteeseen perustuva
1lähdeorganisaatio
1lähdedokumentti
20.8.2026 09.54viimeksi tarkistettu
Mitä vielä tarkistetaan?
- Asian merkitystä ei ole perusteltu.
- Edistyksen ydinasia puuttuu.
Kohtalainen
Lähdepohja kuvaa uutisen lähdeaineiston vahvuutta ja monipuolisuutta. Se ei arvioi uutisen totuutta prosentteina.
Kohtalainenlähdepohjan taso
1lähdeorganisaatio
1varmennettu lähde
Näytä, mistä lähdepohja muodostuu
Lähteiden laatu25/25
Luettujen lähteiden määrä10/25
Tietojen yhtäpitävyys3/20
Alkuperäislähde tai suora näyttö8/15
Tiedon tuoreus0/10
Epävarmuuksien avoimuus5/5
Lähdepohja arvioi lähdeaineiston vahvuutta enintään 95 pisteellä. Pistemäärä ei ole uutisen totuusprosentti.