Table of Contents exclude Lähteet:
Julkaisumetriikkaa hyödyntävissä analyyseissa tarkastellaan tyypillisesti vertaisarvioituja julkaisuja. Tieteellisten julkaisujen vertaisarvioinnilla (peer review) tarkoitetaan menettelyä, jossa tutkimustuloksia julkaiseva lehti, konferenssi tai kirjakustantaja pyytää tieteenalan asiantuntijoita suorittamaan ennakkoarvion julkaistavaksi tarjottujen käsikirjoitusten tieteellisestä julkaisukelpoisuudesta. Vertaisarviointia hyödynnetään myös muissa tutkimuksen arviointiprosesseissa. Julkaisuja arvioitaessa arvioijat (referee) ovat toimituksen ulkopuolisia ja suhteessa arvioitavaan käsikirjoitukseen riippumattomia väitelleitä tutkijoita tai muita tieteenalan asiantuntijoita. Vertaisarviointi on osa tutkimuksen julkaisuprosessia (Kuva 1).
...
Vaikka vertaisarviointia pidetäänkin yleensä hyödyllisenä, se ei kuitenkaan ole ongelmatonta ja sitä on kritisoitu. Vertaisarviointiin liittyviä ongelmia ovat ennen kaikkea julkaisuprosessin hidastuminen ja vinoumien (bias) vaikutus arviointiin. Arvioija voi syrjiä esimerkiksi kirjoittajia iän, sukupuolen, uravaiheen tai affiliaation perusteella tai suosia omia mielipiteitään tukevia tulkintoja. Vertaisarvioinnissa ei myöskään välttämättä havaita käsikirjoituksen vakavia virheitä ja puutteita, vaan ne saattavat tulla ilmi vasta artikkelin julkaisemisen jälkeen. Erityisesti pienillä tieteenaloilla ja pienissä maissa, kuten Suomi, kirjoittajat tunnistavat helposti toistensa työn, vaikka arviointi toteutettaisiin anonyymisti. Sopivien arvioijien rekrytointi voi myös olla haasteellista. Vertaisarviointi voi myös mahdollistaa plagioinnin, jolloin arvioija käyttää väärin käsikirjoituksen julkaisematonta aineistoa. Ongelmat vertaisarvioinnissa ovat kuitenkin melko harvinaisia ja keskeisempi kysymys onkin sen vaikuttavuus julkaisujen laatuun. Vertaisarvioinnin vaikuttavuutta ei ole kovin paljon tutkittu, ja tutkimuksia on tehty lähinnä biolääketieteen alan lehdistä.
Lähteet
...
Jubb, M., 2016. Peer review: The current landscape and future trends. Learned Publishing, 29(1), pp.13-21. https://doi.org/10.1002/leap.1008
...