Kirjasto ja UEFRAE2019 | Library and UEFRAE2019

(Please, scroll down to read in English.)

Itä-Suomen yliopisto arvioi jatkuvasti tekemänsä tutkimuksen laatua sekä yhteiskunnallista vaikuttavuutta. Arviointeja tehdään vuosittain itsearvioinneilla sekä säännöllisin väliajoin tehtävillä kansainvälisillä vertaisarvioinneilla. Vuonna 2019 on kansainvälisen arvioinnin vuoro ja arviointi keskittyy yliopiston tutkimustoimintaan vuosina 2015-2018. Arvioinnin tarkoituksena on tunnistaa tutkimuksen vahvuuksia yliopiston tulevaa strategiaa varten. Tehtävässä arvioinnissa tarkastellaan yliopiston nykytilaa sekä tulevaisuuden mahdollisuuksia. Kun edellinen arviointi perustui tiedekuntakohtaisiin tarkasteluihin, niin tämän vuoden tarkasteluissa hyödynnetään tutkimusyhteisöjä, jotka ovat tietyn teeman ympärille rakentuneita monitieteisiä ja kansainvälisesti verkostoituneita yhteisöjä, joilla on selkeä tutkimusfokus.

Itä-Suomen yliopiston tutkijat ehdottivat tutkimusyhteisöjä UEFRAE2019-arviointiin. Yliopiston rehtorit ja dekaanit arvioivat ehdotukset ja tekivät valinnat arvioitavista tutkimusyhteisöistä. Valittujen tutkimusyhteisöjen tuli suorittaa itsearviointi kevään 2019 aikana. Osana itsearviointia kirjasto tuotti itsearviointiraportin liitteeksi bibliometrisen analyysin tutkimusyhteisön ilmoittamista vastuullisista tutkijoista (PI, Principal Investigator). Kirjastolle toimitettuun listaan sisältyi lähes 350 henkilöä, joille haettiin tiedot sekä Scopus että Google Scholar -tietokannoista. Google Scholarin tiedot poimittiin Publish or Perish -työkalun avulla ja ensisijaisesti tiedot poimittiin Google Scholar -profiilista, mikäli sellainen oli tarjolla. Tietokannoista haetut tiedot olivat julkaisujen kokonaismäärä, julkaisujen määrä vuosina 2015-2018, viittausten kokonaismäärä sekä H-indeksi. Muutamien alojen osalta kyseltiin mahdollisuutta käyttää Web of Science -tietokannan tuloksia, mutta kirjaston bibliometriikkaryhmässä todettiin, että monitieteisten ryhmien yhteismitallisen käsittelyn vuoksi tiedot otetaan vain Scopuksesta ja Google Scholarista.

Pääasiassa tiedot kerättiin parin työntekijän voimin, mutta toki taakkaa hiukan hajautettiinkin aikataulullisista syistä. Haasteeksi osoittautui muutamien henkilöiden kohdalla se, että Google Scholar -profiili ei ollut julkinen, joten Publish or Perish -työkalu antoi erilaisen tuloksen kuin henkilöllä itsellään näkyi profiilissa. Tietojen tarkastamiseksi tutkijoita pyydettiin muuttamaan Google Scholar -profiilinsa julkiseksi. Monessa tapauksessa etsimistä olisi helpottanut tutkijakohtainen ORCID-tunnus, joka yksilöi tutkijan ja näin auttaa hänelle kuuluvien julkaisujen löytymistä.

Kirjaston osuus UEFRAE2019-arvioinnin osalta on jo päättynyt, mutta lokakuussa yliopistolla on vielä ulkopuolisten arvioitsijoiden vierailu, jonka aikana kukin tutkimusyhteisö esittäytyy arviointipaneelille, joka myös haastattelee kaikki tutkimusyhteisöt. Tämän jälkeen voimme odotella tämän arviointikierroksen tuloksia.

The University of Eastern Finland continuously evaluates the quality of its research and its social impact. Evaluations are carried out annually through self-assessments and regular international research assessment exercises (RAE). The focus of RAE 2019 is on the University’s research activities in 2015-2018. The purpose of the evaluation is to identify research strengths for the future strategy of the university. The evaluation will look at the current state of the university and its future opportunities. While the previous evaluation was based on faculty specific reviews, this year’s reviews utilize research communities that are multidisciplinary and internationally networked communities around a specific theme with a clear research focus.

Researchers from the University of Eastern Finland proposed research communities for the UEFRAE2019 Research Assessment Exercise. The University rectors and deans evaluated the proposals and made the selection of the research communities to be evaluated. The selected research communities had to conduct a self-assessment during spring 2019. As a part of the self-evaluation process, the library produced a bibliometric analysis of Principal Investigator (PI) nominated by the research community as an appendix to the self-evaluation report. The list provided for the library included nearly 350 people, whose figures were retrieved from both Scopus and Google Scholar databases. Google Scholar data was extracted using the Publish or Perish tool, and the data was primarily extracted from the Google Scholar profile of the researcher, if available. The data retrieved from the databases were: the total number of publications, the number of publications in 2015-2018, the total number of citations and the H-index. In some areas, the possibility of using the results of the Web of Science was asked, but the Library’s bibliometrics group stated that due to the multidimensional treatment of data by multidisciplinary groups, data is only taken from Scopus and Google Scholar.

A couple of employees collected most of the data, but the workload was slightly dispersed for scheduling reasons. The challenge for some researcher was that the Google Scholar profile was not public, so the Publish or Perish tool gave a different result than the researcher himself or herself saw on the Google Scholar profile. To verify the data, researchers were asked to make their Google Scholar profile public. In many cases, searching would have been facilitated by a researcher specific ORCID, which identifies the researcher and thus helps to locate his or her publications.

The Library’s contribution to the UEFRAE2019 Research Assessment Exercise has already ended, but in October the University will still have a cite visit, during which each research community will present itself to the external evaluation expert panel, which will also interview all research communities. We can then wait for the results of this Research Assessment Exercise.

Tomi Rosti, tietoasiantuntija | information specialist
Marja Kuittinen, tietoasiantuntija | information specialist
Opetus- ja tietopalvelut | Training and information services