JYVÄSKYLÄN YLIOPISTO

Laatukoulutus 22.05.2007TUTKIMUKSEN LAADUN

MITTAREISTA

Tutkimuspäällikkö

Sirkka-Liisa Korppi-Tommola

JYVÄSKYLÄN YLIOPISTO

Miten tutkimuksen laatua mitataan?

Tutkimuksen arvioinnissa käytettyjä mittareita Opetusministeriön käyttämät mittarit Bibliometriset aineistot julkaisujen laadun

mittareina Mittarit ja tieteenalojen väliset erot

JYVÄSKYLÄN YLIOPISTO

Tutkimuksen kokonaisarviointiJyväskylä

I. Tutkimuksen laatu 1.tieteellinen merkittävyys ja erinomaisuus 2.kansallinen ja kansainvälinen yhteistyö 3.julkaisut (käyttäen 7-portaista asteikkoa) 4.tohtorikoulutus ja post doctoral -aktiviteetit 5.tutkimusstrategia ja tieteellinen johtajuus II. Yhteiskunnallinen vaikuttavuus 6. tutkimuksen käytännön merkitys

yhteiskunnalle/suuren yleisön tietoisuuteen saattaminen

JYVÄSKYLÄN YLIOPISTO

Tutkimuksen kokonaisarviointiAineistoja laadun arvioinnissa

1. Tieteellinen erinomaisuus, merkittävyysKuvaukset laitoksen tärkeimmistä tutkimustuloksista ja

niihin liittyvät julkaisut> vertaisarviointi - viittaukset julkaisuihin> sitaatiotietokannat2. Kansallinen ja kansainvälinen yhteistyö- yhteisprojektit- yhteisjulkaisut- laadulla kilpailtu tutkimusrahoitus4. Tohtorikoulutus ja post docit /henkiset resurssit- Tohtorikoulutettavat ja tohtoritutkinnot, tohtoritutkijoiden

määrä

JYVÄSKYLÄN YLIOPISTO

Tutkimuksen kokonaisarviointi Julkaisut tutkimuksen laadun mittarina

Mittarina referoitujen, kv-tieteellisissä lehdissä ilmestyneiden artikkeleiden osuus kaikista tieteellisistä julkaisuista (lähde:KOTA-tietokanta)

KOTA MÄÄRITTELYTYliopiston laitosten henkilökunnan julkaisemien tieteellistenjulkaisujen lukumäärä/kalenterivuosi. LUOKITTELU Asiantuntijoiden hyväksymät referee-artikkelit. Kokoomateoksissa tai painetuissa kongressijulkaisuissa

ilmestyneet artikkelit. Monografiat. Yliopistojen omissa sarjoissa julkaistut artikkelit. JAOTTELU: Suomessa julkaistut, ulkomailla julkaistut.

JYVÄSKYLÄN YLIOPISTO

Opetusministeriön käyttämät tutkimuksen tuloksellisuusmittarit

Suomen Akatemian nimeämät huippuyksiköt

Tieteellisten julkaisujen määrä suhteutettuna tutkimushenkilöstön määrään

Oma aktiivisuus kansainvälisessä tutkimusyhteistyössä

JYVÄSKYLÄN YLIOPISTO

Bibliometriset aineistojen käytettävyys yliopistojen julkaisujen laadun ja

tuottavuuden arvioinnisssaOlli Poropudas, Maija Miettinen, Jorma Selovuori, Hanna-Mari Pasanen:

OPM:n julkaisuja 2007:2 Hankkeen tavoite:

Selvittää bibiliometristen aineistojen käytettävyys yliopistojen välisessä vertailussa (ja kaukotavoitteena yliopistojen rahanjaossa?)

Käytetyt tietolähteet- julkaisut : KOTA, ISI – NCR *)- viittaukset (NCR)- henkilötyövuodet (Tilastokeskus)

luokitukset (KOTA, NCR, ISI)

*) ISI= Institute for Scientific Information (ISI Web of Knowledge) NCR= National Citation Report

JYVÄSKYLÄN YLIOPISTO

Johtopäätöksiä

Yliopistojen tieteellinen tuottavuus (NCR) 2001-2003, 1996-98=100

0 20 40 60 80 100 120

Helsingin yliopisto

Oulun yliopisto

Kuopion yliopisto

Yliopistojen keskiarvo

Turun yliopisto

Vaasan yliopisto

Åbo Akademi

Tampereen yliopisto

Teknillinen korkeakoulu

Joensuun yliopisto

Lappeenrannan tek. yo

Tampereen teknillinen yo

Jyväskylän yliopisto

Ylio

pis

to

Tuottavuus, 1996-98=100

Olli Poropudas 24.4.2007

JYVÄSKYLÄN YLIOPISTO

Johtopäätökset:

Viittauskerroin yliopistoittain 2000-04, 1995-99=100

76,4

106,3

106,8

112,2

114,1

116,2

119,7

125,4

128,4

129,1

131,8

145,3

0 20 40 60 80 100 120 140 160

Lappeenrannan teknillinen yo.

Teknillinen korkeakoulu

Tampereen teknillinen yo.

Tampereen yliopisto

Joensuun yliopisto

Kuopion yliopisto

Oulun yliopisto

Helsingin yliopisto

Turun yliopisto

Jyväskylän yliopisto

Yliopistojen keskiarvo

Åbo Akademi

Yli

op

isto

1995-99=100

Olli Poropudas 24.4.2007

JYVÄSKYLÄN YLIOPISTO

Johtopäätökset:Yliopistojen tieteellinen tuottavuus (NCR) tieteenaloittain 2001-2003,

1995-97=100

0 20 40 60 80 100 120 140

Luonnontiede

Kauppatiede

Eläinlääketiede

Tieteenalojen keskiarvo

Lääketiede

Psykologia

Teknistieteellinen

Hammaslääketiede

Yhteiskuntatieteet

Maatalous-metsätieteellinen

Humanistiset tieteet

Tie

tee

na

la

Tieteellinen tuottavuus, 1995-97=100

Olli Poropudas 24.4.2007

JYVÄSKYLÄN YLIOPISTO

Johtopäätökset

- ISIn aineistot, jako kahteen: luonnon-, lääketiede, tekniikka YES, yhteiskunta-, humanistiset tieteet NO

- Shanghain lista on muotopuoli

- luonnon-, lääketiede, tekniikka jne. ISIn aineistot käyttökelpoisia yliopistojen välisessä vertailussa

-yliopistojen tieteellinen tuottavuus laskenut

Olli Poropudas: 24.4.2007 tiedeneuvoston kokous

JYVÄSKYLÄN YLIOPISTO

European Reference Index for Humanities (ERIH)

Tavoitteena humanististen tieteiden näkyvyyden parantaminen ja vertailtavuuden lisääminen:

1. yhteiset arviointikriteerit

2. kansainväliset tieteenalojen väliset vertailut

3. selkeät julkaisukanavat

4. tutkimustulosten saavutettavuus paranee

JYVÄSKYLÄN YLIOPISTO

ERIH – käytännön toteutus aloitettu 2003

ESF:n Standing Committee for the Humanities

15 tieteenalaa mukana (antropologia, arkeologia, taiteiden tutkimus ja taidehistoria, antiikin tutkimus, naistutkimus, historia, tieteen historia ja –filosofia, kielitieteet, kirjallisuus, musiikkitieteet, Aasian ja Afrikan tutkimus, kasvatustieteet, filosofia, psykologia, teologia ja uskontotieteet)

Lista tieteellisistä lehdistä ja julkaisuista kullekin tieteenalalle

JYVÄSKYLÄN YLIOPISTO

ERIH - julkaisulistat

Julkaisut jaettu kategorioihin A, B, C

A = huipputason kansainvälinen julkaisu (10-25 %) B = kansainvälinen hyvätasoinen julkaisu C = kansallinen julkaisu (monissa maissa hyvin

tärkeitä; vrt. kielialue)Please read carefully the ERIH guidelines….You should be aware that the distinction between the categories A,B and C is not primarily qualitative; rather, the categorisation also factors in issues such as scope and audience as explained in the guidelines. Lähde: www.esf.org/erih

JYVÄSKYLÄN YLIOPISTO

ERIH – nykytila

Ensimmäiset listat julkaistaan vuoden 2007 aikana (maalis-, kesä- ja lokakuussa http://www.esf.org/erih

Otteita listasta Linguistics Journal of African Languages and Linguistics A Journal of Applied Linguistics C Journal of Artificial Intelligence Research A Journal of Celtic Linguistics A Journal of Child Language A Journal of Chinese Linguistics A Journal of Communication A Journal of Comparative Germanic Linguistics A Journal of Deaf Studies and Deaf Education B

JYVÄSKYLÄN YLIOPISTO

JY:n tutkimusstrategiaMITTARIT

Strategian toteutumista mitataan erityisesti tutkimuksen laadun, kansainvälisen vaikuttavuuden ja verkottumisen näkökulmasta. Mittareilla seurataan kehitystrendejä ja prosentuaalisia muutoksia. Lähtötasona on vuosi 2006. Kehitystä seurataan sekä yliopistotasolla että tieteenalakohtaisesti.

Tärkeimmät mittarit ovat Suomen Akatemian, ERC:n, pohjoismaisen ministerineuvoston ja

vastaavien nimeämät huippuyksiköt ja akatemiaprofessuurit, tieteellisten artikkeleiden ja muiden tieteellisten julkaisujen

kokonaismäärän kehitys, kansainvälisten tieteellisten julkaisujen määrän kehitys (Lähde:

ISI Web of Science), laadulla kilpailtu, erityisesti Suomen Akatemian, Tekesin, EU:n ja

muu kansainvälinen tutkimusrahoitus,

JYVÄSKYLÄN YLIOPISTO

Mittarit jatkuu

koordinoidut EU:n rahoittamat tutkimushankkeet, kansainvälisen haun kautta rekrytoidut ulkomaiset professorit ja

tutkijat, tieteiden rajapinnoilla syntyneet innovaatiot ja/tai yhteisjulkaisut, tieteellisissä konferensseissa pidetyt kutsutut esitelmät, järjestetyt tieteelliset konferenssit, sektoritutkimuslaitosten kanssa perustetut yhteisvirat tai muut

yhteiset resurssit, kansainväliset tutkimusyhteistyöhön ja tutkijakoulutukseen

fokusoidut yhteistyösopimukset.