DINCI Valutazione della Qualità della Ricerca

VQR 2011-2014

08a - Architettura

08b - Ingegneria Civile

DEFINIZIONE DEI CRITERI DI VALUTAZIONE DEI PRODOTTI

A cura diprof. Mauro Francini - Coord.

Ing. Maria Francesca ViapianaIng. Barbara Corasaniti

I PRODOTTI• Sono presi in considerazione per la valutazione dei GEV i prodotti di

ricerca esclusivamente se pubblicati per la prima volta nel periodo2011-2014.Nel caso di doppia pubblicazione, in formato elettronico prima ecartaceo poi, vale la data di prima pubblicazione.

• Fanno eccezione gli articoli pubblicati in formato elettronico nel 2010 econtenuti in un fascicolo di rivista pubblicato nel quadriennio 2011-2014, che potranno essere sottoposti alla valutazione nella VQR 2011-2014.

• Per il singolo Ateneo, ogni prodotto è associato in maniera univoca a unaddetto presente come autore o coautore dello stesso

• Nel caso di prodotti con autore singolo o con coautori appartenenti aIstituzioni diverse, ogni addetto può limitarsi a inserire nella lista ilnumero di prodotti strettamente necessario a soddisfare i requisiti suiprodotti attesi

I PRODOTTI• I prodotti da valutare sono definiti dall’art. 2.3 del bando ANVUR VQR 2011-2014.• Di seguito è riportato l’elenco dei prodotti pertinenti il GEV08a descritti

dettagliatamente nell’Allegato 1 ai Criteri di Valutazione:‐ MONOGRAFIA SCIENTIFICA E PRODOTTI ASSIMILATI‐ CONTRIBUTO IN RIVISTA‐ CONTRIBUTO IN VOLUME‐ ALTRI TIPI DI PRODOTTO‐ BREVETTI CONCESSI NEL QUADRIENNIO DELLA VQR (1/1/2011 – 31/12/2014)

• Le monografie scientifiche e i prodotti a esse assimilati possono contare come dueprodotti se così deciso dall’autore cui il prodotto è associato, e la loro valutazionecontribuisce in questo caso con valore doppio alla valutazione finale dell’Ateneo.

• Ai prodotti bibliometrici che non presentano alcuna citazione è preclusal’attribuzione al livello Eccellente.

• Saranno soggetti a peer review i prodotti non bibliometrici (monografia scientifica,contributo in volume, altri tipi di prodotti a seconda dei casi)

• I prodotti pubblicati su riviste indicizzate nelle basi di dati citazionali ISI Wos eScopus sono suscettibili di valutazione bibliometrica.

I PRODOTTI

• Nel documento sui criteri di valutazione dei prodotti del GEV08b sono riportate le tipologie di prodotti non valutabili perché non pertinenti:

(Elenco non esaustivo)1. Concordanza; Bibliografia Critica o ragionata; Edizione critica di testi;2. Nota a sentenza; Traduzione in rivista3. Prefazione/Postfazione con carattere di saggio; Curatela di volume con

saggio introduttivo; Catalogo con saggio introduttivo4. Composizioni; Disegni; Progetti architettonici; Performance; Esposizioni;

Mostre5. Etc…

• Il GEV08b preclude ad alcune tipologie di prodotti di accedere ad alcune classi divalutazione:

‐ Gli articoli scientifici in atti di conferenza internazionale sono esclusi di defaultdalla classe Eccellente

‐ Gli articoli scientifici in atti di conferenza nazionale sono esclusi di default dalleclassi Eccellente e Elevata.

NUMERO DI PRODOTTI DA PRESENTARE

• Per ognuno degli addetti, l’Università di appartenenza seleziona, da un insieme suggerito da ciascun addetto, il seguente numero di prodotti

ESENZIONI• Nel caso di periodi di congedo, di durata complessiva, anche non

continuativa, compresa fra 2 e 3 anni, il numero di prodotti da presentare èridotto di 1 unità rispetto al valore indicato.

• Per congedi superiori ai 3 anni si è esentati dall’esercizio di valutazione

• Nel caso di maternità, la nascita di un figlio nel quadriennio riduce per lamadre il numero di prodotti di un’unità, e la nascita di più di un figlio esentala madre dall’esercizio di valutazione.

• L’esenzione parziale o totale è facoltativa. Il calcolo dei prodotti attesi perciascun Ateneo sarà effettuato dopo che sarà resa esplicita la scelta inrelazione alla facoltà di fruire dell’esenzione

• Per coloro che hanno ricoperto cariche direttive nelle Istituzioni per almenodue anni anche non continuativi nel quadriennio valgono le seguentiriduzioni: Direttore di dipartimento universitario: 1 prodotto da presentare

MODALITÀ DI PRESENTAZIONEOgni prodotto è trasmesso dalle Istituzioni per via telematica in formato pdf ai GEV tramite laprocedura CINECA, accompagnato da una scheda descrittiva redatta in lingua italiana o inglese checontiene le seguenti informazioni

1. Metadati bibliografici del prodotto (inclusi gli identificatori ISI WoS e Scopus).2. Identificazione dell’addetto attraverso identificativo ORCID.3. Identificazione dei coautori attraverso identificativo ORCID.

4. Identificazione dell’area, del settore concorsuale, del settore scientifico disciplinare, e delcodice ERC di riferimento per la valutazione; per gli articoli indicizzati ISI WoS e Scopus,inserimento della Subject Category di ISI WoS e della All Science Journals Classification (ASJC)di Scopus suggerite per la valutazione bibliometrica.

5. Indicazione della lingua del prodotto.6. Abstract del prodotto, se è già contenuto nel prodotto pubblicato, sarà sufficiente estrarlo e

“caricarlo” nella scheda. Se il prodotto pubblicato non contiene l’abstract, esso dovrà esserepredisposto dall’addetto cui il prodotto è associato.

7. L’eventuale segnalazione, che il prodotto proviene da attività di ricerca in aree emergenti alivello internazionale o in aree di forte specializzazione o a carattere interdisciplinare, per lequali si suggerisce l’adozione preferenziale della metodologia di peer review in ragione dellaminore presenza di tali aree nelle basi di dati bibliometriche.

8. Una descrizione dell’importanza del prodotto nel contesto scientifico internazionale edell'impatto che il prodotto ha avuto in aggiunta a quanto determinabile da una mera analisibibliometrica. In tale sezione andrà riportata qualunque informazione si ritenga utile allavalorizzazione del prodotto (quali ad esempio premi ricevuti e recensioni).

MODALITÀ DI PRESENTAZIONE

• In casi particolari e motivati di indisponibilità del prodotto in formatoelettronico, è ammesso l’invio in formato cartaceo previa comunicazione erelativo consenso dei GEV

• Nel caso in cui la copia pdf fornita dall’editore non sia resa disponibile a duesettimane dalla data di scadenza per la sottomissione dei prodotti, leIstituzioni sono autorizzate a inserire nell’interfaccia CINECA una copia pdfrealizzata a loro cura. Tale copia sarà utilizzata a esclusivo scopo di valutazionecon esplicito divieto di diffusione

Criteri di valutazione dei prodotti di ricerca delle Aree

08a – Architettura

08b – Ingegneria Civile

I SETTORI SCIENTIFICO DISCIPLINARI CON ADDETTI

08a – Architettura

ORGANIZZAZIONE DEL GEV08a

08a – ArchitetturaGEV08a AREA ASSEGNATA RUOLO

Anna Maria Cristina Bianchetti ICAR 21 Coordinatore

Alessandra Capuano ICAR 14 Membro

Michela Cigola ICAR 17 Membro

Riccardo Dalla Negra ICAR 19 Membro

Maurizio D’Amato ICAR 22 Membro

Corrado Diamantini ICAR 20 Membro

Riccardo Florio ICAR 17 Membro

Giovanna Franco ICAR 12 Membro

Tullia Iori ICAR 10 Membro

Carlo Olmo ICAR 18 Membro

Susanna Pasquali ICAR 18 Membro

Teresa Stoppani ICAR 14 Membro

Maria Cristina Tonelli ICAR 13 Membro

Maria Chiara Torricelli ICAR 12 Membro

I SETTORI SCIENTIFICO DISCIPLINARI CON ADDETTI

08b – Ingegneria CivileSettore ERC (ERC) di riferimento PR8_3

Civil engineering, architecture, maritime/hydraulic engineering, geotechnics, waste treatment

ORGANIZZAZIONE DEL GEV08b

08b – Ingegneria Civile

GEV08b AREA ASSEGNATA RUOLO

ARMANINI ARONNE ICAR/01 Coordinatore

COLOMBINI MARCO ENRICO ICAR/01 Membro

BARBARO GIUSEPPE ICAR/02 Membro

MARSELLA MARIA ANTONIETTA ICAR/06 Membro

FOTI SEBASTIANO ICAR/07 Membro

CUENOT BENEDICTE ICAR/07 Membro

AURICCHIO FERDINANDO ICAR/08 Membro

CAILLETAUD GEORGES ICAR/08 Membro

SPACONE ENRICO ICAR/09 Membro

L’analisi bibliometrica• I prodotti di ricerca suscettibili di valutazione bibliometrica sono i prodotti

pubblicati su riviste indicizzate nelle basi di dati citazionali ISI WoS e Scopus.• Il 10% degli articoli per i quali la classificazione finale sarà fatta utilizzando

l’algoritmo bibliometrico verrà inviato anche alla peer review, al fine di valutare ilgrado di correlazione tra i due metodi di valutazione

• Il GEV utilizzerà le basi di dati Web of Science di Thomson Reuters (WoS) e Scopusdi Elsevier (Scopus) secondo le indicazioni fornite dall’autore/Ateneo nella schedaprodotto.

• Nel calcolo dell’indicatore bibliometrico il GEV utilizzerà le citazioni aggiornate al29 Febbraio 2016.

• Autocitazioni:‐ per l’Area 08a non saranno escluse, ma saranno esaminati con particolare

attenzione gli articoli con un numero di autocitazioni superiore al 50% deltotale delle citazioni

‐ per l’Area 08b Il GEV 08b eseguirà la valutazione di ogni singolo prodotto siacon che senza le autocitazioni e valuterà la classe finale attraverso unainformed peer review.

Categoria di riferimento (Subject Category)1. Il primo passo per la valutazione di un dato l’articolo è l’individuazione

della categoria di riferimento nota come Subject Category (SC) in WoSe All Science Journal Classification (ASJC) in Scopus . Una rivista puòappartenere ad una o più SC, e l’indicazione di quale debba essereimpiegata per la valutazione del prodotto in essa pubblicato dovrà essereeffettuata dall’autore/Ateneo che ha proposto l’articolo. Tale indicazionenon è vincolante e può essere modificata da parte del GEV

L’attribuzione dell’articolo a una delle 5 classi previste dal bando è effettuata inseguito a una calibrazione delle soglie nella Subject Category (SC) individuatanello specifico anno.

Categoria di riferimento (Subject Category)• Per l’Area 08a

Una categoria multidisciplinare è presente sia in WoS (MultidisciplinarySciences) sia in Scopus(Multidisciplinary) e include riviste, quali Nature,Science, ecc., caratterizzate da una pluralità di argomenti scientifici. Gliarticoli pubblicati su una rivista che compare solo in tale categoria sarannoriassegnati ad un’altra SC sulla base

‐ delle citazioni contenute nell’articolo e

‐ delle citazioni fatte all’articolo.

In particolare, per ognuna delle riviste citate/citanti si individuerà una (opiù) SC di appartenenza e verrà poi scelta la SC finale con una regola didecisione maggioritaria. In questo modo la pubblicazione sarà confrontatacon pubblicazioni della stessa area tematica e/o disciplinare.Nell’assegnazione alla nuova SC, l’articolo porterà con sé il JM della rivista eil numero di citazioni ricevute, senza modificare le distribuzioni della SC didestinazione

Categoria di riferimento (Subject Category)• Per l’Area 08b

Il GEV osserva che alcune categorie sono molto eterogenee e contengonoriviste che interessano i Settori Scientifico Disciplinari del GEV in manieralimitata, trattando per lo più argomenti relativi ad altre Aree Scientifiche, eche in alcuni casi possono alterare in maniera significativa il processo dicalibrazione.Rientrano in questa categoria le riviste che vedono soddisfatte le seguentiparticolarità:

‐ Da sole ricoprono una percentuale troppo elevata (indicativamente >15%) dei prodotti della SC/ASJC.

‐ Di questi prodotti una percentuale troppo elevata (indicativamente >40%) ricadono nella fascia di Eccellenza.

‐ Sono inserite anche in altre categorie nelle quali non presentano leanomalie rispetto ai due punti di cui sopra.

In questi casi il GEV08b acquisirà anche la valutazione fatta escludendo dalcampione di riferimento le riviste così identificate e deciderà a qualecampione fare riferimento con un processo di IPR.

Classificazione del prodotto

Vista la scarsa consistenza numerica relativa del dato citazionale per articolipubblicati nel 2014, i GEV08a e GEV08b hanno deciso di sottoporre ainformed peer review tutti gli articoli pubblicati nel 2014 la cuiclassificazione sulla base dell’algoritmo proposto non determini unavalutazione finale Eccellente.

A seconda dell’anno di riferimento, nella valutazione finale dell’articolo avrà unpeso maggiore il Numero di Citazioni dell’articolo o l’Impatto della rivista, talecondizione dipende dalle pendenze delle rette di soglia che attualmente sonoquelle indicate in tabella

CRITERI PER LA SCELTA DEGLI ARTICOLI

Pendenza A delle rette di soglia Incidenza sulla valutazione

Anno Area 08a Area 08b

2011 - 0,6 - 0,7 Num. Citazioni articolo

2012 - 0,9 - 0,9 Num. Citazioni articolo

2013 - 1,5 - 1,5 Impatto della rivista

2014 - 2,0 - 2,0 Impatto della rivista

CRITERI PER LA SCELTA DEGLI ARTICOLI

Per gli anni 2011 e 2012, la pendenza delle rette di soglia è in valore assoluto < 1,perciò dovrebbero essere privilegiati articoli con un numero di citazioni piùelevato

Per gli anni 2013 e 2014, la pendenza delle rette di soglia è in valore assoluto > 1,sarebbe opportuno proporre articoli con un indicatore di impatto (JM) più elevatoindicando la base di dati preferita (WoS o Scopus) e un solo indicatore di impatto,fra i due ad essa associati, che sarà utilizzato per la valutazione, ovvero:

‐ per WoS

5-year Impact Factor (5YIF), quale indicatore di popolarità, o

Article Influence (AI), quale indicatore di prestigio

‐ per Scopus

Impact per Publication (IPP), quale indicatore di popolarità, o

SCImago Journal Rank (SJR), quale indicatore di prestigio

SCADENZE

15 dicembre 2015 Apertura sito per la selezione dei prodotti

15 gennaio 2016 Pubblicazione delle Appendici ai criteri bibliometrici per lacalibrazione degli algoritmi e l’individuazione delle fascedi merito

Entro il

25 gennaio 2016 Richiesta dei file pdf agli editori da parte degli autori, chepotranno essere caricati entro l’8 febbraio

29 gennaio 2016 Sottomissione dei prodotti da proporre a valutazione daparte di tutti gli addetti

RIFERIMENTI

Per informazioni e supporto nel caricamento dei prodotti nell’interfaccia CINECA èpossibile rivolgersi a:

Ing. Gianfranco Salfi - g.salfi@unical.it - 0984.494229

Ing. Barbara Corasaniti - barbara.corasaniti@libero.it - 339.7728680