universita' degli studi di cassino e del lazio … · estraendo i dati riportati nelle diverse...

UNIVERSITA' DEGLI STUDI DI CASSINO E DEL LAZIO MERIDIONALE Dipartimento di Scienze Umane, Sociali e della Salute

1

Relazione delle attività del “Collegio per l’assicurazione della qualità” 2015-2017 (illustrata nella riunione del Consiglio del Dipartimento del 7 giugno 2017) Consiglio di Dipartimento 7 giugno 2017 2R Relazione Collegio per l’assicurazione della qualità

Il Direttore ricorda al Consiglio che il Dipartimento è dotato di un Collegio per l'assicurazione

della qualità, il cui compito è quello di coadiuvare il Direttore nell’attuazione del processo di valutazione e accreditamento delle strutture in coerenza con il piano triennale della ricerca e della didattica. Nello specifico, compito del Collegio è quello di: a) assicurare il coordinamento e il monitoraggio dei processi di valutazione e di accreditamento dei corsi di studio; b) assicurare il monitoraggio della produzione scientifica anche ai fini della valutazione della qualità della ricerca (VQR); c) promuove la cultura della qualità con specifico riferimento ai livelli di internazionalizzazione della didattica e della ricerca.

Nel rispetto dei propri compiti, il Collegio ha provveduto a redigere una relazione dell’attività svolta per gli anni 2015-2017. Il Direttore invita quindi il prof. Ignazio Tantillo ad illustrare al Consiglio la relazione, in particolare le sezioni riguardanti a) il coordinamento e il monitoraggio dei processi di valutazione e accreditamento dei corsi di studio, mediante la raccolta, ogni anno, delle schede SUA dei corsi di studio, dei rapporti di riesame dei corsi di studio, delle relazioni della commissione paritetica docenti-studenti del dipartimento; b) il monitoraggio della produzione scientifica e della promozione della cultura della qualità con specifico riferimento ai processi di internazionalizzazione della didattica e della ricerca.

Il prof. Tantillo, nell’illustrare la relazione del Collegio (allegato 2R.1), ha dato particolare rilievo ai risultati del Dipartimento per quanto riguarda la sua capacità di ottenere fondi da bandi competitivi (allegato 2 alla relazione del Collegio).

Completata la presentazione, si apre un breve discussione tesa a fornire tutti i chiarimenti utili alla completa comprensione della relazione.

Il Direttore, infine, ringrazia il prof. Tantillo per l’ottimo lavoro svolto dal Collegio. Il Consiglio ne prende atto

Allegato 2R.1

RAPPORTO SULLA DIDATTICA E LA RICERCA DEL DIPARTIMENTO 2015-‐2017

Il collegio per l’assicurazione della qualità si è costituito nel 2015, in applicazione dell’articolo 21 del regolamento del dipartimento, che recepisce il D.M. 47/2013 (Decreto di autovalutazione, accreditamento iniziale e periodico delle sedi e dei corsi di studio e valutazione periodica). Il collegio è composto da tre delegati del direttore del dipartimento (art. 21, comma 2 del citato regolamento): il delegato alla qualità, prof. Giancarlo Schirru; il delegato alla didattica, prof. Giovanni Capelli; il delegato alla ricerca, prof. Ignazio Tantillo. Il collegio ha indicato un presidente (il prof. Capelli) e un segretario (il prof. Schirru). A far tempo dalla sua costituzione, il collegio ha assicurato il coordinamento e il monitoraggio dei processi di valutazione e accreditamento dei corsi di studio (art. 21, comma 3, lettera a, del citato regolamento), mediante la raccolta, ogni anno, delle schede SUA dei


2

corsi di studio, dei rapporti di riesame dei corsi di studio, delle relazioni della commissione paritetica docenti-‐studenti del dipartimento. Il complesso della documentazione monitorata è riassunto nell’allegato 1 (Valutazione e accreditamento dei corsi di studio), da cui risulta l’adempimento di tutti i processi di valutazione da parte dagli organi del dipartimento per gli anni 2015-‐2017, nonché l’impegno dei singoli corsi di studio per la loro internazionalizzazione. Il collegio ha inoltre assicurato il monitoraggio della produzione scientifica, anche ai fini del processo di valutazione della qualità della ricerca (VQR), e della promozione della cultura della qualità con specifico riferimento ai processi di internazionalizzazione della didattica e della ricerca (art. 21, comma 3, lettere b e c del citato regolamento). In particolare il collegio si è riunito per coordinare tutte le attività della VQR 2011-‐2014 (vd. verbale dell’8 ottobre 2015) e ha assistito il direttore e gli afferenti del dipartimento mediante la diffusione delle informazioni pertinenti, l’assistenza nel processo di inserimento e selezione dei prodotti di ricerca da sottoporre a valutazione, fino alla chiusura del rapporto del dipartimento. Ha esaminato i risultati del dipartimento nella VQR 2011-‐2014, mediante la stesura di un rapporto che è stato presentato al consiglio di dipartimento il 10 maggio 2017 e ivi approvato, riportato nell’allegato 2 (Analisi dei risultati VQR esercizio 2011-‐2014). Ha inoltre monitorato la presentazione da parte del dipartimento, nel 2015, della SUA-‐RD 2013, e negli anni successivi delle sezioni riguardanti la terza missione della SUA-‐RD. Il collegio ha inoltre compiuto annualmente un monitoraggio dei progetti di ricerca competitivi presentati dagli afferenti al dipartimento, e dei progetti finanziati negli anni precedenti e continuati nel periodo di attività del collegio: è stata quindi tenuta un’anagrafe dei progetti presentati a enti finanziatori esterni, dei progetti presentati nel Prin bando 2015, dei progetti presentati in sede europea e internazionale, a cui è data particolare attenzione. L’elenco dei progetti è riportato nell’allegato 2 (Monitoraggio della progettualità della ricerca degli afferenti al dipartimento). Dato l’impegno prioritario del collegio nell’assistenza al dipartimento nella VQR 2011-‐2014, il collegio ha ritenuto di sostituire il rapporto annuale previsto dal citato regolamento (art. 21, comma 3, lettera d), con il presente rapporto sulla didattica e la ricerca del dipartimento compilato alla conclusione del processo VQR, avvenuta con la discussione e l’approvazione, da parte del dipartimento, del rapporto di esame dei suoi risultati riportato nell’allegato 3. Cassino, 31 maggio 2017

RAPPORTO SULLA DIDATTICA E LA RICERCA DEL DIPARTIMENTO. 2015-‐2017: ALLEGATO 1

VALUTAZIONE E ACCREDITAMENTO DEI CORSI DI STUDIO

Prospetto di sintesi dei documenti di valutazione e accreditamento dei corsi di studio del dipartimento (anni 2015 e 2016): corso di studio 2015 2016 Lingue e letterature moderne L-11 • SUA CdS

• Rapporto di riesame annuale

• SUA Corso di studio • Rapporto di riesame annuale

(20/1/16) • Rapporto di riesame ciclico

(26/1/16) Scienze dell’educazione e della formazione L-19 • SUA CdS • SUA CdS


3

• Rapporto di riesame annuale

• Rapporto di riesame annuale (26/1/16)

• Rapporto di riesame ciclico (26/1/16)

Scienze motorie L-22 • SUA CdS • Rapporto di riesame

annuale

• SUA CdS • Rapporto di riesame annuale • Rapporto di riesame ciclico

Servizio sociale L-39 • SUA CdS • Rapporto di riesame

annuale


Lingue e letterature moderne europee e americane LM-37

• SUA CdS • Rapporto di riesame

annuale


Scienze e tecniche delle attività motorie preventive e adattate LM-67

• SUA CdS • Rapporto di riesame

annuale


Scienze pedagogiche LM-85 • SUA CdS • Rapporto di riesame

annuale


Politiche sociali e servizio sociale LM-87 • SUA CdS • Rapporto di riesame

annuale


Prospetto di sintesi delle relazioni annuali della Commissione paritetica docenti-‐studenti del dipartimento:

2015 2016 Commissione paritetica docenti-studenti

Relazione annuale della commissione paritetica docenti-studenti (30/12/2015)

Relazione annuale della commissione paritetica docenti-studenti (22/12/2016)


ANALISI DE I RISULTATI VQR Esercizio 2011-2014 Bozza a cura di Giovanni Capelli (PO MED/42)

(già illustrato Consiglio di Dipartimento 10 maggio 2017)

PREMESSE Obiettivo della presente analisi è sintetizzare i risultati delle valutazioni VQR 2011-14 non solo estraendo i dati riportati nelle diverse tabelle pubblicate da ANVUR relative al Dipartimento a sottogruppi specifici per Area, GEV o SSD, ma anche rielaborare questi dati al fine di valutare:

a) La variabilità dei “voti medi” su cui sono basati gli indici R riportati dalle relazioni ANVUR, intesa sia come “omogeneità/eterogeneità di giudizio” utilizzata dai GEV e sub-GEV, che come errore standard da utilizzare per una stima “intervallare” dei voti medi per SSD

b) Se la particolare composizione del Dipartimento per SSD all’interno delle Aree possa aver “deviato” gli indici R calcolati nei documenti ANVUR, che usano come voto medio di riferimento il voto medio di intere Aree o GEV, determinato anche dalla composizione percentuale per SSD all’interno delle suddette Aree o GEV


4

FONTI DEI DATI Sono state utilizzate quali fonti dei dati le tabelle Excel relativa estratte dai Report finali di ciascuna Area e il report finale ANVUR sull’Università di Cassino, nonché le tabelle di sintesi predisposte dal Delegato Rettorale alla Ricerca nelle scorse settimane. METODOLOGIA Prima di tutto, si è provveduto a creare un foglio Excel unico che riunisse le informazioni riassuntive relative a ciascun SSD di ciascuna area: Area/GEV, Sub-GEV, SSD, Somma punteggi, Prodotti Attesi totali, Prodotti Conferiti totali, Voto medio, Percentuali di prodotti a/b/c/d/e/f, utilizzando in genere una tabella della serie 2.xx di ogni Report finale (solo nel caso dell’Area 2 è stato necessario integrare informazioni presenti su due diverse tabelle). A partire da questo tabellone generale, e mediante l’utilizzo del software Stata 14.2, si è proceduto a ricostruire:

a) Il numero di prodotti in fascia a/b/c/d/e/f b) A verificare la corrispondenza del punteggio totale presente nelle tabelle e del “voto medio” c) A calcolare la “varianza” dei punteggi alla base del calcolo del Voto medio d) A calcolare l’intervallo di confidenza al 95% (con utilizzo della distribuzione t con n-1 gradi di

libertà dove n fosse il numero di prodotti totali attesi per SSD) del voto medio per ciascun SSD e) A calcolare gli indici di eterogeneità di Gini (semplice e normalizzato) relativi alla

omogeneità/eterogeneità d’uso delle 6 categorie di classificazione dei contributi scientifici in ciascun SSD

f) A rappresentare graficamente posizione e variabilità (stime puntuali e intervallari) dei voti medi per SSD in ciascuna Area

g) A rappresentare graficamente la relazione tra Voto medio dell’SSD e indice di Gini Standardizzato

Utilizzando i dati così rielaborati, è stato anche possibile ricalcolare R di Area “standardizzati” per la composizione specifica per SSD del Dipartimento, ed è possibile ottenere un R complessivo “di Dipartimento”. Tali indici possono ragionevolmente essere utilizzati per comparare, i risultati del Dipartimento con un Dipartimento ipotetico avente la stessa composizione percentuale per SSD all’interno delle Aree e GEV. E’ anche possibile utilizzare gli Intervalli di Confidenza per una analisi “di scenario” di R potenzialmente compatibili con le rilevazioni ANVUR 2011-2014. RISULTATI A causa molto probabilmente degli arrotondamenti alla prima o seconda cifra decimale presenti in quasi tutte le tabelle Excel, i risultati dei voti medi presentati in tabella non corrispondono perfettamente ai voti medi ricalcolati tramite la procedura di ricostruzione delle consistenze numeriche dei gruppi di prodotti votati dai GEV. Tuttavia, lo scostamento percentuale tra i voti medi presentati nelle tabelle ANVUR e quelli ricalcolati dalla procedura applicata (coerenti con i dati degli intervalli di confidenza) risulta sostanzialmente trascurabile (solo in due casi superiore a -1 o +1 %) Omogeneità/Eterogeneità di valutazione: Indici di Gini L’indice di Eterogeneità di Gini può essere utilizzato per valutare se la distribuzione di una variabile qualitativa si concentra prevalentemente su una delle modalità possibili o se i dati sono distribuiti tra le diverse modalità possibili. Può essere calcolato in versione semplice o in versione normalizzata. Nel caso della versione normalizzata, l’indice semplice viene rapportato al massimo di eterogeneità possibile sulla base del numero di modalità disponibili. Nella sostanza, un indice di eterogeneità di Gini normalizzato tenderà verso lo 0 nel caso di distribuzioni molto concentrate su una o poche modalità


5

(scarsa eterogeneità) mentre si avvicinerà a 1 quanto più le osservazioni siano distribuite tra le possibili modalità (massima eterogeneità). Nel caso delle valutazioni dei prodotti ANVUR, un indice di Gini normalizzato vicino a 1 testimonia che il GEV in quel SSD ha distribuito in maniera uniforme le valutazioni dei prodotti di ricerca tra le diverse categorie disponibili (a/b/c/d/e/f), mentre un Indice di Gini basso indica che le valutazioni si sono concentrate solo su alcune delle categorie. Nella tabella seguente, sono riportati gli indici di Gini normalizzati medi per GEV o Sub-GEV: . table sub_gev, by(areanum) c(mean gini_nrm min gini_nrm max gini_nrm) concise ----------------------------------------------------------------------------------------- areanum and sub_gev | mean(gini_nrm) min(gini_nrm) max(gini_nrm) -----------------------------------------+----------------------------------------------- 1 | ANALISI e PROBABILITA' | .8847525 .8843157 .8851894 INFORMATICA | .9315631 .9315631 .9315631 MATEMATICA APPLICATA | .8415819 .7309384 .9364943 MATEMATICA FONDAMENTALE | .9373187 .908797 .9511872 -----------------------------------------+----------------------------------------------- 2 | GEV2 | .6983021 .3979444 .9309918 -----------------------------------------+----------------------------------------------- 3 | GEV3 | .807973 .7116894 .907426 -----------------------------------------+----------------------------------------------- 4 | GEV4 | .9100147 .7909209 .9607669 -----------------------------------------+----------------------------------------------- 5 | GEV5 | .8852574 .8322275 .9582317 -----------------------------------------+----------------------------------------------- 6 | Area Sanità pubblica | .9638483 .9286225 .9874406 Area medicina sperimentale | .8419264 .7848681 .9272481 Area scienze chirurgiche | .9457837 .8990371 .9840714 Area scienze cliniche | .8477026 .6754563 .9427964 -----------------------------------------+----------------------------------------------- 7 | Scienze Agrarie | .90325 .8196754 .9449196 Scienze Veterinarie | .8784295 .6384442 .9480948 -----------------------------------------+----------------------------------------------- 8.1 | GEV8a | .8770443 .8166413 .9628885 -----------------------------------------+----------------------------------------------- 8.2 | GEV8b | .9055235 .8546131 .9915057 -----------------------------------------+----------------------------------------------- 9 | Ingegneria chimica e materiali | .7976691 .6306531 .8650364 Ingegneria elettrica e dell’informazio | .8647371 .8052736 .9286059 Ingegneria meccanica, energetica e gesti | .8975405 .7455304 .9553787 -----------------------------------------+----------------------------------------------- 10 | Antichistica e Orientalistica | .7871243 .5259541 .936258 Arte, cinema, spettacolo | .8630953 .797698 .9152742 Italianistica e Linguistica | .8278878 .7543674 .871875 Lingue e letterature straniere e Compara | .8439909 .6375 .922546 -----------------------------------------+----------------------------------------------- 11.1 | Discipline storiche, geografia e discipl | .8479179 .7087598 .9090363 Filosofia | .8134884 .6944765 .9025901 Pedagogia, Metodi e didattica delle atti | .8720384 .8109737 .9117197 -----------------------------------------+-----------------------------------------------


6

11.2 | GEV11b | .9181191 .6845905 .9838093 -----------------------------------------+----------------------------------------------- 12 | Area internazional-comparatistica, giusf | .8137516 .7583557 .8781778 Area privatistica | .8288256 .7739059 .8962382 Area pubblicistica | .8292075 .7646397 .878072 -----------------------------------------+----------------------------------------------- 13 | Business | .9640524 .9315313 .974891 Economics | .9493222 .9227898 .9645323 Statistics | .9280295 .7125692 .9906839 -----------------------------------------+----------------------------------------------- 14 | Scienze Sociali | .9139943 .8901405 .9306736 Scienze politiche | .8689569 .7801075 .9208028 -----------------------------------------------------------------------------------------

Si può notare come il GEV 2 (Fisica) abbia fornito valutazioni molto concentrate su poche delle categorie disponibili (un SSD dell’Area 2 raggiunge un indice di Gini normalizzato di 0.39…), mentre tutti i Sub-GEV dell’Area 13, i sub-GEV di Sanità Pubblica e Scienze Cliniche dell’Area 6, il sub-GEV Scienze Sociali dell’Area 14, il GEV 11b (Psicologia) e i sub-GEV di Informatica e Matematica fondamentale dell’Area 1 tendono a giudizi molto eterogenei sui loro prodotti (Gini >0.91). I GEV e sub-GEV delle altre Aree tendono ad un “distribuzione” intermedia dei loro giudizi, che variano intorno a 0.80-0.90. La “variabilità di giudizio” dei GEV può influenzare i “voti medi” dei diversi SSD? Il grafico sottostante valuta questa relazione:

0.1

.4

.7

1

0.1

.4

.7

1

0.1

.4

.7

1

0.1

.4

.7

1

.4 .6 .8 1 .4 .6 .8 1 .4 .6 .8 1 .4 .6 .8 1

1 10 11a 11b

12 13 14 2

3 4 5 6

7 8a 8b 9

Voto

med

io S

SD

Indice di Eterogeneità di Gini NormalizzatoIndice di Gini Normalizzato: 0 massima omogeneità >>> 1 massima eterogeneità

Eterogeneità valutazione e voto medio nei diversi GEV


7

Si può notare come sia presente una relazione (non lineare e con alcuni SSD “anomali”) tra la eterogeneità di giudizio e il voto medio del SSD: In alcuni SSD la minore variabilità di giudizio si traduce in una contrazione verso punteggi medi di maggiore “eccellenza”, con le (poche) eccezioni concentrate prevalentemente nelle aree 6, 9 e 10. Precisione dei “Voti medi” per SSD Calcolando la Varianza per dati raggruppati dei punteggi “di merito” e considerando le dimensioni dei campioni di prodotti utilizzati da ANVUR per il calcolo dei “voti medi” per SSD, alla base dei calcoli degli indici R di comparazione, è possibile costruire Intervalli di Confidenza di tali voti medi. Il tabellone seguente riporta i dettagli per ciascun SSD, comprensivi anche degli indici di Gini normalizzati già discussi: . list area ssd n_prod_attesi voto_medio n_tot voto_recalc ci_min ci_max gini_nrm, sepby(area)

+------------------------------------------------------------------------------------------------+ | area ssd n_pro~si voto_me~o n_tot voto_r~c ci_min ci_max gini_nrm | |------------------------------------------------------------------------------------------------| 1. | 1 INF/01 2088 .58 2088 .5824713 .5670103 .5979323 .9315631 | 2. | 1 MAT/01 72 .6 72 .5972222 .5080872 .6863573 .908797 | 3. | 1 MAT/02 319 .51 319 .5068966 .4667719 .5470212 .9511872 | 4. | 1 MAT/03 800 .54 800 .537 .5094374 .5645626 .9478198 | 5. | 1 MAT/04 132 .48 132 .475 .4170586 .5329414 .9414708 | 6. | 1 MAT/05 1545 .64 1545 .6375405 .6189559 .6561251 .8851894 | 7. | 1 MAT/06 255 .65 255 .6498039 .6067646 .6928433 .8843157 | 8. | 1 MAT/07 609 .57 609 .5712644 .5412124 .6013164 .9364943 | 9. | 1 MAT/08 563 .68 563 .6783304 .649213 .7074479 .8573129 | 10. | 1 MAT/09 297 .77 297 .7744108 .7386376 .8101839 .7309384 | |------------------------------------------------------------------------------------------------| 11. | 2 FIS/01 2898 .85896309 2898 .8608696 .8517287 .8700105 .5496709 | 12. | 2 FIS/02 1148 .78726027 1148 .7879791 .7712358 .8047224 .7229694 | 13. | 2 FIS/03 2373 .80940637 2372 .8117201 .8015769 .8218632 .703737 | 14. | 2 FIS/04 524 .91912621 523 .9223709 .9073327 .9374092 .3979444 | 15. | 2 FIS/05 1836 .78286853 1836 .7857298 .772713 .7987466 .7326508 | 16. | 2 FIS/06 126 .5965812 126 .5992063 .5432081 .6552045 .8897655 | 17. | 2 FIS/07 1970 .81444906 1970 .8158376 .8034009 .8282742 .6586869 | 18. | 2 FIS/08 48 .3 48 .3 .2147232 .3852768 .9309918 | |------------------------------------------------------------------------------------------------| 19. | 3 CHIM/01 660 .75 660 .7518182 .7290809 .7745554 .7789894 | 20. | 3 CHIM/02 1196 .79 1196 .7944816 .7780034 .8109599 .7116894 | 21. | 3 CHIM/03 1377 .76 1377 .7643428 .7485111 .7801745 .7633988 | 22. | 3 CHIM/04 256 .77 256 .7746094 .7405137 .8087051 .7587572 | 23. | 3 CHIM/05 239 .59 239 .5924686 .5478317 .6371055 .8966351 | 24. | 3 CHIM/06 1354 .69 1354 .6963072 .6792724 .7133421 .843269 | 25. | 3 CHIM/07 394 .71 394 .7142133 .6824028 .7460237 .8228278 | 26. | 3 CHIM/08 861 .73 861 .7322881 .7121498 .7524263 .8101157 | 27. | 3 CHIM/09 375 .77 375 .7757334 .7449931 .8064737 .7400627 | 28. | 3 CHIM/10 171 .7 171 .7081871 .6577246 .7586496 .8254629 | 29. | 3 CHIM/11 88 .68 88 .6840909 .6188722 .7493096 .8370414 | 30. | 3 CHIM/12 261 .6 261 .5988506 .5571778 .6405234 .907426 | |------------------------------------------------------------------------------------------------| 31. | 4 GEO/01 216 .64 216 .6407407 .5978214 .68366 .8810589 | 32. | 4 GEO/02 366 .58 366 .5844262 .5486243 .6202282 .9260617 | 33. | 4 GEO/03 273 .69 273 .6901099 .6514474 .7287725 .8483921 | 34. | 4 GEO/04 374 .53 374 .5275401 .4908172 .564263 .9489614 | 35. | 4 GEO/05 354 .5 354 .5064972 .4687288 .5442656 .9607669 | 36. | 4 GEO/06 173 .66 173 .6589595 .613552 .704367 .85669 | 37. | 4 GEO/07 198 .74 198 .7464647 .7039593 .7889701 .7909209 | 38. | 4 GEO/08 586 .55 586 .5554608 .5269019 .5840196 .9356509 | 39. | 4 GEO/09 169 .58 169 .5840237 .5292237 .6388236 .931151 | 40. | 4 GEO/10 971 .48 971 .484552 .4627391 .5063648 .9561701 | 41. | 4 GEO/11 311 .46 311 .4578778 .4198019 .4959537 .9587746 | 42. | 4 GEO/12 647 .59 647 .592272 .564595 .619949 .9255775 | |------------------------------------------------------------------------------------------------| 43. | 5 BIO/01 195 .7 195 .6984615 .6526793 .7442438 .8322275 | 44. | 5 BIO/02 192 .48 192 .4848959 .4345819 .5352098 .9582317 | 45. | 5 BIO/03 272 .58 272 .5764706 .5332299 .6197113 .9351058 | 46. | 5 BIO/04 266 .69 266 .6913534 .6511974 .7315094 .8474092 | 47. | 5 BIO/05 497 .66 497 .6559356 .6260828 .6857884 .8813853 |


8

48. | 5 BIO/06 373 .58 373 .5847185 .5486994 .6207377 .9245422 | 49. | 5 BIO/07 928 .62 928 .6192888 .5967799 .6417977 .9076205 | 50. | 5 BIO/08 100 .68 100 .676 .6024436 .7495564 .83496 | 51. | 5 BIO/09 1287 .69 1287 .688345 .6705863 .7061036 .8517715 | 52. | 5 BIO/10 1981 .61 1981 .608733 .5938767 .6235893 .9071378 | 53. | 5 BIO/11 1233 .61 1233 .606326 .586795 .6258571 .9115777 | 54. | 5 BIO/12 336 .67 336 .6699405 .6344712 .7054097 .8688073 | 55. | 5 BIO/13 884 .64 884 .641629 .6187052 .6645527 .8902119 | 56. | 5 BIO/14 1268 .69 1268 .6902208 .671652 .7087896 .8475666 | 57. | 5 BIO/15 178 .66 178 .6606742 .6143414 .7070069 .866999 | 58. | 5 BIO/16 602 .58 602 .5813953 .5527404 .6100503 .929211 | 59. | 5 BIO/17 330 .64 330 .6448485 .6061161 .6835809 .8850236 | 60. | 5 BIO/18 536 .64 536 .6438432 .6128621 .6748244 .8834836 | 61. | 5 BIO/19 248 .65 248 .6516129 .61443 .6887959 .8566194 | |------------------------------------------------------------------------------------------------| 62. | 6 MED/01 270 .69 270 .6944444 .6517871 .7371017 .8293236 | 63. | 6 MED/02 70 .3 70 .2971428 .2368252 .3574605 .862102 | 64. | 6 MED/03 367 .71 367 .7098092 .6742164 .7454019 .8148186 | 65. | 6 MED/04 1042 .7 1042 .6957774 .6761039 .7154508 .8445085 | 66. | 6 MED/05 225 .58 225 .5844445 .5363173 .6325716 .9272481 | 67. | 6 MED/06 261 .72 261 .7199234 .6764021 .7634447 .7867882 | 68. | 6 MED/07 603 .63 603 .6333333 .6066545 .6600121 .885754 | 69. | 6 MED/08 509 .74 509 .7440079 .7161331 .7718827 .7848681 | 70. | 6 MED/09 1481 .66 1481 .6604321 .6420937 .6787705 .8703207 | 71. | 6 MED/10 293 .58 293 .5843003 .5417389 .6268616 .925899 | 72. | 6 MED/11 547 .64 547 .64351 .6115587 .6754614 .8678075 | 73. | 6 MED/12 279 .76 279 .7645161 .7271019 .8019302 .7377667 | 74. | 6 MED/13 445 .74 445 .7442697 .7141995 .7743398 .7758843 | 75. | 6 MED/14 193 .69 193 .6994818 .6529067 .746057 .8411132 | 76. | 6 MED/15 356 .8 356 .7985955 .7667505 .8304406 .6754563 | 77. | 6 MED/16 190 .79 190 .7931578 .748381 .8379347 .6764214 | 78. | 6 MED/17 266 .58 266 .5763158 .5277314 .6249001 .9108174 | 79. | 6 MED/18 1438 .43 1438 .4347705 .4146867 .4548543 .9840714 | 80. | 6 MED/19 143 .54 143 .5426573 .4854429 .5998717 .9386438 | 81. | 6 MED/20 101 .45 101 .4514851 .3858863 .5170839 .9387838 | 82. | 6 MED/21 134 .63 134 .6253732 .5637763 .6869701 .9031456 | 83. | 6 MED/22 186 .51 186 .5091398 .4535227 .5647569 .9642115 | 84. | 6 MED/23 193 .62 193 .6248705 .5731418 .6765992 .8990371 | 85. | 6 MED/24 284 .59 284 .5947183 .550729 .6387076 .9204186 | 86. | 6 MED/25 324 .65 324 .6481481 .6085313 .6877649 .8782007 | 87. | 6 MED/26 808 .75 808 .7506188 .7282478 .7729897 .7680842 | 88. | 6 MED/27 205 .51 205 .5126829 .4649731 .5603927 .9499263 | 89. | 6 MED/28 772 .51 772 .5055699 .478429 .5327109 .9707586 | 90. | 6 MED/29 126 .53 126 .5293651 .4641062 .594624 .9481452 | 91. | 6 MED/30 402 .53 402 .5330846 .4960828 .5700864 .9525887 | 92. | 6 MED/31 256 .53 256 .5324219 .4902169 .5746269 .9286641 | 93. | 6 MED/32 102 .46 102 .4607843 .3962723 .5252964 .9384434 | 94. | 6 MED/33 330 .46 330 .4581818 .4166142 .4997494 .9832045 | 95. | 6 MED/34 136 .56 136 .5625 .5003623 .6246377 .9427964 | 96. | 6 MED/35 254 .57 254 .5751969 .5283324 .6220614 .9320416 | 97. | 6 MED/36 700 .6 700 .6054286 .5789533 .6319038 .9164276 | 98. | 6 MED/37 76 .67 76 .6710526 .5976766 .7444286 .8663207 | 99. | 6 MED/38 647 .69 647 .6910356 .6642745 .7177966 .8432271 | 100. | 6 MED/39 162 .64 162 .637037 .5810713 .6930028 .8905361 | 101. | 6 MED/40 629 .55 629 .5518283 .5220804 .5815761 .9477206 | 102. | 6 MED/41 418 .46 418 .4626794 .4244416 .5009173 .9647754 | 103. | 6 MED/42 615 .57 615 .5738211 .5462984 .6013438 .9286225 | 104. | 6 MED/43 401 .3 401 .2970075 .262684 .3313309 .9874406 | 105. | 6 MED/44 228 .46 228 .4618421 .4076231 .5160611 .9754817 | 106. | 6 MED/45 83 .55 83 .5457831 .4787334 .6128328 .8769021 | 107. | 6 MED/46 218 .61 218 .6082569 .5610827 .6554312 .9132912 | 108. | 6 MED/47 10 .48 10 .48 .2542371 .7057629 .888 | 109. | 6 MED/48 40 .64 40 .6375 .5263239 .7486761 .8655 | 110. | 6 MED/49 144 .77 144 .7729167 .7226218 .8232116 .741605 | 111. | 6 MED/50 186 .64 186 .638172 .5867109 .6896332 .8927397 | |------------------------------------------------------------------------------------------------| 112. | 7 AGR/01 698 .33 698 .3293696 .3065997 .3521395 .932087 | 113. | 7 AGR/02 608 .56 608 .5555921 .5244523 .5867318 .9411075 | 114. | 7 AGR/03 442 .62 442 .6203619 .5881081 .6526158 .9001322 | 115. | 7 AGR/04 166 .56 166 .5608433 .5099678 .6117189 .8856646 | 116. | 7 AGR/05 275 .64 275 .6443637 .602819 .6859084 .8844295 | 117. | 7 AGR/06 79 .58 79 .5822785 .5145869 .6499701 .880659 | 118. | 7 AGR/07 584 .63 584 .6337329 .6063273 .6611385 .8891544 | 119. | 7 AGR/08 135 .65 135 .6496297 .593387 .7058723 .8793163 | 120. | 7 AGR/09 214 .48 214 .4831776 .4363012 .530054 .939685 | 121. | 7 AGR/10 113 .48 113 .4823009 .4219041 .5426977 .9311404 | 122. | 7 AGR/11 289 .56 289 .5602076 .5199205 .6004947 .9331087 |


9

123. | 7 AGR/12 494 .57 494 .5698381 .5403254 .5993508 .9174768 | 124. | 7 AGR/13 330 .66 330 .6615152 .6267755 .696255 .8632329 | 125. | 7 AGR/14 84 .68 84 .6845238 .6147241 .7543235 .8486234 | 126. | 7 AGR/15 628 .66 628 .6597134 .6347736 .6846532 .8724805 | 127. | 7 AGR/16 333 .72 333 .7204204 .6862288 .754612 .8196754 | 128. | 7 AGR/17 187 .59 187 .5887701 .5347431 .6427971 .9279169 | 129. | 7 AGR/18 209 .53 209 .5267943 .4799621 .5736264 .9344223 | 130. | 7 AGR/19 290 .53 290 .5351724 .4932683 .5770765 .9397674 | 131. | 7 AGR/20 103 .55 103 .5543689 .4830507 .6256871 .9449196 | 132. | 7 VET/01 172 .5 172 .5005814 .4492705 .5518923 .942995 | 133. | 7 VET/02 157 .55 157 .5547771 .5064589 .6030953 .8889065 | 134. | 7 VET/03 170 .67 170 .6670588 .6209071 .7132105 .8515956 | 135. | 7 VET/04 159 .52 159 .5245283 .467449 .5816076 .9480948 | 136. | 7 VET/05 206 .65 206 .6490291 .6048216 .6932367 .8661808 | 137. | 7 VET/06 135 .84 135 .8355555 .791581 .87953 .6384442 | 138. | 7 VET/07 80 .59 80 .59375 .5226468 .6648532 .891 | 139. | 7 VET/08 206 .49 206 .4941748 .4476274 .5407222 .9421663 | 140. | 7 VET/09 171 .45 171 .4543859 .404194 .5045779 .9383965 | 141. | 7 VET/10 132 .56 132 .5621213 .5074855 .616757 .8765155 | |------------------------------------------------------------------------------------------------| 142. | 8a ICAR/10 214 .51 214 .5130841 .4759379 .5502303 .8480546 | 143. | 8a ICAR/11 94 .36 94 .3574468 .2890255 .4258681 .9628885 | 144. | 8a ICAR/12 369 .46 369 .4574526 .4285465 .4863586 .8776607 | 145. | 8a ICAR/13 325 .45 325 .4452308 .4146841 .4757774 .8759903 | 146. | 8a ICAR/14 717 .46 717 .4619247 .4415237 .4823257 .8695822 | 147. | 8a ICAR/15 56 .47 56 .4678572 .3980767 .5376376 .8341849 | 148. | 8a ICAR/16 60 .46 60 .465 .4005345 .5294655 .8166413 | 149. | 8a ICAR/17 428 .37 428 .3684579 .3404844 .3964315 .9343889 | 150. | 8a ICAR/18 398 .56 398 .5565327 .5284516 .5846137 .8496445 | 151. | 8a ICAR/19 265 .58 265 .5773585 .5441098 .6106072 .8414325 | 152. | 8a ICAR/20 263 .38 263 .3844106 .3480192 .4208021 .9234824 | 153. | 8a ICAR/21 338 .4 338 .4 .3689646 .4310355 .9053456 | 154. | 8a ICAR/22 132 .49 132 .4924242 .4434648 .5413837 .8622792 | |------------------------------------------------------------------------------------------------| 155. | 8b ICAR/01 263 .64 263 .6403042 .5990291 .6815794 .8749348 | 156. | 8b ICAR/02 369 .67 369 .6663957 .6310613 .7017301 .869189 | 157. | 8b ICAR/03 210 .67 210 .6742858 .6255238 .7230477 .8546131 | 158. | 8b ICAR/04 159 .54 159 .535849 .4809872 .5907109 .9370497 | 159. | 8b ICAR/05 171 .56 171 .5578948 .5069222 .6088673 .9216229 | 160. | 8b ICAR/06 239 .46 239 .4623431 .4213772 .503309 .9334197 | 161. | 8b ICAR/07 297 .65 297 .6538721 .6140051 .6937391 .8794848 | 162. | 8b ICAR/08 620 .66 620 .6608065 .6328904 .6887226 .8672942 | 163. | 8b ICAR/09 581 .67 581 .6669535 .6384438 .6954632 .8677672 | 164. | 8b ING-IND/28 53 .44 53 .4377359 .3438848 .5315869 .9226977 | 165. | 8b ING-IND/29 31 .4 31 .4032258 .2674164 .5390353 .9915057 | 166. | 8b ING-IND/30 17 .46 17 .4588235 .2647882 .6528589 .9467037 | |------------------------------------------------------------------------------------------------| 167. | 9 ING-IND/01 98 .36 98 .3591837 .2915376 .4268297 .9553787 | 168. | 9 ING-IND/02 29 .38 29 .3793103 .2500741 .5085465 .904673 | 169. | 9 ING-IND/03 63 .56 63 .5587302 .4688018 .6486586 .914923 | 170. | 9 ING-IND/04 119 .63 119 .6285715 .5707747 .6863682 .8887961 | 171. | 9 ING-IND/05 52 .63 52 .6307692 .5484098 .7131286 .8591961 | 172. | 9 ING-IND/06 186 .64 186 .6430108 .5897904 .6962312 .8820333 | 173. | 9 ING-IND/07 49 .58 49 .5795919 .4800947 .679089 .924644 | 174. | 9 ING-IND/08 338 .62 338 .6162722 .5789992 .6535452 .9084503 | 175. | 9 ING-IND/09 397 .62 397 .6244332 .58963 .6592364 .9017341 | 176. | 9 ING-IND/10 330 .68 330 .6772727 .6409829 .7135625 .8589659 | 177. | 9 ING-IND/11 371 .55 371 .5493261 .5094622 .5891901 .9426476 | 178. | 9 ING-IND/12 103 .56 103 .5621359 .5049372 .6193345 .8712245 | 179. | 9 ING-IND/13 384 .6 384 .5955729 .5607693 .6303765 .9118122 | 180. | 9 ING-IND/14 338 .63 338 .628994 .5933108 .6646773 .8969734 | 181. | 9 ING-IND/15 166 .51 166 .5054217 .4572755 .5535679 .9095706 | 182. | 9 ING-IND/16 336 .6 336 .5997024 .5621476 .6372572 .915954 | 183. | 9 ING-IND/17 270 .56 270 .5585185 .5143824 .6026545 .9371695 | 184. | 9 ING-IND/18 27 .48 27 .5037037 .3957796 .6116276 .8395339 | 185. | 9 ING-IND/19 76 .51 76 .5131579 .4378844 .5884314 .9274477 | 186. | 9 ING-IND/20 21 .57 21 .5666667 .4621716 .6711617 .7455304 | 187. | 9 ING-IND/21 168 .56 168 .5619048 .5098302 .6139794 .921123 | 188. | 9 ING-IND/22 916 .7 916 .6987991 .6774953 .7201028 .8416814 | 189. | 9 ING-IND/23 42 .69 42 .6880953 .5948062 .7813843 .8449649 | 190. | 9 ING-IND/24 156 .68 156 .6814103 .6261913 .7366292 .851768 | 191. | 9 ING-IND/25 250 .78 250 .7776 .7428873 .8123127 .7519104 | 192. | 9 ING-IND/26 77 .65 77 .6532468 .5710775 .735416 .8650364 | 193. | 9 ING-IND/27 142 .82 142 .8246479 .7774283 .8718675 .6306531 | 194. | 9 ING-IND/31 377 .62 377 .6190981 .5856194 .6525769 .8975046 | 195. | 9 ING-IND/32 222 .63 222 .6301802 .5786401 .6817203 .8710035 | 196. | 9 ING-IND/33 203 .63 203 .6305419 .5807949 .6802888 .8997098 |


10

197. | 9 ING-IND/34 184 .7 184 .7027174 .6549932 .7504417 .8353894 | 198. | 9 ING-IND/35 411 .58 411 .583455 .5472161 .6196938 .9281088 | 199. | 9 ING-INF/01 822 .68 822 .6783454 .6558338 .700857 .8620469 | 200. | 9 ING-INF/02 390 .71 390 .7141026 .6828988 .7453063 .8288871 | 201. | 9 ING-INF/03 858 .7 858 .7027973 .6796472 .7259474 .8239969 | 202. | 9 ING-INF/04 593 .72 593 .7172006 .6892968 .7451045 .8052736 | 203. | 9 ING-INF/05 1898 .58 1898 .5770285 .5606025 .5934545 .9286059 | 204. | 9 ING-INF/06 325 .67 325 .6707692 .6356747 .7058637 .8631135 | 205. | 9 ING-INF/07 287 .63 287 .6337979 .5937717 .6738241 .8965771 | |------------------------------------------------------------------------------------------------| 206. | 10 L-ANT/01 80 .59 80 .59375 .5412827 .6462173 .76275 | 207. | 10 L-ANT/02 146 .57 146 .5746575 .5337391 .6155759 .7446194 | 208. | 10 L-ANT/03 196 .58 196 .5765306 .5347365 .6183248 .8403116 | 209. | 10 L-ANT/04 44 .49 44 .4931818 .3980507 .5883129 .9160442 | 210. | 10 L-ANT/05 35 .71 35 .7114286 .6086136 .8142436 .8267559 | 211. | 10 L-ANT/06 70 .63 70 .6442857 .5940049 .6945665 .6832364 | 212. | 10 L-ANT/07 279 .61 279 .6146954 .5855274 .6438634 .7487881 | 213. | 10 L-ANT/08 144 .62 144 .6236111 .5868807 .6603414 .7366819 | 214. | 10 L-ANT/09 73 .46 73 .4616438 .3819698 .5413178 .936258 | 215. | 10 L-ANT/10 91 .57 91 .5725275 .5084254 .6366295 .8772702 | 216. | 10 L-ART/01 154 .46 154 .4558441 .407401 .5042872 .9093514 | 217. | 10 L-ART/02 250 .5 250 .4984 .4582606 .5385395 .9138432 | 218. | 10 L-ART/03 162 .45 162 .4481481 .402302 .4939943 .8959169 | 219. | 10 L-ART/04 157 .44 157 .443949 .3955689 .4923292 .9152742 | 220. | 10 L-ART/05 175 .59 175 .5908571 .5498729 .6318413 .8317395 | 221. | 10 L-ART/06 251 .61 251 .612749 .578982 .6465161 .797698 | 222. | 10 L-ART/07 198 .63 198 .6257575 .5854242 .6660908 .8271142 | 223. | 10 L-ART/08 34 .61 34 .6117647 .5183839 .7051455 .8138251 | 224. | 10 L-FIL-LET/01 34 .69 34 .6911765 .6129878 .7693651 .7453325 | 225. | 10 L-FIL-LET/02 265 .62 265 .6249057 .5918807 .6579307 .8139277 | 226. | 10 L-FIL-LET/04 323 .57 323 .5681115 .5328887 .6033343 .8859136 | 227. | 10 L-FIL-LET/05 134 .62 134 .6216418 .570408 .6728756 .8525352 | 228. | 10 L-FIL-LET/06 66 .55 66 .5484849 .4674881 .6294816 .8980302 | 229. | 10 L-FIL-LET/07 55 .62 55 .6200001 .5394083 .7005919 .840238 | 230. | 10 L-FIL-LET/08 97 .64 97 .6381443 .5720592 .7042295 .8669335 | 231. | 10 L-FIL-LET/09 177 .65 177 .6548023 .6127294 .6968752 .7919087 | 232. | 10 L-FIL-LET/10 568 .58 568 .5802817 .5577171 .6028462 .822961 | 233. | 10 L-FIL-LET/11 234 .54 234 .5350427 .4995475 .5705379 .8458022 | 234. | 10 L-FIL-LET/12 321 .67 321 .6697819 .6397831 .6997807 .8100643 | 235. | 10 L-FIL-LET/13 110 .76 110 .7563636 .7122638 .8004634 .7543674 | 236. | 10 L-FIL-LET/14 160 .5 160 .4975 .4464874 .5485126 .9075855 | 237. | 10 L-FIL-LET/15 107 .47 107 .4700935 .4090764 .5311106 .8777285 | 238. | 10 L-LIN/01 535 .58 535 .5844859 .5578201 .6111518 .859812 | 239. | 10 L-LIN/02 107 .48 107 .4841121 .4301455 .5380788 .8303329 | 240. | 10 L-LIN/03 237 .59 237 .5881857 .5504878 .6258836 .8431727 | 241. | 10 L-LIN/04 239 .53 239 .5297071 .4876302 .571784 .922546 | 242. | 10 L-LIN/05 179 .56 179 .5636871 .5138766 .6134977 .9081072 | 243. | 10 L-LIN/06 62 .51 62 .5080645 .4439977 .5721313 .7941318 | 244. | 10 L-LIN/07 246 .44 246 .4447154 .4075302 .4819006 .900933 | 245. | 10 L-LIN/08 37 .56 37 .5621622 .4627847 .6615396 .8292075 | 246. | 10 L-LIN/09 25 .42 25 .424 .3213646 .5266353 .77952 | 247. | 10 L-LIN/10 411 .57 411 .5703163 .5421346 .598498 .8503365 | 248. | 10 L-LIN/11 108 .59 108 .5916666 .5281811 .6551522 .8373981 | 249. | 10 L-LIN/12 605 .57 605 .5723967 .547857 .5969363 .8707083 | 250. | 10 L-LIN/13 211 .62 211 .6236967 .5823539 .6650394 .8632539 | 251. | 10 L-LIN/14 197 .53 197 .5314721 .4950941 .5678501 .8132924 | 252. | 10 L-LIN/15 14 .41 14 .4071429 .2305728 .5837129 .9183698 | 253. | 10 L-LIN/16 8 .74 8 .7375 .5871471 .887853 .6375 | 254. | 10 L-LIN/17 20 .59 20 .59 .4206719 .7593281 .888 | 255. | 10 L-LIN/18 18 .67 18 .6722223 .5241399 .8203046 .7777689 | 256. | 10 L-LIN/19 16 .57 16 .56875 .4092039 .7282962 .871875 | 257. | 10 L-LIN/20 14 .31 14 .3071429 .1809004 .4333854 .7959159 | 258. | 10 L-LIN/21 269 .58 269 .575093 .5371016 .6130844 .8683488 | 259. | 10 L-OR/01 20 .66 20 .665 .5074834 .8225166 .87 | 260. | 10 L-OR/02 26 .56 26 .5615385 .4651216 .6579553 .7633079 | 261. | 10 L-OR/03 15 .68 15 .6800001 .5142353 .8457649 .8213547 | 262. | 10 L-OR/04 14 .85 14 .85 .7633924 .9366075 .6 | 263. | 10 L-OR/05 35 .61 35 .6142857 .5304869 .6980845 .7699562 | 264. | 10 L-OR/06 25 .48 25 .484 .3945648 .5734352 .74496 | 265. | 10 L-OR/07 18 .72 18 .7166667 .6384767 .7948567 .5259541 | 266. | 10 L-OR/08 20 .74 20 .745 .6097811 .8802189 .786 | 267. | 10 L-OR/09 13 .61 13 .6076923 .4768743 .7385103 .7385354 | 268. | 10 L-OR/10 45 .5 45 .4955555 .401835 .5892761 .8510051 | 269. | 10 L-OR/11 8 .63 8 .625 .4170424 .8329576 .675 | 270. | 10 L-OR/12 78 .53 78 .5294872 .4583619 .6006125 .8902955 | 271. | 10 L-OR/13 18 .7 18 .7 .5781898 .8218102 .80008 | 272. | 10 L-OR/14 12 .71 12 .7083333 .4890643 .9276024 .74992 |


11

273. | 10 L-OR/15 16 .52 16 .51875 .3689565 .6685435 .815625 | 274. | 10 L-OR/16 10 .68 10 .68 .4185275 .9414725 .768 | 275. | 10 L-OR/17 13 .62 13 .623077 .4519043 .7942497 .8378656 | 276. | 10 L-OR/18 18 .73 18 .7333333 .5850706 .8815961 .80008 | 277. | 10 L-OR/19 13 .52 13 .5153846 .4020929 .6286764 .6817463 | 278. | 10 L-OR/20 17 .53 17 .5294118 .3604765 .698347 .7889597 | 279. | 10 L-OR/21 95 .61 95 .6136842 .5592945 .6680739 .779403 | 280. | 10 L-OR/22 70 .67 70 .6728571 .6043496 .7413646 .8331326 | 281. | 10 L-OR/23 16 .57 16 .56875 .4713681 .6661319 .609375 | |------------------------------------------------------------------------------------------------| 282. | 11a M-DEA/01 295 .55 295 .5515254 .5170678 .585983 .8821782 | 283. | 11a M-EDF/01 146 .53 146 .5287672 .478882 .5786524 .8975261 | 284. | 11a M-EDF/02 156 .53 156 .5339743 .4837208 .5842279 .9117197 | 285. | 11a M-FIL/01 293 .56 293 .5573379 .5257625 .5889133 .8109682 | 286. | 11a M-FIL/02 188 .52 188 .5223404 .4779127 .5667681 .9025901 | 287. | 11a M-FIL/03 324 .53 324 .5339506 .5053112 .5625901 .8198347 | 288. | 11a M-FIL/04 146 .64 146 .6369863 .5961485 .6778241 .6944765 | 289. | 11a M-FIL/05 228 .52 228 .5184211 .4827638 .5540783 .8414811 | 290. | 11a M-FIL/06 441 .57 441 .5770975 .5521489 .6020461 .8068988 | 291. | 11a M-FIL/07 102 .59 102 .5852941 .5271181 .6434702 .8608368 | 292. | 11a M-FIL/08 87 .73 87 .7275863 .6757127 .7794598 .7708212 | 293. | 11a M-GGR/01 351 .48 351 .4806268 .4492741 .5119795 .894721 | 294. | 11a M-GGR/02 245 .43 245 .4322449 .3981586 .4663311 .8577494 | 295. | 11a M-PED/01 555 .69 555 .6918918 .668551 .7152327 .8109737 | 296. | 11a M-PED/02 160 .58 160 .583125 .5307776 .6354724 .9088643 | 297. | 11a M-PED/03 406 .58 406 .5805418 .5524934 .6085903 .8519087 | 298. | 11a M-PED/04 138 .54 138 .5434783 .4959123 .5910442 .8512377 | 299. | 11a M-STO/01 345 .54 345 .5391304 .5065683 .5716926 .894434 | 300. | 11a M-STO/02 517 .57 517 .5700193 .5444534 .5955852 .8684032 | 301. | 11a M-STO/03 58 .47 58 .4672414 .3944286 .5400541 .8639913 | 302. | 11a M-STO/04 763 .44 763 .4441678 .4240597 .4642758 .8816385 | 303. | 11a M-STO/05 109 .54 109 .5431193 .479064 .6071745 .9090363 | 304. | 11a M-STO/06 49 .61 49 .6122449 .5479828 .6765071 .7087598 | 305. | 11a M-STO/07 121 .65 121 .6545454 .6021325 .7069584 .8273545 | 306. | 11a M-STO/08 149 .63 149 .6328859 .5871179 .678654 .7631704 | 307. | 11a M-STO/09 104 .62 104 .6182692 .5579792 .6785592 .8235783 | |------------------------------------------------------------------------------------------------| 308. | 11b M-PSI/01 552 .58 552 .5798913 .5505286 .609254 .9273064 | 309. | 11b M-PSI/02 326 .8 326 .8030674 .7714233 .8347116 .6845905 | 310. | 11b M-PSI/03 144 .58 144 .5784722 .5189164 .638028 .9256922 | 311. | 11b M-PSI/04 355 .51 355 .5078873 .4688559 .5469187 .9426709 | 312. | 11b M-PSI/05 325 .51 325 .5076923 .466552 .5488327 .9542034 | 313. | 11b M-PSI/06 153 .43 153 .4346405 .3758807 .4934004 .960259 | 314. | 11b M-PSI/07 208 .32 208 .3221154 .276562 .3676688 .9664209 | 315. | 11b M-PSI/08 322 .45 322 .4521739 .4110678 .49328 .9838093 | |------------------------------------------------------------------------------------------------| 316. | 12 IUS/01 1282 .49 1282 .4922777 .4757894 .5087659 .8962382 | 317. | 12 IUS/02 310 .56 310 .562258 .5310795 .5934365 .8448058 | 318. | 12 IUS/03 87 .56 87 .5551724 .5049279 .6054169 .7790681 | 319. | 12 IUS/04 752 .44 752 .4389628 .4190766 .458849 .8738998 | 320. | 12 IUS/05 134 .51 134 .5141791 .4733709 .5549872 .7739059 | 321. | 12 IUS/06 87 .54 87 .5390805 .4837334 .5944276 .8120363 | 322. | 12 IUS/07 542 .52 542 .5162361 .4943288 .5381434 .8120659 | 323. | 12 IUS/08 466 .49 466 .4903434 .467515 .5131719 .8100526 | 324. | 12 IUS/09 563 .37 563 .3731794 .3517056 .3946532 .867029 | 325. | 12 IUS/10 773 .47 773 .4667529 .4478075 .4856984 .8457004 | 326. | 12 IUS/11 201 .56 201 .5646766 .5292785 .6000748 .7646397 | 327. | 12 IUS/12 353 .45 353 .4538243 .4241345 .4835142 .878072 | 328. | 12 IUS/13 518 .56 518 .5584942 .5350789 .5819095 .8127351 | 329. | 12 IUS/14 225 .47 225 .4706667 .4329691 .5083643 .8781778 | 330. | 12 IUS/15 370 .45 370 .45 .4226387 .4773613 .8545651 | 331. | 12 IUS/16 343 .55 343 .5451895 .5177181 .5726609 .7927221 | 332. | 12 IUS/17 503 .46 503 .4574552 .4341927 .4807177 .8462366 | 333. | 12 IUS/18 442 .53 442 .5264706 .5004898 .5524514 .8451304 | 334. | 12 IUS/19 295 .62 295 .6210169 .5904813 .6515525 .7583557 | 335. | 12 IUS/20 477 .53 477 .5283019 .5059399 .5506639 .7955457 | 336. | 12 IUS/21 250 .54 250 .5428001 .5120733 .5735269 .7615104 | |------------------------------------------------------------------------------------------------| 337. | 13 SECS-P/01 1497 .58 1497 .5812959 .5615872 .6010047 .9303198 | 338. | 13 SECS-P/02 614 .52 614 .5237785 .4929782 .5545788 .9645323 | 339. | 13 SECS-P/03 314 .52 314 .5187898 .4755946 .561985 .9586228 | 340. | 13 SECS-P/04 61 .35 61 .352459 .2699427 .4349753 .9616555 | 341. | 13 SECS-P/05 128 .74 128 .74375 .678866 .808634 .7125692 | 342. | 13 SECS-P/06 327 .49 327 .4883792 .4429284 .53383 .9580128 | 343. | 13 SECS-P/07 1367 .33 1367 .3286759 .3107951 .3465568 .9695954 | 344. | 13 SECS-P/08 1159 .43 1159 .4342537 .4134 .4551074 .974891 | 345. | 13 SECS-P/09 166 .26 166 .263253 .2081969 .3183092 .9686028 |


12

346. | 13 SECS-P/10 302 .43 302 .4377483 .3959181 .4795786 .9724361 | 347. | 13 SECS-P/11 449 .24 449 .2438753 .2132408 .2745098 .9315313 | 348. | 13 SECS-P/12 315 .39 315 .3885714 .3553555 .4217873 .9227898 | 349. | 13 SECS-P/13 183 .42 183 .415847 .3586887 .4730052 .9672577 | 350. | 13 SECS-S/01 794 .58 794 .584131 .5578135 .6104485 .928801 | 351. | 13 SECS-S/02 45 .49 45 .4933333 .3724279 .6142388 .9706987 | 352. | 13 SECS-S/03 281 .42 281 .416726 .3728487 .4606033 .9906839 | 353. | 13 SECS-S/04 131 .44 131 .4374046 .3692159 .5055932 .976594 | 354. | 13 SECS-S/05 130 .42 130 .4153846 .3550242 .475745 .9667119 | 355. | 13 SECS-S/06 776 .5 776 .5034794 .4768156 .5301433 .9501482 | |------------------------------------------------------------------------------------------------| 356. | 14 SPS/01 202 .48 202 .4846535 .4407346 .5285723 .9208028 | 357. | 14 SPS/02 227 .52 227 .5171806 .4758556 .5585056 .9089143 | 358. | 14 SPS/03 122 .55 122 .5459017 .499368 .5924354 .7939582 | 359. | 14 SPS/04 430 .52 430 .5188372 .4923977 .5452767 .8553597 | 360. | 14 SPS/05 44 .61 44 .6090909 .5121181 .7060636 .8876221 | 361. | 14 SPS/06 125 .44 125 .444 .390145 .497855 .9094656 | 362. | 14 SPS/07 770 .34 770 .3435065 .3233141 .3636989 .9192759 | 363. | 14 SPS/08 577 .39 577 .3902946 .3678372 .4127519 .8901405 | 364. | 14 SPS/09 292 .41 292 .4085616 .3732485 .4438747 .9249748 | 365. | 14 SPS/10 153 .41 153 .4091503 .3624002 .4559005 .898542 | 366. | 14 SPS/11 88 .4 88 .3965909 .3296306 .4635512 .9306736 | 367. | 14 SPS/12 109 .38 109 .3834862 .3277607 .4392118 .9203589 | 368. | 14 SPS/13 56 .5 56 .4964286 .4154586 .5773985 .8954247 | 369. | 14 SPS/14 47 .63 47 .6340426 .554315 .7137701 .7801075 | +------------------------------------------------------------------------------------------------+

Una visualizzazione grafica di questi Intervalli di Confidenza può forse aiutare: nella presente relazione si riportano i grafici relativi alle Aree e GEV di SSD presenti presso il Dipartimento SUSS in maniera consistente: Area 5, Area 6, Area 10, Area 11a, Area 11b, Area 14.

BIO/01

BIO/02

BIO/03

BIO/04

BIO/05

BIO/06

BIO/07

BIO/08 BIO/09

BIO/10 BIO/11

BIO/12BIO/13

BIO/14BIO/15

BIO/16

BIO/17 BIO/18 BIO/19

0

.1

.4

.7

1

Voto

med

io

SSD

GEV 5


13

MED/01

MED/02

MED/03MED/04

MED/05

MED/06

MED/07

MED/08

MED/09

MED/10

MED/11

MED/12MED/13

MED/14

MED/15MED/16

MED/17

MED/18

MED/19

MED/20

MED/21

MED/22

MED/23MED/24

MED/25

MED/26

MED/27MED/28MED/29MED/30MED/31

MED/32MED/33

MED/34MED/35

MED/36

MED/37MED/38

MED/39

MED/40

MED/41

MED/42

MED/43

MED/44

MED/45

MED/46

MED/47

MED/48

MED/49

MED/50

0

.1

.4

.7

1

Voto

med

io

SSD

GEV 6

L-ANT/01L-ANT/02L-ANT/03

L-ANT/04

L-ANT/05

L-ANT/06L-ANT/07L-ANT/08

L-ANT/09

L-ANT/10

L-ART/01

L-ART/02

L-ART/03L-ART/04

L-ART/05L-ART/06

L-ART/07L-ART/08

L-FIL-LET/01

L-FIL-LET/02

L-FIL-LET/04

L-FIL-LET/05

L-FIL-LET/06

L-FIL-LET/07L-FIL-LET/08

L-FIL-LET/09

L-FIL-LET/10

L-FIL-LET/11

L-FIL-LET/12

L-FIL-LET/13

L-FIL-LET/14L-FIL-LET/15

L-LIN/01

L-LIN/02

L-LIN/03

L-LIN/04

L-LIN/05

L-LIN/06

L-LIN/07

L-LIN/08

L-LIN/09

L-LIN/10L-LIN/11

L-LIN/12

L-LIN/13

L-LIN/14

L-LIN/15

L-LIN/16

L-LIN/17

L-LIN/18

L-LIN/19

L-LIN/20

L-LIN/21

L-OR/01

L-OR/02

L-OR/03

L-OR/04

L-OR/05

L-OR/06

L-OR/07L-OR/08

L-OR/09

L-OR/10

L-OR/11

L-OR/12

L-OR/13L-OR/14

L-OR/15

L-OR/16

L-OR/17

L-OR/18

L-OR/19L-OR/20

L-OR/21

L-OR/22

L-OR/23

0

.1

.4

.7

1

Voto

med

io

SSD

GEV 10


14

M-DEA/01M-EDF/01M-EDF/02

M-FIL/01

M-FIL/02M-FIL/03

M-FIL/04

M-FIL/05

M-FIL/06M-FIL/07

M-FIL/08

M-GGR/01

M-GGR/02

M-PED/01

M-PED/02M-PED/03

M-PED/04M-STO/01M-STO/02

M-STO/03M-STO/04

M-STO/05

M-STO/06

M-STO/07M-STO/08

M-STO/09

0

.1

.4

.7

1

Voto

med

io

SSD

GEV 11a

M-PSI/01

M-PSI/02

M-PSI/03

M-PSI/04 M-PSI/05

M-PSI/06

M-PSI/07

M-PSI/08

0

.1

.4

.7

1

Voto

med

io

SSD

GEV 11b


15

Dalla visualizzazione di questi dati appare dunque evidente come in GEV e alcuni SSD la stima del “Voto medio” sia molto più precisa che in altri: pertanto, nel momento in cui si vadano ad aggregare i dati relativi ai Dipartimenti per specifico GEV, o si vadano a valutare i risultati ottenuti da specifiche aggregazioni di SSD, sarà opportuno non limitarsi soltanto al “migliore/peggiore” del voto medio, ma andrebbe considerata anche la compatibilità dei risultati ottenuti con l’intervallo di confidenza dei voti medi “stimati” sulla base del campione VQR (e non “calcolati” come in genere lascia intendere ANVUR…). Inoltre, avere una composizione “particolare” per SSD in una certa Area/GEV potrebbe portare a valutazioni della prestazione dei gruppi di ricercatori “distorti” dalla composizione dipartimentale dei rappresentati di quell’Area/GEV, che invece i documenti ANVUR confrontano con la composizione percentuale generale nazionale di area. Questo ragionamento è alla base del calcolo di R di Area/GEV “standardizzati” per composizione per SSD nel Dipartimento. R “Standardizzati per composizione” Moltiplicando le stime puntuali e intervallari di “voto medio” per SSD per il numero di prodotti attesi nel dipartimento per ciascun SSD è possibile calcolare quali sarebbero stati i punteggi totali ottenibili se la valutazione dei prodotti presentati da ricercatori del SSD fosse risultata sovrapponibile alla valutazione media nazionale di tutti i riercatori del SSD. La somma di questi punteggi “attesi” permette di calcolare degli R “standardizzati per composizione” nelle diverse Aree/GEV e un R “complessivo” di Dipartimento. I dati per il SUSS sono riportati nella tabella seguente:

SPS/01

SPS/02SPS/03

SPS/04

SPS/05

SPS/06

SPS/07

SPS/08SPS/09 SPS/10

SPS/11SPS/12

SPS/13

SPS/14

0

.1

.4

.7

1

Voto

med

io

SSD

GEV 14


16

Si evidenzia come il valore di R riportato nelle relazioni ANVUR tenda a sottostimare la prestazione dei docenti e ricercatori delle Aree 5, 6 e 14, e a sovrastimare la prestazione delle Aree 11a e 11b. Il valore di R Standardizzato resta sostanzialmente sovrapponibile a quello riportato dai documenti ANVUR per l’Area 10, che rimane superiore alla prestazione media nazionale. La differenza qualitativamente più rilevante è comunque quella dell’Area 6, che nella versione ANVUR presenta un R leggermente inferiore alla media nazionale, mentre nella versione standardizzata (che tiene conto della molto specifica composizione per SSD di questa Area nel SUSS) la valutazione si pone leggermente superiore alla media nazionale, o comunque del tutto allineata alla media nazionale dell’Area Medica.



17

MONITORAGGIO DELLA PROGETTUALITÀ DELLA RICERCA DEGLI AFFERENTI AL DIPARTIMENTO (ANNI 2015-2017)

Il collegio per l’assicurazione della qualità ha annualmente monitorato le domande di

finanziamento per progetti di ricerca presentate, o valutate e ottenute dagli afferenti del DIPSUSS negli anni 2015-2017. Sono quindi stati considerati anche i progetti competitivi presentati prima del 1 gennaio 2015, ma valutati positivamente, finanziati, avviati o attivi nel 2015 o seguenti. Nella presentazione i progetti sono stati divisi in tre categorie: PRIN (A), Europei (H2020, Erasmus plus…) (B) e altri (C). A. Progetti PRIN, bando 2015. Per ulteriori dettagli (titolo del progetto, centri di ricerca coinvolti, partecipanti…), si rimanda alla banca dati del MIUR. A1. Progetti PRIN, bando 2015, finanziati: Coordinatore nazionale (PI) Responsabile unità locale, SUSS SANTI Francesco, CASSINO e LAZIO MERIDIONALE

SANTI Francesco

A2. Progetti PRIN, bando 2015, presentati: Coordinatore nazionale (PI) Responsabile unità locale, SUSS BAIESI Serena, BOLOGNA BARONTI MARCHIO' Roberto CARRARO Attilio, PADOVA BORGOGNI Antonio DI CRISTO Cristiana , CASSINO e LAZIO MERIDIONALE

CAPELLI Giovanni

GIOVANNELLA Carlo, ROMA Tor Vergata CARTELLI Antonio PINTAUDI Rosario, MESSINA DEL CORSO Lucio MORISI Massimo, FIRENZE ESPOSITO Maurizio TAGLIAMONTE Gianluca, SALENTO POLITO Eugenio CERRETI Claudio, ROMATRE RIGGIO Andrea MAUCERI Sergio, ROMA Sapienza SANNELLA Alessandra BENEDETTI Marina, SIENA Stranieri SCHIRRU Giancarlo ROSATI Gianpiero, Scuola Normale Superiore PISA

STRAMAGLIA Antonio

ZECCHINI Giuseppe, Cattolica del Sacro Cuore (MILANO)

TANTILLO Ignazio

FORCINA Marisa SALENTO MISITI Francesco, CASSINO e LAZIO MERIDIONALE

TARICONE Fiorenza MISITI Francesco

B. Progetti competitivi europei 2015-17 B1. progetti competitivi finanziati Programma

Coordinatore Progetto

Responsabile SUSS

Titolo e acronimo Presentato (data)

Approvato / Finanziato (data)

Durata (da- al)

JPI: Health diet for a Healthy Life

CAPRANICA Laura, UniRoma4 (Foro Italico)

CASTELLANI Loriana

The Determinants of Diet and Physical Activity (DEDIPAC) Knowledge Hub”- DEDIPAC KH

01/07/13

18/04/14

01/12/ 2013- 30/11/2016

H2020

KUNST Anton, AMC Amsterdam

FEDERICO Bruno

Enhancing the effectiveness of programs and strategies to prevent youth smoking: a comparative realist evaluation of 7 European cities - SILNE-R

01/08/14

01/01/15

ott. 2015 – sett. 2018


18

Erasmus Plus KA2

BORGOGNI Antonio, CASSINO e LAZIO MERIDIONALE

BORGOGNI Antonio

Strategy to Action – Supporting the professionalisation of sport organisations through the definition of work-based competencies and the development of fit-for-purpose training for Sport Administrators - S2A

30/03/15

07/08/15

01/09/2015- 28/02/2018

Erasmus Plus KA2


BORGOGNI Antonio

International Network to implement EU physical activity guidelines on infrastrucutre development - IMPALA.net

12/12/14

01/01/2015- 31/12/2016

Realdania Foundation (DK)

Project leader Centre for Sports and Architecture (KADK), The Royal Danish Academy of Fine Arts, Schools of Architecture, Design and Conservation

BORGOGNI Antonio

Establishment of the research network Activity and health-enhancing physical environments Network- APENACN

12/12/14

2015- 2019

Erasmus Plus KA2


BORGOGNI Antonio,

A European Sector Skills Alliance for Sport- SASPORT

26/02/16

01/08/16

01/11/2016 -31/10/2019

Erasmus Plus HE-STA-T – Staff mobility for Teaching To/From Partner Countries

SCHIRRU Giancarlo, CASSINO e LAZIO MERIDIONALE

SCHIRRU Giancarlo

KA 107. International credit mobility. Project n# 2016-1-IT02-KA107-023713-Armenia

08/02/16

06/06/16

01/11/2016- 31/10/2018

B2. progetti competitivi valutati positivamente Programma


Responsabile SUSS


Valutato positivamente (data)

Erasmus Plus KA2


BORGOGNI Antonio

sPort for aLl ActivitY lEader Employment and tRaining -PLAYER

23/03/15

14/09/2015

Humanities in the European research Area - Joint Research Programme (HERA JRP)

D'ALESSANDRO Roberta, Leiden University

SCHIRRU Giancarlo

Languages as cultural objects. Documenting and understanding the southern Italian language spectrum - LangCult

03/04/15

22/06/15

Erasmus Plus


BORGOGNI Antonio

Active Cities Through Urban Participatory Planning: Local strategies to promote physical activity among socially disadvantaged people- ACT-UPP

12/05/16

21/09/2016

Erasmus Plus KA2

BORGOGNI Antonio, CASSINO e

BORGOGNI Antonio

sPort for aLl ActivitY lEader Employment and tRaining-

30/03/16

15/07/2016


19

LAZIO MERIDIONALE

PLAYER

B3. progetti competitivi presentati Programma


Responsabile SUSS


2017- EAC/A03/2016- Collaborative Partnership


BORGOGNI Antonio

Active Cities Through Urban Participatory Planning: Local strategies to promote physical activity and active- ACT-UPP

05/04/2017

Erasmus Plus 2017- EAC/A03/2016

Paris-Lodron-Universität Salzburg/University of Salzburg, Austria

Università degli Studi di Cassino e del Lazio Meridionale, associated with CUS Cassino

Athletic migration: Dual Career and qualification in sports -AMID

ERASMUS PLUS - KA202

CINGIENE Vilma, Mykolo Romerio Universitetas

BORGOGNI Antonio

sPort for aLl ActivitY lEadeR skills development

29/03/17

Erasmus Plus - Small Collaborative Partnerships, EAC/A03/2016

WINAND Mathieu, University of Stirling

BORGOGNI Antonio

Innovative Practices Tackling Physical Inactivity

05/04/2017

H2020 DEL CORSO Lucio

Evolved Writing Acquisition: The Future of Engaging Ancient Books and Documents in European Collections -EVA

2017

H2020 DE FELICE P. The estimate of CO2 emissions in agriculture by the use of algorithms in charge of the territory governance and the agricultural landscape

2017

C. Altri progetti competitivi C1. finanziati Programma


Responsabile SUSS


Approvato / Finanziato (data)

Durata (da- al)

CUIA

MAGNANI Ilaria

MAGNANI Ilaria

“A SUD del SUD attraverso spedizioni, scoperte e ricerche scientifiche in ANTARTIDE: una storia che continua con i contributi di Argentina e Italia”

15/02/16

07/03/16

marzo 2016 -dicembre 2016

C2. valutati positivamente Programma


Responsabile SUSS


Valutato positivamente (data)

National Endowment for the Humanities

SANTORELLI Biagio, University of Florida,

STRAMAGLIA Antonio

The 19 Major Declamations ascribed to

09/12/15

01/08/2016


20

(USA) - Scholarly Editions

Gainesville

Quintilian: a critical edition, with translation and notes

C3. Presentati Programma


Responsabile SUSS


PROGETTI DI GRUPPI DI RICERCA - L.R. 13/2008, Regione Lazio

TANTILLO Ignazio

TANTILLO Ignazio

Sulle tracce delle parole perdute. Piattaforma digitale per la Georeferenziazione delle Testimonianze Epigrafiche del Lazio Antico- GEOTEPLAN

14/02/2017