la valutazione impossibile

Unavalutazione(dellaricerca)dalvoltoumano:lamissione

impossibilediAndreaBonaccorsi

RobertoCaso

UniversitàdiTrentoAISA

AndreaBonaccorsi,2015

Caso-Valutazioneimpossibile-2017 2

Valutazione=Innovazione[=Progresso]

•  “Daalcuniannilavalutazionedellaricercaèentratanellavitaordinariadelleuniversitàitaliane.Comespessoaccadenelnostropaese,l’innovazionearrivainritardorispeQoadaltrisisteminazionali,econeccessidiaspeQaRve”[p.7]


Fulminatosullavia…


Serenamente,pacatamente


Bonaccorsimertoniano

•  “Perquantomiriguarda,nonhodifficoltàaparRredalprincipalemodellonormaRvodellascienzamodernadovutoaRobertK.Merton.Nellaformulazionepiùnota,gliscienziaRsonouniversalisR,comunitari,disinteressaResce`ci”[p.19].


Esplicitazione,formalizzazioneeaggregazione

•  “Nellamiaconcezione,quindi,lavalutazioneèuneserciziodiesplicitazione,formalizzazioneeaggregazionedigiudizigiàpresenRnellecomunitàdeicompetenR”[p.89].


BonaccorsidemocraRco

•  “E’inoltreunateoriaadeguataallesocietàdemocraRche,nellequalilaricercascienRficagodediunostatutodiautonomia,cosRtuzionaleodifaQo,esirichiedecheogniprocedurapubblicasiagiusRficabilerazionalmente”.

•  “[…]undisegnoisRtuzionaledellavalutazionediRpofallibilistaeaperto,nonburocraRco,nontecnocraRco”


Ohhh!!!


Ununiversoteoricoparallelo

•  Teoria:tradimentodelpensieromertoniano,assenzadiunragionamentogiuridicosulladifferenzatranormeinformalieformali

•  PraRca:larealtàitalianadell’ANVURraccontaunastoriadiversa


L’ordinedelragionamento

1.  Mertonpresosulserio

2.  Commercializzazioneevalutazione

3.  Unapiccola(emoltoincompleta)galleriadegliorrorigiuridicidell’ANVUR

4.  Dallascienzapubblicaallascienzaaperta:unesempiodirobustezza


1


BonaccorsipaladinodiMerton?


1938-1942


Merton,1938

•  Lascienzapura•  “Lascienzanonpuòtolleraredientrarealserviziodellateologia,dell’economiaodelloStato”.


Merton,1942

•  “L’ethosdellascienzaèquelcomplessodivalorienormeacuisiriRenesiaimpegnato,ancheemoRvamente,l’uomodellascienza.Lenormesonoespresseinformadiprescrizioni,proibizioni,preferenzeepermessiesonolegi`mateinterminidivaloriisRtuzionali.[…]Sebbenel’ethosscienRficononsiacodificato,essopuòdedursidalconsensomoraledegliscienziaR[…]”.[p.1057]


Merton,1942:Universalismo

•  “PerquantoimperfeQamentepossaesserepraRcatol’universalismoècompresonell’ethosdellademocraziaedèunodeisuoiprincipidire`vifondamentali.[…]

•  SonoicriteriimpersonalidellerealizzazionienonlaconsiderazionedellecaraQerisRchedistatusaQribuitedallanascitaciòchequalificalasocietàdemocraRca”.[…][p.1064]


Merton,1942:Comunismo

•  “IlconceQoisRtuzionaledellascienzacomepartedelpatrimoniocomuneèlegatoall’imperaRvodellacomunicazionedeirisultaR.Lasegretezzaèl’anRtesidiquestanorma,lacomunicazionecompletaesenzavincolièlasuaaQuazionepraRca”.[…][p.1067]


Merton,1942controibreve`

•  “Ilcomunismodell’ethosscienRficoèincompaRbileconlaconcezionedell’economiacapitalisRcachelatecnologiasia«proprietàprivata».Scri`correnRsulla«frustrazionedellascienza»rifleQonoquestoconfliQo.Ibreve`proclamanodiri`esclusividiusoe,spesso,dinonuso.[…][p.1068]

•  ComemisuradifensivaalcuniscienziaRsonogiunRafarbreveQareillorolavoroperpoterlorendereaccessibilealpubblico”[…][p.1069]


Merton,1942:Disinteresse

•  “Lascienza,comeingeneraleleprofessioni,includefralesueesigenzeisRtuzionalifondamentaliildisinteresse.[…][p.1069]

•  L’esigenzadeldisinteressehaunfondamentosolidonelcaraQerepubblicoecontrollabiledellascienzaepossiamosupporrechequestacircostanzaabbiacontribuitoall’integritàdegliuominidiscienza”.[p.1070]


2


MonstersUniversity:becompeRRve!


Bonaccorsi,2015,p.164

•  “[…]lavalutazioneèasservitaalprocessopiùgeneralediprivaRzzazionedellascienza,iniziatoconilBayh-DoleActeproseguitonegliulRmitredecennialloscopoditrasformarelaconoscenzapubblicainbeneprivato.Amesembrachelatesidellapriva6zzazionecomme7aunasemplificazionestorica.”



•  “IlpuntoessenzialeèchelavalutazioneinItalianonèalserviziodiundisegnodiprivaRzzazione,maalcontrariodiunaconcezionepubblicaedemocra6cadellascienzaedellaistruzionesuperiore,cheintendepreservareadognicostolebuoneragionidellavoroaccademico.L’usodiargomenRsviluppaRneipaesianglosassoni,inparRcolareInghilterraeAustralia,operragionidiverseinFrancia,peraQaccarelavalutazioneinItalia,sonofuorvian6.”


Concezionepubblica,argomenRfuorvianR,davvero?

•  BandoVQR2011-2014–15/11/2015•  LacalibrazionedeglialgoritmidivalutazionebibliometricasaràbasatasulrispeQodellepercentualiindicatenelledefinizionideilivellidiqualità,idenRficando“laproduzionescienRficadell’area”conilcontenutodeidatabasebibliometriciuRlizzaRalivellodisubjectcategory(ISIWoS)eASJC(Scopus).


IlfaQuratodei6piùgrandieditoricommerciali


L’originedelmale:ISI,impactfactorecorejournals

•  FigàTalamanca:“NonostanteilnomealRsonante,l’ISInonèunafondazioneoun’associazionesenzafinidilucro,nonhacomescopolapromozionedellascienzaodell’informazionescienRfica,maèinveceun’aziendaprivatache,cometuQeleaziende,hacomedovereprincipaleescopoulRmoquellodiarricchireisoci”.


ArgomenRfuorvianR,davvero?

•  BandoVQR2011-2014–15/11/2015•  Breve`concessinelquadrienniodellaVQR(dal1/1/2011al31/12/2014)

•  IlbreveQoèunapubblicazionescienRfica?DachivienevalutatalaconcessionediunbreveQo,dapari(professoriuniversitari)cheoperanoinbaseallenormemertoniane?



•  “LacompeRzionenonèquindiuRleperchéimitailmercato,maperchéconsentedicorreggereglierroriedimigliorarelapropriaa=vitàprimaemegliodialtrimeccanismi.Esipotrebbedirelastessacosadellavalutazione:essaserveafornireelemen6u6lipermigliorare”


VocabolarioTreccani

compeRziónes.f.[dallat.tardocompeRRo-onis(der.dicompetĕre«competere»),aQrav.l’ingl.compeRRon].–1.a.Gara,loQa,contrastofrapersoneogruppichecercanodisuperarsi,diconquistareunprimatoesim.:c.sporRve,poliRche;entrareinc.;senzadeterminazione,s’intendeperlopiùcompeRzioneatleRcaosporRva:c.individuali,asquadre.b.Nellinguaggioecon.,talorasinon.diconcorrenza.[…]


CompeRzione?


CompeRzione?

•  EsistonoparRtedicalcio(oneste)dovenonsonolesquadreasegnaremal’arbitroadaQribuireigoal,oameQerelapallainrete?

•  EdesistonoparRtedicalcioincuicisonogiocatorichefannoanchedaarbitri?

•  EdesistonoparRtedicalcioincuileregoledelgiocovengonofissateacompeRzioneiniziata?


3


AncoraBonaccorsi,2015,p.168

•  “IlpuntoessenzialeèchelavalutazioneinItalianonèalserviziodiundisegnodiprivaRzzazione,maalcontrariodiunaconcezionepubblicaedemocra6cadellascienzaedellaistruzionesuperiore,cheintendepreservareadognicostolebuoneragionidellavoroaccademico.L’usodiargomenRsviluppaRneipaesianglosassoni,inparRcolareInghilterraeAustralia,operragionidiverseinFrancia,peraQaccarelavalutazioneinItalia,sonofuorvian6.”



•  “LaricercascienRficaappareresilientenonsolorispeQoalleintromissionedelmondoesterno(poliRca,imprese)maanchealledistorsionideicomportamenRall’interno”.


Democrazia,davvero?


Democrazia,davvero?•  BandoVQR2011-2014–15/11/2015•  Perognunadelle16AreeilConsiglioDire`vodell’ANVUR

nominaunGruppodiEsperRdellaValutazione(GEVnelseguito),anchea`viall’estero,compostodastudiosidielevataqualificazionescelRsullabasedell’esperienzainternazionalenelcampodellaricercaealleesperienzedivalutazionegiàcompiute.LaselezionesaràeffeQuatatraquanRhannorisposto,nellemodalitàedentroiterminiprevisR,all’avvisoperlamanifestazioned’interesseafarpartedeiGEVemanatodalConsiglioDire`vomedesimo.


D.P.R.01/02/2010,n.76,Regolamentoconcernente

lastruQuraedilfunzionamentodell’ANVURArt.13

1.L'Agenziaassicuralapubblicità,anchemedianteilpropriositowebisRtuzionale,delleinformazionirelaRve:a)allastruQuraealladotazioneorganicadell'Agenzia;b)aicriterieallemetodologieperlavalutazionedefiniRdall'Agenzia;c)airisultaRdelleproprieanalisievalutazioni;d)alRapportosullostatodelsistemauniversitarioedellaricercadicuiall'arRcolo4,nonchéairapporRannuali,allerelazionieallepubblicazionipredispostedall'Agenzia;e)adognialtroaspeQodellapropriaa`vitàisRtuzionaleinconformitàallanormaRvavigente.


Democrazia,davvero?


IntervistadiRoarsaOnida


ValerioOnida“RispondoinvitandoicriRciaentrarenelmeritodellaquesRonechenoiabbiamopostocolnostroricorso.ChenonèaffaQovoltoacontestarelanecessitàdia`vareserieprocedurediselezionedeidocenRalivellonazionale,basatesuvalutazioniessenzialmentequalitaRve:macontestarel’uso,perlaselezione,diuncriterio“quanRtaRvo”(ilnumerodiarRcolipubblicaRnell’ulRmodecennioinrivistecollocatenellaclasseA)applicato“retroa=vamente”.Infa`laclassificazionedellerivisteavverrebbeora,masudiessasibaserebbelavalutazionedegliscri`pubblicaRnelloscorsodecennio”


ValerioOnida

•  “Quellochesecondonoièviolatoèl’elementareprincipiodell’affidamentolegi=moneiconfron6dellenormechecos6tuisconoilquadronelcuiambitoilci7adinoagisce.Laleggenonpuòliberamentedisporreinmodoretroa`vo(oraperallora):èunprincipiogeneraledell’ordinamento(“Laleggenondisponecheperl’avvenire:essanonhaeffeQoretroa`vo”:art.11delledisposizionipreliminarialcodicecivile)”.


4


Bonaccorsi,2015,p.155:lascienzaapertanonèrobusta

•  “LapropostadisosRtuirelarevisionedeipariexanteconlapubblicazioneliberadeimanoscri`,dasoQoporreavalutazioneexpostdapartedellecomunitàscienRfiche,puresuggesRva,nonsembraavereleproprietàdirobustezzanecessarieperesseregeneralizzabile”

•  Innota:“SitraQacomunquediunaprospe`vadamonitorareaQentamente[…]”


Bonaccorsietal.,F1000,2015


ConcorsopubblicodiIdeediRicerca(bandodel15Luglio2014):Graduatoriadei

proge`idoneiapprovatacondeliberadelConsiglioDire`von.107del15/10/2014.

•  TrerevisorisuquaQrosonoingruppidiricercachehannovintonel2014proge`finanziaRdaANVUR

•  Hannotu`dichiaratodinonavereconfli`diinteressi

•  Lanormamertonianadeldisinteresseerasospesa?


ChiaraFaggiolani[unatraitrerevisori],AIBstudi,2016,recensisce(conperfida

ironia)illibrodiBonaccorsi

•  “Allalucediquestaprospe`valavalutazionenonapparepiùtantopiccola(omeschina)madivieneimportanteperchéfinalizzataalmiglioramentodellaricercastessa.NonèpiùunapraRcadasbrigareperdovere,unmalenecessarioounobie`vocuitendereopportunisRcamente,matornaadessereunmezzouRle,peramoredellaricerca.Lavalutazionetornaadessereperlaricercaoltrechedellaricerca”.


ChiaraFaggiolani•  “AllafinedellibroabbiamoquasidimenRcatolevicendedellaVQR,siamostaRcapacidivederel'astrodimenRcandoildito,perusareun'altrametaforanota.Pensiamochesarebbestatobelloleggerequestolibroqualcheannofa,perchéforseciavrebbeaiutatoainterpretarequantostavaaccadendoesarebbeaccaduto,riportandocisuunpianodiversodaquellodelleprocedureamministraRveedellarendicontazione:ilpianoepistemicodellaricerca,dellostudiochenecessariamenteiricercatori(ivalutaR!)amanoesentonoproprio.Ilprocessoèappenainiziatoec'ètantastradadafaremalavalutazioneèpossibile,comeil6tolodellibrociricorda”.


Egliautori?

•  Bonaccorsi,Cicero,FerraraeMalgarinitu`affiliaRadANVUR

•  Vigevaunasospensionedellanormamertonianadeldisinteresse?

•  Gliautoriparlanoperamoredellascienzaoperdifenderelarazionalitàdellaproceduradell’ANVURdacuiricevonolosRpendio?


ANVUR:undioonnipotente

•  Legislatore

•  Giudice

•  Interprete(doQore)


ValutatorisuMarte?


AaronSwartz“Legacy”2006


Legacy,2006

“Sowhatjobsdoleaveareallegacy?[…]Butonegoodsourceofthemistryingtodothingsthatchangethesysteminsteadoffollowingit.Forexample,theuniversitysystemencouragespeopletobecomeprofessorswhodoresearchincertainareas(andthusmanypeopledothis);itdiscouragespeoplefromtryingtochangethenatureoftheuniversityitself.Naturally,doingthingslikechangingtheuniversityaremuchharderthansimplybecomingyetanotherprofessor.Butforthosewhogenuinelycareabouttheirlegacies,itdoesn’tseemlikethere’smuchchoice”. Caso-Valutazioneimpossibile-2017 54

RiferimenRbibliografici•  R.Caso,Lascienzaapertacontrolamercificazionedellaricerca

accademica?,TheTrentoLawandTechnologyResearchGroup.ResearchPapersSeries;nr.28.Trento:UniversitàdegliStudidiTrento.2016:

hQps://iris.unitn.it/retrieve/handle/11572/142760/76403/Caso__LTRP_28_def.pdf


E-mail:[email protected]@aisascienzaperta.orgWeb:hQp://www.lawtech.jus.unitn.it/index.php/people/roberto-caso


LawTechTrento


AISA:aisascienzaperta.org


Copyright

CopyrightbyRobertoCaso

LicenzaCreaRveCommonsQuest'operaèdistribuitacon

LicenzaCreaRveCommonsAQribuzione-Condividiallostessomodo4.0Internazionale
