paris cae interdisciplinarité avril 2013 · • mais qui apprécie au contraire les questions qui...
TRANSCRIPT
![Page 1: Paris CAE Interdisciplinarité avril 2013 · • mais qui apprécie au contraire les questions qui permettent plusieurs réponses • ou qui accepte l'idée que, dans les conflits,](https://reader034.vdocuments.mx/reader034/viewer/2022042323/5f0d31dc7e708231d4392358/html5/thumbnails/1.jpg)
Evalua&on des poli&ques publiques
Faut-‐il de l'interdisciplinarité?
Paris, CAE, avril 2013
E&enne Wasmer Présenta)on basée sur un ar)cle à paraître dans Economie et Prévision
1
![Page 2: Paris CAE Interdisciplinarité avril 2013 · • mais qui apprécie au contraire les questions qui permettent plusieurs réponses • ou qui accepte l'idée que, dans les conflits,](https://reader034.vdocuments.mx/reader034/viewer/2022042323/5f0d31dc7e708231d4392358/html5/thumbnails/2.jpg)
Contexte l Trois groupes d’acteurs de l’évalua&on:
l les cabinets (le poli&que) ; l les administra&ons; l les chercheurs.
l Rela)ons complexes. Analyse poussée dans Lascoumes et Setbon (CNRS-‐Commissariat Général au Plan, 1996) l Administra&on, inspec&ons tentent d’être acteurs et évaluateurs des PP.
2
![Page 3: Paris CAE Interdisciplinarité avril 2013 · • mais qui apprécie au contraire les questions qui permettent plusieurs réponses • ou qui accepte l'idée que, dans les conflits,](https://reader034.vdocuments.mx/reader034/viewer/2022042323/5f0d31dc7e708231d4392358/html5/thumbnails/3.jpg)
Contexte l Ajouter un dialogue interdisciplinaire rajoute une hétérogénéité au sein du dernier bloc et donc une couche de complexité.
l Quels sont les gains et les inconvénients? l Deux ques&ons posées dans le texte:
l Faut-‐il promouvoir l’interdisciplinarité plus systéma&quement en ma&ères d’évalua&on des poli&ques publiques ?
l Faut-‐il en plus construire une trans-‐disciplinarité?
3
![Page 4: Paris CAE Interdisciplinarité avril 2013 · • mais qui apprécie au contraire les questions qui permettent plusieurs réponses • ou qui accepte l'idée que, dans les conflits,](https://reader034.vdocuments.mx/reader034/viewer/2022042323/5f0d31dc7e708231d4392358/html5/thumbnails/4.jpg)
Evalua&on des poli&ques publiques
• Détour: la prévision poli&que et stratégique analysée par un psychologue. – Philip E. Tetlock: Expert Poli)cal Judgment, Princeton U. Press, 2005.
– Sur 20 ans, il a suivi 20 000 prévisions de 278 “experts”. Prix Woodrow Wilson de l’American Poli)cal Science Associa)on en 2005. “It is a major advance in our understanding of expert judgment in the vitally important and almost impossible task of possible and strategic forecas)ng.” Daniel Kahemann.
4
![Page 5: Paris CAE Interdisciplinarité avril 2013 · • mais qui apprécie au contraire les questions qui permettent plusieurs réponses • ou qui accepte l'idée que, dans les conflits,](https://reader034.vdocuments.mx/reader034/viewer/2022042323/5f0d31dc7e708231d4392358/html5/thumbnails/5.jpg)
5
![Page 6: Paris CAE Interdisciplinarité avril 2013 · • mais qui apprécie au contraire les questions qui permettent plusieurs réponses • ou qui accepte l'idée que, dans les conflits,](https://reader034.vdocuments.mx/reader034/viewer/2022042323/5f0d31dc7e708231d4392358/html5/thumbnails/6.jpg)
6
![Page 7: Paris CAE Interdisciplinarité avril 2013 · • mais qui apprécie au contraire les questions qui permettent plusieurs réponses • ou qui accepte l'idée que, dans les conflits,](https://reader034.vdocuments.mx/reader034/viewer/2022042323/5f0d31dc7e708231d4392358/html5/thumbnails/7.jpg)
7
Facteurs de succès prédictif • N'apparaissent pas comme des variables déterminantes:
– Le fait de détenir un doctorat – Les années d'expérience professionnelle – L'accès à des données privilégiées – Sa propre appréciation de sa compétence par rapport à la
question posée • Approchent en revanche du seuil de significativité:
– le fait de rédiger des travaux académiques – de ne pas avoir de contacts avec les media – d'être une femme.
• Orientations idéologiques ou philosophiques (mesurées grâce à une série de questions spécifiques), n'ont pas d'impact fort sur le succès prédictif ex post • (Orientation gauche-droite ; caractère idéaliste ou réaliste des experts ;
le fait d'être d'inspiration « croissantiste » ou « décroissantiste ») • Facteur le plus important: profil psychologique et cognitif
de l’expert. • Dimension hérisson (hedgehogs) par opposition à renard (fox).
![Page 8: Paris CAE Interdisciplinarité avril 2013 · • mais qui apprécie au contraire les questions qui permettent plusieurs réponses • ou qui accepte l'idée que, dans les conflits,](https://reader034.vdocuments.mx/reader034/viewer/2022042323/5f0d31dc7e708231d4392358/html5/thumbnails/8.jpg)
Les caractéristiques des hedgehogs et des foxes?
• Les hérissons • se raccrochent à une idée forte (théorie, exemple) • l‘extrapolent à de nombreux domaines • sont peu enclins à composer avec ceux qui ne
perçoivent pas ce raisonnement • sont assez sûr de leurs capacités prédictives.
• Les renards : • accumulent des informations et des raisonnements
variés • ne croient pas aux grands schémas explicatifs • sont plus inductifs et ad hoc dans leurs modes de
raisonnement • plus sceptiques quant à leurs propres capacités
prédictives. 8
![Page 9: Paris CAE Interdisciplinarité avril 2013 · • mais qui apprécie au contraire les questions qui permettent plusieurs réponses • ou qui accepte l'idée que, dans les conflits,](https://reader034.vdocuments.mx/reader034/viewer/2022042323/5f0d31dc7e708231d4392358/html5/thumbnails/9.jpg)
9
• Le renard est d'abord celui qui s'identifie comme tel • qui n'aime pas les explications simples • mais qui apprécie au contraire les questions qui
permettent plusieurs réponses • ou qui accepte l'idée que, dans les conflits, les
deux parties peuvent avoir raison. • Il est enfin celui qui apprécie relativement plus
que son collègue hérisson le fait de pouvoir interagir avec des gens qui pensent différemment de lui.
• Le hérisson pense plus fréquemment que la politique est une horlogerie (clocklike, ce que nous pouvons interpréter comme relevant d'une science analysant les mécanismes déterministes) plutôt qu'une science floue (cloudlike).
Traits déterminants
![Page 10: Paris CAE Interdisciplinarité avril 2013 · • mais qui apprécie au contraire les questions qui permettent plusieurs réponses • ou qui accepte l'idée que, dans les conflits,](https://reader034.vdocuments.mx/reader034/viewer/2022042323/5f0d31dc7e708231d4392358/html5/thumbnails/10.jpg)
Autrement dit • “Les prédic)ons les plus précises proviennent d’experts qui combinent les intui)ons de sources diverses.”
• Rela&visme très fort. • Ces constats s’appliquent-‐ils aux évalua&ons de poli&ques publiques ?
10
![Page 11: Paris CAE Interdisciplinarité avril 2013 · • mais qui apprécie au contraire les questions qui permettent plusieurs réponses • ou qui accepte l'idée que, dans les conflits,](https://reader034.vdocuments.mx/reader034/viewer/2022042323/5f0d31dc7e708231d4392358/html5/thumbnails/11.jpg)
Branches de l’alternative
• Et en supposant que c’est le cas, comment procéder à une évalua&on scien&fique (travaux, personnes) sur une base “variée”, complexe?
• 1. Soit une vision de plusieurs disciplines qui s’associent de façon ponctuelle.
• 2. Ou bien l’émergence d’une nouvelle discipline, organisée comme telle.
• E.g. Maurice Baslé (2008, pp.6 et 7): « L’évaluation a les caractéristiques d’une « cross-sectional science ». Elle est une transdiscipline comme la Statistique. (…).
11
![Page 12: Paris CAE Interdisciplinarité avril 2013 · • mais qui apprécie au contraire les questions qui permettent plusieurs réponses • ou qui accepte l'idée que, dans les conflits,](https://reader034.vdocuments.mx/reader034/viewer/2022042323/5f0d31dc7e708231d4392358/html5/thumbnails/12.jpg)
Bilan partiel
• En forçant le trait: • Renard = producteur de savoir plus
difficilement falsifiable : non-biaisé mais imprécis;
• Hérisson = savoir falsifiable, sans doute plus précis mais biaisé.
• Le croisement disciplinaire conserve la précision et la falsification, mais permet-il de réduire les biais cognitifs?
12
![Page 13: Paris CAE Interdisciplinarité avril 2013 · • mais qui apprécie au contraire les questions qui permettent plusieurs réponses • ou qui accepte l'idée que, dans les conflits,](https://reader034.vdocuments.mx/reader034/viewer/2022042323/5f0d31dc7e708231d4392358/html5/thumbnails/13.jpg)
Trade-off • Trade-off: gagner en prédiction mais avec des coûts de transaction. Exemple. • Pourquoi des poli&ques publiques? • Réponse de l’économie : pour remédier à des défaillances du marché ou du laissez-‐faire. • Externalités, bien publics, • Problèmes informa&onnels, • Tendance à la concentra&on; rendements d’échelle, • Contraintes de crédit.
13
![Page 14: Paris CAE Interdisciplinarité avril 2013 · • mais qui apprécie au contraire les questions qui permettent plusieurs réponses • ou qui accepte l'idée que, dans les conflits,](https://reader034.vdocuments.mx/reader034/viewer/2022042323/5f0d31dc7e708231d4392358/html5/thumbnails/14.jpg)
Ques&on zéro : Pourquoi des poli&ques publiques?
• Réponse de science poli7que, sociologie: comme solu&on à un conflit entre des intérêts divergents: no&on d’arbitrage. • Assez proche de la no&on de jus&ce rendue.
• Points de vue pas incompa&bles. Norma&f vs. descrip&f.
14
![Page 15: Paris CAE Interdisciplinarité avril 2013 · • mais qui apprécie au contraire les questions qui permettent plusieurs réponses • ou qui accepte l'idée que, dans les conflits,](https://reader034.vdocuments.mx/reader034/viewer/2022042323/5f0d31dc7e708231d4392358/html5/thumbnails/15.jpg)
Pour illustrer des différences • Evalua&ons des poli&ques publiques: 3 moments. • Ex-‐ante : prévision, an&cipa&on des effets. • Monitoring: mise en oeuvre et contextualisa&on (monitoring). • Ex-‐post: évalua&on de ce qui a été fait.
15
![Page 16: Paris CAE Interdisciplinarité avril 2013 · • mais qui apprécie au contraire les questions qui permettent plusieurs réponses • ou qui accepte l'idée que, dans les conflits,](https://reader034.vdocuments.mx/reader034/viewer/2022042323/5f0d31dc7e708231d4392358/html5/thumbnails/16.jpg)
Le processus politique
Problème public (sous-emploi, mal-logement, pollution, criminalité, etc…)
Solution théorique
Les consequences effectives de (X5)
Processus démocratique
Théorie normative
Recommandation de politique économique (X1)
Prise en compte du contexte
Solution finalement mise en place (X5)
Le processus politique : des plateformes politiques au vote (X2-X4)
Processus démocratique
Théorie poli&que sous-‐jacente : aller-‐retour entre théories norma&ves et l’expérience/contextualisa&on
16
![Page 17: Paris CAE Interdisciplinarité avril 2013 · • mais qui apprécie au contraire les questions qui permettent plusieurs réponses • ou qui accepte l'idée que, dans les conflits,](https://reader034.vdocuments.mx/reader034/viewer/2022042323/5f0d31dc7e708231d4392358/html5/thumbnails/17.jpg)
Pluri-‐disciplinarité sur trois disciplines et trois moments
• Package (boîte à ou&l!) complet et informa&f pour le décideur • Mais très couteux en temps et en coûts de transac&on.
• Oblige à intervenir très en amont.
17
![Page 18: Paris CAE Interdisciplinarité avril 2013 · • mais qui apprécie au contraire les questions qui permettent plusieurs réponses • ou qui accepte l'idée que, dans les conflits,](https://reader034.vdocuments.mx/reader034/viewer/2022042323/5f0d31dc7e708231d4392358/html5/thumbnails/18.jpg)
Exemples • Dans des évalua&ons économétriques ex-‐ante
– Réforme de Pôle Emploi : améliorer le placement des chômeurs.
– Etude épidémiologique : étude d’impact d’une poli&que de vaccina&on.
• Problème: agents publics ou usagers contribuent (posi&vement ou néga&vement) à la réussite. – Science sans prise en compte de la poli&que: échoue à prédire.
• Ex-‐post : idem. Les OPP vs. CVE : résultats de Behaghel, Crépon, Gurgand. 18
![Page 19: Paris CAE Interdisciplinarité avril 2013 · • mais qui apprécie au contraire les questions qui permettent plusieurs réponses • ou qui accepte l'idée que, dans les conflits,](https://reader034.vdocuments.mx/reader034/viewer/2022042323/5f0d31dc7e708231d4392358/html5/thumbnails/19.jpg)
Méthode de travail interdisciplinaire • Un choix possible est de réunir une masse cri&que de chercheurs de très haut niveau et construire une structure leur permeqant à travailler ensemble – Confronta&on systéma&que entre disciplines, idéalement au début, au milieu et à la fin d’une étude.
– Eventuellement ar&cles scien&fiques en associa&on, meilleures revues disciplinaires, incita&ons à publier dans des revues hors de son champ.
– “Rapports scien&fiques” et “études” avec par&es dis&nctes ou commentaires.
19
![Page 20: Paris CAE Interdisciplinarité avril 2013 · • mais qui apprécie au contraire les questions qui permettent plusieurs réponses • ou qui accepte l'idée que, dans les conflits,](https://reader034.vdocuments.mx/reader034/viewer/2022042323/5f0d31dc7e708231d4392358/html5/thumbnails/20.jpg)
Autre question: quanti ou quali? • Exemple plus concret: les économistes doivent-‐ils travailler: • Seuls? • Avec des sociologues quan&ta&fs ou des poli&stes quan&ta&fs ?
• Avec des sociologues qualita&fs? • Difficile : car deux visions paradigma7ques.
– La science “pure”, ou encore “evidence-‐based policy”. Chiffres parlent.
– La vision que l’évalua&on est poli&que (à regret ou assumé), voire instrumentalisée.
20
![Page 21: Paris CAE Interdisciplinarité avril 2013 · • mais qui apprécie au contraire les questions qui permettent plusieurs réponses • ou qui accepte l'idée que, dans les conflits,](https://reader034.vdocuments.mx/reader034/viewer/2022042323/5f0d31dc7e708231d4392358/html5/thumbnails/21.jpg)
21
Conclusion • Questions initialement posées:
• nécessité d'éclairages multiples dans des évaluations de politiques publiques?
• faut-il aller jusqu'à effacer les frontières disciplinaires?
• Réponse: • 1e question: toute évaluation avec un regard multiple
sera de bien meilleure précision si les points de vue se confortent, et évitera d'être biaisée et donc fausse si les points de vue s'opposent.
• Réponse à la seconde question sans ambiguïté négative.