les indicateurs comme exemple de méthode … · les indicateurs comme exemple de ... nombreux par...

Les indicateurs comme exemple de méthode d'évaluation de la durabilité

Robert Joumard [email protected]

1. Définitions 2. Qualités 3. Indicateurs dans le champ du développement durable 4. Méthodes de prise en compte conjointe d'indicateurs

15e École d'été en évaluation environnementale, IEPF et SIFÉE, Douala, Cameroun, 5-9 septembre 2011

 Développement durable : 6 dimensions, multiples sous-dimensions (environnement : 49), plusieurs paramètres / sous-dimension

 Pour évaluer la durabilité de projets, d'actions ou de politiques   données par mesure, enquête ou modélisation : innombrables   par ex., sous-dimension effet de serre appréciable par le biais

  des émissions de multiples gaz   des températures   des surfaces de couverture neigeuse   des niveaux des mers   des nombres d'espèces disparues ou en voie de l'être...

RJ 1

1

Problématique (1/2)

 Pour évaluer la durabilité de projets, d'actions ou de politiques   l'outils "indicateur" souvent utilisé pour rendre compte de telle

ou telle sous-dimension   en synthétisant éventuellement de nombreux paramètres

 Dans l'exemple de l'effet de serre, outil "indicateur d'effet de serre"

 Distinguer critère et indicateur   Critère : ce qui nous préoccupe, par exemple l'effet de serre   Indicateur : ce qui est censé représenter le critère, par exemple

le "potentiel de réchauffement climatique"

RJ 1

1

Problématique (2/2)

Définition des indicateurs (1/3)

 Un indicateur peut être   un outil de mesure, indiquant des variations d'un phénomène

mesuré selon certaines dimensions   un marqueur ou une sentinelle, indiquant la présence ou

l'absence de quelque chose   un outil d'aide à la décision permettant l'action   une combinaison de ces trois derniers

 Finalement, un indicateur est une variable, basée sur des mesures, représentant aussi précisément que possible et que nécessaire un phénomène

RJ 1

1

 Un indicateur indique ou représente quelque chose, un phénomène

 Le phénomène représenté doit toujours être défini précisément   Le PIB est un indicateur de l'activité économique marchande,

et non un indicateur de bien-être économique, de richesse ou de développement

 C'est un modèle, mais un modèle très simple   calculable simplement : opérateurs mathématiques basiques   utilisable par un non spécialiste du phénomène   interprétable intuitivement

RJ 1

1


 Un indicateur n'est pas la réalité, mais seulement une représentation de celle-ci   s'insère ainsi dans une analyse plus large, une structuration de

la réalité, par ex. une définition du développement durable  Les indicateurs expriment des valeurs ou des préférences  Lorsqu’ils sont puissants, institutionnalisés

  structurent pour une part les cadres cognitifs   influent sur les comportements   cas du PIB aujourd'hui

RJ 1

1


 Un indicateur peut être formulé de manière simple ou complexe

 Variable simple : par ex. moyenne spatio-temporelle de la concentration de particules de moins de 10 mm de diamètre – PM10 – comme indicateur de pollution de l'air

 Combinaison de variables diverses et notamment d'indicateurs (ex. : indice de développement humain IDH qui combine indicateurs de richesse économique, d'éducation et de santé) = indicateur composite ou agrégé

RJ 1

1

Indicateur simple ou composite (1/4)

 Indicateur composite   souvent compris comme agrégeant des indicateurs sans

dimension commune (IDH...)  Indicateur agrégé

  agrège plutôt des indicateurs de même dimension (coût externe, potentiel de réchauffement climatique...)

 Pas de consensus -> indicateur "composite ou agrégé"  La dimension commune peut être fallacieuse

  MIPS (Material Input per Service-unit) somme les ressources (abiotiques, biotiques, déplacements de terre, eau, air) utilisées pour produire une unité de produit ou de service

  eau = 96% du total -> indicateur de consommation de ressources (en fait d'eau) et non d'impact environnemental RJ

11


Avantages   Peut synthétiser des problèmes

complexes ou multidimensionnels pour la décision

  Plus facile à interpréter   Comparaisons plus faciles   Réduit la taille des données   Facilite la prise en compte du

développement durable en politique

  Facilite la communication grand public

Indicateur simple ou composite (3/4) Avantages et inconvénients des indicateurs composites

RJ1

1

Avantages   Peut synthétiser des problèmes

complexes ou multidimensionnels pour la décision

  Plus facile à interpréter   Comparaisons plus faciles   Réduit la taille des données   Facilite la prise en compte du

développement durable en politique

  Facilite la communication grand public

Indicateur simple ou composite (3/4) Avantages et inconvénients des indicateurs composites

RJ1

1

Inconvénients   Peut conduire à une décision

erronée si mal construit   Peut amener à des conclusions

simplistes   Instrumentalisation si mode de

construction obscur et données de mauvaise qualité

  La sélection et la pondération des indicateurs peut être l'objet d'un jeu politique

  Cacher des faiblesses sur certaines dimensions

 Agrégation = étape de simplification de variables multiples en une variable plus synthétique représentative de son objet

 La mécanique d'agrégation doit combiner 3 exigences   représentativité du phénomène représenté   légitimité de la mécanique d'agrégation   simplicité, gage de facilité d'utilisation et d'appropriation par

l'utilisateur  Agrégation = mode particulier d'analyse multicritère

caractérisé par sa simplicité / autres modes   autres modes AMC : méthodes de hiérarchisation (ELECTRE...),

approches basées sur les fonctions d'utilité, méthodes de programmation continue... RJ

11


Représentation Validité

Reproductibilité Sensibilité

Opérationnalité Simplicité

Disponibilité des données Éthique

Aide à la décision Transparence

Interprétabilité Liable à un objectif Lié à une décision

Qualités d'un indicateur (1/2)

RJ 1

1

  Critères de mesure : indicateurs évalués quant à leur représentativité de ce qu'ils sont censés mesurer (aussi précis que possible et nécessaire)

  Critères d'opérationnalité : indicateurs évalués quant à leur facilité d'utilisation, de monitorage pratique et continu

  Critères d'applicabilité : indicateurs évalués quant à leur pertinence et leur utilité dans l'aide à la décision

  3 critères de représentativité   validité : doit réellement mesurer ce qu'il est censé mesurer   reproductibilité: un recalcul doit donner la même valeur   sensibilité : capacité à traduire les variations importantes

  3 critères d'opérationnalité   simplicité : simple et utilisable avec des moyens limités   disponibilité des données d'entrée (coût, délai)   éthique : compatible avec les droits humains et les valeurs

  4 critères d'aide à la décision   transparence : facile à comprendre et critiquable par l'utilisateur   interprétabilité : interprétation intuitive et sans ambiguïté   potentiellement lié à un objectif : performance d'une mesure par rapport à un objectif   lié à une décision : mesure des facteurs modifiables par une décision

RJ1

1

Qualités d'un indicateur (2/2)

 3 à 6 familles de critères   économie élargie, justice sociale, environnement, modes de

décision (?), besoins et droits (?), long terme (?)   doivent être soigneusement distingués, exhaustifs, non

redondants pour assurer la transparence de l’évaluation   À chaque critère, un ou plusieurs indicateurs quantitatifs

ou qualitatifs  Indicateurs composites agrégeant plusieurs dimensions

RJ 1

1

Indicateurs dans le champ du développement durable (1/14)

 Indicateurs de la dimension économique élargie   produit intérieur brut ou PIB

  oublie les activités hors échange monétarisé (activités domestiques, économie informelle, troc)

  strictement économique   revenu national brut ou RNB   indice de développement technologique   indice de développement humain IDH   indice de développement humain hybride, proche de l'IDH

RJ 1

1


 Indice de développement humain,   indicateur composite de la dimension économique élargie pour un pays,   mis au point par le PNUD en 1990 et amélioré depuis

 Combine pour un pays   l'espérance de vie à la naissance   l'accès à l'instruction combinant durées moyenne et attendue

de scolarisation   le logarithme du revenu national brut par habitant à parité de

pouvoir d'achat  Chacune des 3 composantes normalisée par une plage de

variation (généralement 0 – maximum constaté)  Agrégation par la moyenne géométrique

RJ 1

1


 Indicateurs de justice sociale   nombreux, élémentaires et agrégés   indice de Gini, indice de pauvreté humaine, ou de pauvreté

multidimensionnelle, indice de santé sociale (2), BIP 40, indice de sécurité personnelle…

  un peu arbitraires et imprécis (données, disponibilité des statistiques), utiles pour mettre en évidence les écarts importants

  Indicateurs d'environnement   nombreux par impact, mais de faible qualité, hors effet de serre   composites : coûts externes, MIPS, ecological scarcity, ReCiPe,

empreinte écologique

RJ 1

1


Indicateurs dans le champ du développement durable (5/14) Définition de l'empreinte écologique

  Surface terrestre et aquatique biologiquement productive nécessaire à la production des ressources consommées et à l'assimilation des déchets produits par une population, indépendamment de la localisation de cette surface   basée sur les consommations d'une population et non les

productions d'un territoire   Exprimée en hectares globaux, comparable à la surface

réelle d'un territoire   6 types d'usage : cultures agricoles, forêts, pâturages,

pêche, infrastructures, séquestration du carbone RJ1

0

Empreinte écologique des Canadiens par type de consommation ��selon le décile de revenu (hag/pers) (Mackenzie et coll., 2008) RJ

11

Indicateurs dans le champ du développement durable (6/14) Empreinte écologique par type de consommation

(WWF et coll., 2006) RJ 1

1

Indicateurs dans le champ du développement durable (7/14) Empreinte écologique et IDH par pays en 2003

 Indicateurs de long terme

 Indicateurs des modes de décision / démocratie   éventuellement pouvoirs élus

 Indicateurs des besoins et droits   pratiquement inexistants

RJ 1

1


€

ILT = min biocapacité moy. mondialeempr. écol.

, 1⎛

⎝ ⎜

⎞

⎠ ⎟

 Indicateurs des dimensions économique élargie et justice sociale   Indice de développement humain ajusté aux inégalités IDHI

  mis au point en 2010 par le PNUD   réduit l'IDH selon les inégalités de répartition de ses différentes

dimensions au sein de la population   inégalité de répartition mesurée par le rapport moyenne géométrique /

moyenne arithmétique au sein de la population

RJ 1

1


RJ 1

1


Les populations de l’Afrique subsaharienne présentent le plus d’inégalités dans le développement humain

Déficits dus à l'inégalité touchant l'IDH et ses composantes, par région (Klugman, 2010)

 Indicateurs des dim. économique élargie et justice sociale   IDHI   indicateur sexospécifique de développement humain, qui

diminue l'IDH selon les inégalités sociologiques entre femmes et hommes

  indice de revenu ajusté aux inégalités  Indicateur des dim. justice sociale et environnement

 Happy Planet Index, combinant satisfaction de vie, espérance de vie à la naissance, empreinte écologique

 Indicateur des dimensions justice sociale et démocratie   indicateur de la participation des femmes

RJ 1

1


 Indicateurs intégrant les dimensions économie, justice sociale et environnement   épargne nette ajustée = épargne nationale nette + dépenses

courantes d’éducation - rente tirée des ressources naturelles - dommages résultant de la pollution mondiale par le CO2

  indicateur (monétaire) de progrès véritable (Genuine Progress Indicator) : agrège des indicateurs de consommation, de travail domestique, d'inégalité, et des coûts externes

  indice de bien-être économique : agrège flux de consommation courante, stocks de ressources productives, coûts externes environnementaux monétarisés, répartitions de revenus, pauvreté et inégalité, et variables de sécurité

RJ 1

1


Indicateurs dans le champ du développement durable (13/14) Indicateur de développement durable IDD4

indicateur à 4 dimensions IDD4 =

moyenne géométrique

(Indicateur de Long Terme f(EÉ),

(8,5 - Empreinte Écologique),

ind. d'égalité IDH Inégalité / IDH,

Indice de Développement Humain)

RJ 1

1

+ les relations entre dimensions

(non substituabilité…)   Composantes normées par leur plages de variation

RJ 1

1

Indicateurs dans le champ du développement durable (14/14) IDH et Indicateur de dévt durable IDD4 / PIB

  Le choix des composantes est primordial   à priori selon le cadre conceptuel choisi (par ex. développement

durable à 6 dimensions, environnement à 49 chaînes de causalités)   en fonction de l'importance de chacun dans le cas considéré   en fonction de l'existence d'un indicateur ad hoc et de données

d'entrée   Le choix, l'élimination de composantes doit être transparent

  La pondération des indicateurs a une grande influence sur le résultat

  pondérations explicites et transparentes   toute pondération demande une normalisation préalable selon une

unité claire et propre au paramètre à évaluer

RJ1

0

Méthodes de prise en compte conjointe d'indicateurs (1/6)

 Transformation des variables pour représenter l'objet   indicateur économique au sein de l'IDH : logarithme du PIB

par habitant à parité de pouvoir d'achat du pays  Méthodes de normalisation des indicateurs

  nécessaire pour tenir compte des indicateurs les plus faibles par essence (contre-exemple du MIPS)

  par des facteurs d'équivalence (cas de l'empreinte écologique)   en normalisant par une plage de variation, réelle ou artificielle

(cas de l'IDH)

RJ 1

1


 Représentation graphique d'indicateurs multiples ��sous forme de radar (2 jeux de 8 indicateurs)

RJ 1

1


 Quel cas (I ou II) a les indicateurs les plus élevés ?

 Représentation graphique d'indicateurs multiples ��sous forme d'histogramme

RJ 1

1


 Cas I, II, III et IV identiques  Radar sensible à l'ordre de présentation  Histogramme préférable

  la méthode d'agrégation implique des propriétés de ce qu'on agrège

  Sommation (éventuellement pondérée) des indicateurs de base   implique la substituabilité entre indicateurs de base   peu admissible pour un indicateur de DD multidimensionnel (DD faible)   admissible éventuellement pour représenter une dimension du DD   facile à comprendre

 Moyenne géométrique (éventt pondérée) des indicateurs de base   utilisé dans l'indicateur de développement humain (IDH) 2010   favorise la convergence des indicateurs de base   admet une certaine substituabilité   particulièrement sensible aux faibles valeurs des indicateurs   difficile à comprendre

RJ 1

1


Méthodes de prise en compte conjointe d'indicateurs (6/6) Moyenne géométrique / arithmétique

RJ 1

1

IDH 2010 ancienne méthode (moyenne arithmétique)

IDH

201

0 no

uvel

le m

étho

de

(moy

enne

géo

mét

rique

) Indice de développement humain IDH par pays (Klugman, 2010)

La méthode d'agrégation a une forte influence sur le niveau et le classement des objets mesurés par l'indicateur

 Un indicateur est un outil de mesure simple et accessible à tous

 1ère exigence : définir précisément ce que représente un indicateur  définir les caractéristiques de l'objet représenté

 Construire un indicateur demande de multiples compétences (interdisciplinarité)   dans le domaine considéré (connaître le processus de l'impact

sur l'environnement par ex.)   en aide à la décision   en mathématiques (simples)

RJ 1

1

Les indicateurs comme exemple de méthode d'évaluation de la durabilité Conclusion (1/3)

 Indicateurs monodimension  Quelques indicateurs économiques, généralement

surinterprétés  Nombreux indicateurs de justice sociale   Peu d'indicateurs d'impact environnemental de qualité   très peu d'indicateurs des autres dimensions du développement

durable  Indicateurs pluridimensionnels

 Quelques indicateurs agrégeant 2 ou 3 dimensions du développement durable

  Peu d'indicateurs de développement durable

RJ 1

1


 La méthode d'agrégation n'est pas neutre  Il est difficile de parler d'un secteur (de production)

durable (car non autonomie)   indicateurs de développement durable liés à un territoire,

plutôt macroscopiques (nationaux)   ou propres aux consommations d'une population, quelque soit

sa taille (cas de l'empreinte écologique)

RJ 1

1


Indicateurs : pour en savoir plus…   Rapport COST 356 :

Joumard R. and Gudmundsson H. (eds), 2010. Indicators of environmental sustainability in transport: an interdisciplinary approach to methods. INRETS ed., Recherches R282, Bron, France, 422 p. http://cost356.inrets.fr/pub/reference/reports/Indicators_EST_May_2010.pdf ou http://hal.archives-ouvertes.fr/hal-00492823/fr/

  Joumard R., 2011. Évaluer la durabilité. In Durable ? Éd. Ifsttar, R284, Bron, France, § 4.3, p. 175-213.

RJ 1

1

Merci pour votre attention

RJ1

1

les indicateurs comme exemple de méthode … · les indicateurs comme exemple de ... nombreux par...

Documents