Note de contenu : |
Une politique publique qui fait la preuve de son efficacité voit sa légitimité renforcée. Mais réaliser une telle démonstration suppose de disposer de méthodes dévaluation objectives et transparentes.
Évaluer nos politiques publiques ne répond pas seulement à un impératif budgétaire. Il sagit aussi et surtout daméliorer lefficacité de lintervention publique. Or il faut, pour cela, disposer dune information objective permettant didentifier les politiques et les dispositifs produisant les meilleurs résultats. Lobjet de lévaluation dimpact est précisément de construire rigoureusement cette information.
À la recherche de la causalité pure
Comment ? En comparant la situation des bénéficiaires dune politique publique à celle quelle aurait été en labsence dintervention situation hypothétique quon appelle « contrefactuelle ». Un chômeur aurait-il retrouvé un emploi sans le stage de formation quil a suivi ? Un élève aurait-il eu de meilleurs résultats scolaires dans une classe de taille plus petite ?
Lexercice suppose dune part de choisir des indicateurs pertinents au regard de lobjectif poursuivi le retour en emploi, les résultats scolaires et de neutraliser les biais de sélection les chômeurs non bénéficiaires du stage, pris pour comparaison, doivent avoir des caractéristiques similaires à celles des bénéficiaires. Objectif de ces précautions de rigueur ? Établir une causalité pure et non un simple lien de corrélation entre la politique évaluée et les résultats attendus. Quant au choix de la méthode, il dépend essentiellement des contraintes opérationnelles et de la disponibilité des données. Lexpérimentation contrôlée ou aléatoire est souvent privilégiée mais dautres méthodes sont également courantes, comme la différence de différence, la régression par discontinuité, les variables instrumentales ou le matching.
Généraliser, interpréter et comparer
Aller au-delà de la mesure des impacts sur les seuls bénéficiaires nécessite souvent davoir recours à une approche structurelle, c'est-à-dire faisant appel à une représentation de léconomie, de ses mécanismes et du comportement des agents. Lapproche structurelle peut savérer utile (et même indispensable) pour simuler la généralisation dune intervention limpact dune extension du RSA aux moins de 25 ans par exemple. Elle lest aussi pour interpréter les résultats, cest-à-dire comprendre les mécanismes économiques à luvre et les quantifier dit autrement : expliquer les causes des effets mesurés. Attention cependant, les résultats sont très sensibles aux hypothèses qui sous-tendent la représentation du modèle.
Autre méthode susceptible de fournir des clés de compréhension utiles : lapproche qualitative basée sur des entretiens et de lobservation directe. Complémentaire de lapproche quantitative, elle peut être mobilisée pour comprendre les causes de non-recours à certains dispositifs par exemple ou, plus généralement, celles de résultats mitigés au regard des effets attendus. Enfin, cest lanalyse coût-efficacité ou coût-bénéfice qui est mobilisée quand il sagit de comparer entre elles des politiques publiques.
De lusage des bonnes pratiques
Quil sagisse de mesurer limpact dun dispositif sur ses bénéficiaires ou les effets de sa généralisation, dexpliquer les raisons de son échec ou de son succès, ou encore den mesurer lefficience relative, les résultats des évaluations doivent produire des résultats, non seulement rigoureux, mais également compréhensibles par les décideurs et lopinion publique.
De là, un certain nombre de bonnes pratiques à respecter au cours de lexercice : sappuyer sur les travaux disponibles, prendre garde aux limites de chaque méthode, sinterroger sur le caractère transposable des résultats à une population plus large, favoriser la pluridisciplinarité des approches, et enfin veiller à limpartialité du commanditaire comme à lindépendance des évaluateurs.
Parce que lefficacité des politiques publiques est un enjeu majeur, la loi, lorsquelle instaure un nouveau dispositif, pourrait non seulement prévoir son évaluation, mais aussi les moyens nécessaires à cette évaluation
dans les règles de lart. |