Approches innovantes en matière d’audit de performance : leçons comparatives tirées des Institutions supérieures de contrôle des finances publiques

Auteur : Alfredo Campos Lacoba, Auditeur – Directeur adjoint, présidence de la section d’audit, Cour des comptes d’Espagne

Résumé

L’audit de performance connaît actuellement une transformation majeure au sein de la communauté internationale de l’audit public. Les Institutions supérieures de contrôle des finances publiques (ISC) s’éloignent de plus en plus des évaluations traditionnelles axées sur l’économie, l’efficience et l’efficacité pour s’orienter vers des approches plus sophistiquées, axées sur l’évaluation et fondées sur l’analyse des données, l’évaluation d’impact, l’analyse des risques et l’élaboration de politiques fondées sur des données probantes.

Cet article présente une analyse comparative des méthodologies et pratiques innovantes identifiées dans les contributions au premier Prix du Groupe de travail de l’INTOSAI sur l’évaluation des politiques et programmes publics (WGEPPP). S’appuyant sur les expériences du Brésil, du Costa Rica, de la France, de la République tchèque, du Maroc, de la Roumanie, de l’Espagne et de la Thaïlande, cet article identifie les tendances émergentes qui façonnent l’avenir de l’audit de performance.

L’étude met en avant des outils innovants tels que l’analyse géospatiale, les modèles économétriques, l’intelligence artificielle, les échelles de maturité, les systèmes de notation visuelle, la triangulation des données et les méthodes participatives. Elle examine également la manière dont les ISC abordent les politiques publiques complexes et transversales grâce à des approches multidisciplinaires et fondées sur les données.

L’article soutient que ces innovations renforcent la capacité des ISC à produire des conclusions pertinentes, à améliorer l’évaluation des politiques et à renforcer la valeur publique et la responsabilité.

1. Introduction

L’audit de performance a considérablement évolué au cours de la dernière décennie. La complexité croissante des politiques publiques, les exigences grandissantes en matière de responsabilité et l’expansion d’une gouvernance fondée sur des données factuelles ont poussé les ISC à adopter des approches analytiques et évaluatives plus avancées.

Cette transformation se reflète dans les initiatives récentes promues au sein de la communauté de l’INTOSAI, notamment par le biais du Groupe de travail sur l’évaluation des politiques et programmes publics (WGEPPP). La première édition du Prix WGEPPP a mis en avant des pratiques d’audit innovantes capables d’améliorer l’évaluation des programmes publics et de générer des informations plus utiles pour les décideurs et les citoyens.

Les candidatures soumises révèlent une tendance commune : l’audit de performance intègre progressivement des techniques traditionnellement associées à l’évaluation des politiques, à la science des données, à l’analyse comportementale et à l’évaluation d’impact. Plutôt que de se concentrer exclusivement sur la conformité ou les défaillances opérationnelles, les ISC examinent de plus en plus si les interventions publiques atteignent les résultats escomptés et produisent les impacts sociétaux souhaités.

L’analyse comparative de ces expériences internationales offre des enseignements précieux pour la modernisation de l’audit public externe.

2. Au-delà de l’audit de performance traditionnel : les nouvelles approches évaluatives au sein des Institutions supérieures de contrôle des finances publiques 

L’une des tendances les plus marquantes identifiées parmi les expériences analysées est la transition de l’audit de performance traditionnel vers un audit axé sur l’évaluation.

Plusieurs ISC appliquent désormais des méthodologies qui évaluent explicitement la logique d’intervention, la cohérence des politiques, les résultats et les impacts. Cette évolution est particulièrement visible dans les travaux menés par la Cour des comptes française, la Cour fédérale des comptes brésilienne (TCU) et le Bureau d’audit de l’État de Thaïlande.

Par exemple, l’évaluation française des politiques de développement du biogaz a combiné des techniques économétriques, des analyses comparatives et des bases de données administratives pour estimer l’impact économique réel des mécanismes de soutien public sur la résilience agricole. De même, l’évaluation française des alternatives à l’emprisonnement a utilisé des analyses statistiques et économétriques pour évaluer les résultats en matière de récidive et de réinsertion, démontrant ainsi comment des approches fondées sur des données factuelles peuvent renforcer l’audit dans des secteurs politiquement sensibles.

Ces expériences montrent comment les ISC intègrent de plus en plus des techniques analytiques capables de traiter des questions politiques complexes auxquelles les procédures d’audit conventionnelles ne permettent pas à elles seules d’apporter une réponse.

3. L’audit fondé sur les données et l’analyse avancée

Une deuxième tendance majeure est le recours croissant à l’analyse avancée des données et aux outils numériques dans l’audit de performance.

La Cour fédérale des comptes (TCU) du Brésil fournit certains des exemples les plus innovants. Son audit du Programme national de vaccination a combiné des modèles statistiques multivariés, des enquêtes à grande échelle, des inspections sur le terrain et des tableaux de bord interactifs développés dans Power BI, un logiciel de visualisation interactive des données, de gestion de bases de données et de modélisation de l’audit a également intégré des outils d’intelligence artificielle pour faciliter la synthèse et l’organisation des constatations.

Dans le cadre d’un autre audit brésilien portant sur les bases de données relatives à la politique sociale, les auditeurs ont combiné le recoupement automatisé des dossiers administratifs avec des visites de vérification auprès des ménages afin d’identifier les incohérences dans les registres liés à la pauvreté. Cette méthodologie de triangulation a renforcé la fiabilité des conclusions et permis de quantifier les impacts financiers liés à des données de mauvaise qualité.

Les audits menés au Costa Rica démontrent également l’importance croissante de l’analyse territoriale et géospatiale. L’audit sur les services urbains durables a utilisé des techniques de géo-traitement QGIS, une analyse par grappes dans R et des coefficients de Gini pour identifier les inégalités d’accès aux services publics au sein des villes intermédiaires. Cette perspective territoriale a permis aux auditeurs de détecter des tendances qui seraient restées invisibles avec les techniques d’audit traditionnelles.

Ces exemples montrent comment les méthodologies fondées sur les données améliorent la profondeur, la robustesse et la crédibilité des conclusions d’audit, tout en permettant aux auditeurs de faire face à des contextes politiques de plus en plus complexes.

4. Structurer le jugement professionnel grâce à des méthodologies innovantes

Une autre innovation pertinente concerne les efforts visant à systématiser et à structurer le jugement professionnel dans le cadre de l’audit de performance.

La Cour des comptes de Tchéquie a élaboré un cadre méthodologique fondé sur des échelles graduées d’efficacité et d’efficience applicables aux programmes publics et aux subventions. Plutôt que de s’appuyer sur des évaluations purement subjectives, cette méthodologie établit des critères et des descripteurs clairement définis pour différents niveaux de performance. Cette approche améliore la cohérence entre les équipes d’audit, facilite l’agrégation des résultats et renforce la transparence dans la communication avec les entités auditées.

L’audit sur la transition énergétique au Brésil a introduit un autre outil innovant : un système de notation visuelle combinant un jugement qualitatif et des représentations quantitatives codées par couleur. L’audit a également utilisé une méthodologie dite « Audit Canvas » pour organiser visuellement les risques, les acteurs, les objectifs et les sources de preuves pendant la phase de planification.

De telles méthodologies contribuent à réduire l’arbitraire et à accroître la comparabilité et la communicabilité des conclusions d’audit.

5. L’audit des systèmes de gouvernance complexes

Bon nombre des audits analysés portent sur des politiques caractérisées par une gouvernance à plusieurs niveaux, une fragmentation institutionnelle et des objectifs transversaux.

L’audit coordonné brésilien du Programme national de vaccination a donné lieu à une coopération entre la Cour fédérale des comptes et vingt institutions d’audit infranationales. L’audit a adopté une perspective « Whole-of-Government » (à l’échelle de l’ensemble du gouvernement) pour évaluer la coordination entre les institutions chargées de la logistique et de la mise en œuvre de la vaccination.

De même, l’audit marocain des contrats délégués de gestion des déchets a analysé l’ensemble du cycle contractuel, de la planification et de la passation des marchés à l’exécution et au suivi. L’approche fondée sur les risques a révélé comment les faiblesses des structures de gouvernance affectaient la qualité du service, la viabilité financière et la cohérence des politiques.

L’audit roumain des systèmes de défense civile illustre également l’importance des approches d’audit systémiques. Grâce à un travail de terrain approfondi et à l’analyse de données administratives, les auditeurs ont évalué la résilience et l’état de préparation des institutions dans un contexte de risque géopolitique croissant.

Ces expériences démontrent que l’audit de performance moderne nécessite de plus en plus une analyse systémique capable de saisir les interactions entre les institutions, les dispositifs de gouvernance et les instruments politiques.

6. Participation, communication et audit centré sur le citoyen

Plusieurs audits révèlent une importance croissante accordée à la participation, à la communication et aux approches centrées sur l’utilisateur.

L’audit mené par le Costa Rica sur les procédures d’octroi du statut de réfugié a intégré des cartes d’empathie, des ateliers avec la société civile et des mécanismes de participation des parties prenantes afin de mieux comprendre les expériences des usagers face aux services de migration. Des outils d’intelligence artificielle ont également été utilisés pour faciliter la transcription des entretiens et les activités de communication.

Ces méthodologies participatives représentent une évolution significative de l’audit public. Elles permettent aux ISC de compléter les données quantitatives par des informations qualitatives issues des bénéficiaires et des parties prenantes.

La communication elle-même devient également une dimension stratégique de l’audit. Plusieurs institutions ont utilisé des systèmes de notation visuelle, des tableaux de bord, des supports audiovisuels et des résumés simplifiés pour rendre les conclusions d’audit plus accessibles à un public non spécialisé.

Cette tendance reflète une conception plus large de l’impact de l’audit : les conclusions ne génèrent de valeur publique que si elles sont effectivement comprises et utilisées par les décideurs, les parties prenantes et les citoyens.

7. Mesurer la valeur publique de l’audit

L’une des contributions les plus innovantes mises en évidence dans l’analyse comparative est l’intérêt croissant pour la mesure de la valeur sociale générée par l’audit lui-même.

La Cour des comptes espagnole a proposé un cadre de « Retombées sociales de l’audit public » (SRPA) conçu pour estimer l’impact sociétal des audits de performance. Cette proposition combine des dimensions qualitatives et quantitatives et est explicitement liée aux principes de la norme INTOSAI-P12 concernant la valeur et les avantages des ISC.

Ce cadre comprend quatre laboratoires axés sur l’innovation :

• Le LAB de données ;
• Le LAB social ;
• Le LAB « Évaluation des politiques publiques » ;
• Le LAB « Durabilité transversale ».

La proposition explore également des techniques analytiques avancées telles que les modèles d’apprentissage automatique, les simulations institutionnelles et l’analyse de la valeur de Shapley afin de comparer les effets potentiels des modèles d’audit traditionnels à ceux axés sur l’innovation.

Bien qu’expérimentale, cette initiative reflète une évolution institutionnelle importante : les ISC ne se concentrent plus uniquement sur l’audit de la création de valeur publique par les gouvernements, mais cherchent de plus en plus à évaluer et à démontrer leur propre contribution à une meilleure gouvernance et à de meilleurs résultats sociétaux.

8. Conclusions

L’analyse comparative des candidatures au prix du WGEPPP montre que l’audit de performance entre dans une nouvelle phase méthodologique caractérisée par l’innovation, l’interdisciplinarité et une orientation plus marquée vers l’impact sur les politiques.

Plusieurs tendances convergentes se dégagent des expériences internationales analysées :

• Une confiance plus accrue à l’analyse fondée sur les données et aux techniques analytiques avancées ;
• un recours accru aux techniques économétriques et géospatiales ;
• L’expansion des approches participatives et centrées sur les citoyens ;
• le développement de méthodologies d’évaluation structurées ;
• Une attention croissante portée à la complexité de la gouvernance et à la résilience institutionnelle ;
• Une importance accrue accordée à la communication et à la valeur publique mesurable.

Ces innovations renforcent la capacité des ISC à évaluer des politiques publiques complexes, à formuler des conclusions fondées sur des données factuelles et à contribuer de manière significative à l’amélioration du secteur public.

Les expériences examinées confirment également que l’innovation en matière d’audit de performance n’affaiblit pas la rigueur du contrôle externe. Au contraire, les outils analytiques avancés, les approches multidisciplinaires et les méthodologies axées sur l’évaluation renforcent la crédibilité, la pertinence et l’impact sociétal de l’audit public.

Alors que les gouvernements sont confrontés à des défis de plus en plus complexes liés au développement durable, aux inégalités, à la transformation numérique et à la résilience institutionnelle, les ISC devront continuer à évoluer vers des modèles d’audit plus sophistiqués et davantage fondés sur des données factuelles. La coopération internationale et le partage des connaissances au sein de l’INTOSAI resteront des moteurs essentiels de cette transformation.