Évaluation de la qualité de l’information du point de vue de l’utilisateur

Auteurs : Klauss Nogueira; Rafael Albuquerque da Silva et Tiago Menegardo, auditeurs de l’unité d’audit spécialisée dans les technologies de l’information de la TCU (Cour des comptes fédérale du Brésil).

Cet article présente une méthodologie permettant d’évaluer la transparence effective des informations publiées sur les portails des entités publiques. Il prend en compte non seulement la simple disponibilité de l’information, mais aussi les exigences de qualité de l’information, telles que l’actualité, l’exhaustivité, la concision, l’exactitude, la clarté, la fiabilité, l’accessibilité et la pertinence.

La méthodologie implique l’évaluation de la perception des utilisateurs de l’information, car la valeur de l’information dépend de l’utilisateur et du contexte dans lequel elle est considérée. 

La méthodologie mentionnée a été appliquée dans le cadre d’un audit mené par la Cour des comptes fédérale du Brésil (TCU) entre 2020 et 2021. Cet audit a évalué les portails du ministère de la Santé, de la Chambre des députés et de la TCU elle-même.

Exigences de la qualité relatives à l’information

Les exigences de qualité de l’information sont des caractéristiques qui peuvent être utilisées pour l’analyse et la mesure de la qualité de l’information, en tenant compte des aspects subjectifs et objectifs. Elles comprennent les caractéristiques liées à l’information elle-même et celles liées à son utilisation.

Par conséquent, étant donné que l’information est soumise à divers critères permettant d’évaluer sa qualité, il était essentiel de quantifier la valeur de l’information en évaluant ses exigences de qualité afin de vérifier l’efficacité de l’information fournie. 

Par conséquent, après avoir analysé les études universitaires sur les sciences de l’information et le guide de référence « Enabling Information » de Cobit 5, les exigences suivantes en matière de qualité de l’information ont été adoptées : actualité, accessibilité, clarté, exactitude, fiabilité, concision, pertinence, format ouvert, sécurité et exhaustivité.

Toutefois, l’objectif de l’audit étant de vérifier l’utilité réelle des informations du point de vue des utilisateurs, l’attribut « sécurité » n’a pas été évalué efficacement de ce point de vue. Il a été évalué à l’aide d’un questionnaire d’auto-évaluation sur la sécurité, tel qu’il a été réalisé par les organisations respectives, ce qui dépasse le cadre du présent article. De même, l’exigence du « format ouvert”, plus technique, a été évaluée par l’équipe d’audit elle-même à l’aide d’un modèle d’évaluation spécifique.

Méthodologie

L’évaluation a débuté par la sélection des portails sur la base des contributions de groupes représentatifs de la société, tels que les entités commerciales, les entités gouvernementales traitant des données publiques, les organisations de contrôle social, les instituts de protection des consommateurs et les chercheurs travaillant avec des données publiques. Après la consultation, 192 pages de portail contenant des informations importantes pour ces entités ont été répertoriées, et les portails du ministère de la Santé, de la chambre des députés et de la TCU ont été les plus cités.

L’équipe d’audit a ensuite rencontré les responsables de chaque portail afin de comprendre le processus de publication des informations et l’existence de procédures visant à garantir la qualité des informations.

Collecte de données

En vue de recueillir les perceptions des utilisateurs concernant la qualité de l’information, l’équipe d’audit a utilisé deux techniques de collecte de données testimoniales : des groupes de discussion et une enquête avec un questionnaire d’évaluation.

Groupes de réflexion

Les groupes de réflexion ont impliqué des utilisateurs spécialisés des portails évalués, tels que des journalistes, des avocats, des chercheurs et des représentants d’organismes de contrôle social, entre autres. L’objectif était de discuter de la qualité des informations publiées sur les portails de leur point de vue professionnel. 

Enquête avec questionnaire d’évaluation

Un questionnaire d’évaluation a été conçu pour quantifier la valeur des informations publiées sur les portails par rapport aux exigences de qualité choisies. Les personnes interrogées pouvaient faire part de leurs perceptions et de leurs commentaires en utilisant des échelles d’évaluation et des réponses en texte libre.

Le questionnaire comprenait les questions suivantes relatives à divers aspects de la qualité de l’information :

• La manière de trouver et d’obtenir des informations sur le portail est simple et sans complication (Accessibilité).
• Les informations et les données trouvées sur le portail sont pertinentes et répondent à vos besoins (Pertinence). 
• Les informations trouvées sur le portail sont faciles à comprendre et à interpréter (Clarté). 
• Les informations et les données trouvées sur le portail sont correctes, c’est-à-dire exemptes d’erreurs telles que des fautes de grammaire et d’orthographe, des symboles, des valeurs et des unités incorrects, etc. (Exactitude). 
• Les informations trouvées sur le portail sont complètes, c’est-à-dire qu’elles contiennent toutes les données nécessaires et suffisantes pour les rendre utiles (Exhaustivité). 
• Vous faites confiance aux informations et aux données trouvées sur le portail pour prendre des décisions ou exécuter des tâches (Fiabilité). 
• Les informations trouvées sur le portail sont suffisamment à jour (Actualité). 
• Les informations et les données trouvées sur le portail sont présentées de manière concise, c’est-à-dire qu’elles présentent un niveau de détail approprié et ne contiennent pas d’éléments inutiles (Concision).

Les personnes interrogées ont été principalement contactées grâce à la collaboration des responsables des portails, qui ont publié des notes et des informations sur leurs portails et leurs comptes officiels de médias sociaux, encourageant ainsi les utilisateurs à participer.

Résultats

Les données recueillies auprès des utilisateurs indiquent que les portails de la TCU, de la Chambre des députés et du ministère de la Santé ne satisfont pas pleinement aux exigences de qualité établies par la législation et les meilleures pratiques, ce qui peut compromettre l’utilisation efficace des informations publiées par les utilisateurs.

Parmi les problèmes soulevés, citons les difficultés à localiser certaines informations, le manque d’actualité, le manque de concision et l’insuffisance des données à des fins d’utilité.

Toutefois, dans l’ensemble, les utilisateurs ont estimé que les informations du portail étaient pertinentes, claires, correctes et fiables. 

En outre, les entretiens avec les responsables du portail ont révélé qu’il n’existait pas de procédure interne d’évaluation de la qualité des informations publiées, compte tenu des exigences de qualité vérifiées et du retour d’information de la part des utilisateurs.

Conclusion

L’évaluation de la transparence effective de l’information sur les portails des entités publiques ne doit pas négliger les exigences de qualité de l’information, telles que l’actualité, l’exhaustivité, la concision, l’exactitude, la clarté, la fiabilité, l’accessibilité et la pertinence. 

Elle doit également tenir compte de la perception de l’information par les utilisateurs, car la valeur de l’information dépend de l’utilisateur et du contexte.

L’évaluation doit impliquer différents groupes d’utilisateurs, notamment le grand public, les experts, les universitaires, les professionnels liés au domaine du portail, les journalistes, les décideurs, les personnes ayant une expérience limitée de la consommation d’informations, etc.

Par ailleurs, il convient de préciser que la sélection d’autres critères différents pour évaluer la qualité de l’information, ainsi que le choix d’une autre méthode de collecte de données et d’évaluation, sont possibles. Le travail peut donc être facilement reproduit par d’autres organisations de contrôle des finances publiques.

Enfin, outre le fait de favoriser le débat sur le sujet, il est entendu que le fait de s’assurer que les informations publiées sur les portails des entités publiques respectent les exigences en matière de qualité de l’information peut contribuer à diffuser des informations utiles à la société, à rendre plus efficace l’exercice du contrôle social, ainsi qu’à lutter contre la propagation des fausses nouvelles (fake news).

Au-delà de ses applications directes dans les audits, l’adoption de cette méthodologie peut susciter des discussions intéressantes et des changements positifs dans le domaine de la diffusion de l’information publique. En soulignant l’importance du respect des exigences en matière de qualité de l’information, les ISC peuvent contribuer à la diffusion d’informations fiables et utiles à la société dans son ensemble. Cela contribue non seulement à l’exercice efficace du contrôle social, mais joue également un rôle essentiel dans la lutte contre la prolifération des fausses informations et des informations erronées. Alors que le débat sur la qualité de l’information prend de l’ampleur, cette méthodologie peut servir de moteur à des améliorations plus larges des pratiques de transparence et de responsabilité dans divers secteurs.

Le rapport exhaustif de cet audit se trouve sur le site tcu.gov.br,

recherchez « ACÓRDÃO Nº 878/2022 – TCU – Plenário; TC 037.554/2020-4 », 

ou sollicitez-le auprès de klaussho@tcu.gov.br