L’une des étapes fondamentales de la mise en place d’interventions consiste à anticiper, planifier et réaliser l’évaluation du dispositif mis en place. Cette étape permet en effet de s’assurer de la bonne utilisation des ressources (dont les ressources financières) et des moyens à disposition, souvent limités. Elle permet aussi d’optimiser les dispositifs futurs, et donc d’améliorer leur impact.
L’évaluation peut faire appel à plusieurs disciplines : santé publique, épidémiologie, recherche clinique, statistiques, psychologie sociale, sociologie, économie, etc.
Il existe une grande diversité de méthodes d’évaluation, et quels que soient les moyens alloués et les compétences des évaluateurs, il est toujours possible de mettre en œuvre une forme d’évaluation qui sera utile pour optimiser l’action.
L’évaluation d’une intervention se construit et se réfléchit au sein d’un groupe de partenaires locaux et de professionnels de l’évaluation au moment du choix de l’intervention et du protocole : dès ces étapes, il convient de déterminer les indicateurs qui seront suivis. Les indicateurs dépendent des objectifs de l’intervention. Lors de la formulation d’une demande de financement, généralement réalisée en amont de la mise en place de l’intervention, il conviendra d’intégrer dans la mesure du possible le coût de l’évaluation.
Les différents types d'évaluation
- Les évaluations de processus, d'implantation ou de mise en œuvre. Elles sont en général les plus simples à mettre en œuvre et apportent déjà des informations très utiles. Elles permettent de décrire l’intervention réellement mise en œuvre, ce qui peut différer de celle initialement prévue, mais aussi de mesurer les impacts immédiats de la campagne sur les objectifs intermédiaires (implantation, notoriété, etc.) qui ne sont pas les objectifs finaux de l’action (changement des comportements).
- Les évaluations d'efficacité, de résultat ou d'impact. Ces évaluations sont plus complexes à concevoir, mettre en œuvre et analyser. Elles doivent permettre de répondre à la question : le dispositif a-t-il atteint son(ses) objectif(s) spécifique(s) ? Ainsi, à la question « la campagne a-t-elle été vue » (évaluation de processus), on ajoute une question supplémentaire : « le fait d’avoir été exposé à la campagne a-t-il eu un effet sur les connaissances ou les comportements de la cible ? » (selon les objectifs visés).
Le modèle logique pour aider à la conception de l'évaluation
Lorsque l’on prépare une intervention, formaliser un modèle logique permet d’améliorer la campagne d’une part, et d’aider à concevoir le protocole d’évaluation d’autre part. Cet outil facilite en effet la planification, la mise en place et l’évaluation d’interventions.
Un modèle logique est une représentation schématique de l’intervention que l’on souhaite mettre en œuvre, des objectifs qu'elle vise, et des mécanismes d’action supposés. Le modèle logique doit permettre d’expliciter la logique de l’intervention (les déterminants visés par l’action) et la manière dont on pense qu’elle permet d’atteindre les objectifs. Le modèle logique peut être très simple ou plus complexe.
Exemple de modèle logique :
Ressources - guides pour mettre en place des évaluations
- Evaluation d'une action de santé publique : recommandations
Haute Autorité de Santé (HAS), 1995 - Framework for Program Evaluation in Public Health
Centres for Disease Control and Prevention (CDC), 1999 - Introduction to Program Evaluation for Comprehensive Tobacco Control Programs
Centres for Disease Control and Prevention (CDC), 2001 - Introduction to Program Evaluation for Public Health Programs: a Self-Study Guide
Centres for Disease Control and Prevention (CDC), 2011 - Evaluation Handbook
W.K.Kellogg Fondation, 2004 - Logic Model Development Guide
W.K.Kellogg Fondation, 2004
Les CDC (Centers for Disease Control and Prevention) dispose de nombreux outils et guides pour aider à la mise en place d’évaluations en santé publique. L’ensemble de leurs ressources sont disponibles sur leur site internet.