Rédiger un plan d’évaluation solide : ce que les bailleurs veulent voir

Pour les chargé·es de projet et responsables de développement d’OBNL québécois. Le plan d’évaluation est souvent rédigé en toute fin de demande — pourtant, les agents évaluateurs lui accordent une attention particulière. Maîtriser sa structure, ses indicateurs et sa logique interne peut faire la différence entre un financement accepté et un dossier renvoyé pour révision.

Pourquoi le plan d’évaluation pèse plus que vous ne le croyez

Au cours des cinq dernières années, la quasi-totalité des bailleurs de fonds québécois ont durci leurs exigences en matière d’évaluation. Le SACAIS, Patrimoine canadien, Centraide du Grand Montréal et la plupart des fondations privées demandent désormais des plans d’évaluation structurés, avec des indicateurs précis, des méthodes de collecte nommées et des responsables désignés.

Cette évolution tient à trois facteurs convergents : la montée de la culture des données probantes dans le secteur communautaire, les pressions gouvernementales pour démontrer l’efficacité des fonds publics, et une harmonisation progressive des pratiques avec les standards internationaux d’évaluation de programmes sociaux.

Un plan d’évaluation bien construit envoie un signal fort à l’agent évaluateur : l’organisme sait ce qu’il veut accomplir, dispose des outils pour le mesurer, et prend au sérieux ses obligations de reddition de comptes. À l’inverse, un plan vague — « nous distribuerons un sondage de satisfaction » — est perçu comme un indicateur de fragilité organisationnelle.

Les composantes d’un plan d’évaluation solide : étape par étape

Étape 1 — Définir l’objet de l’évaluation

Avant d’identifier des indicateurs, posez-vous deux questions fondamentales : évaluez-vous la mise en œuvre (avez-vous réalisé ce qui était planifié ?) ou les effets du projet (les participants ont-ils changé quelque chose dans leurs pratiques ou leur situation ?) ? La plupart des bailleurs québécois attendent les deux, mais avec des pondérations différentes selon la phase du projet et le type de programme.

Pour un projet en première année d’implantation, centrer l’évaluation sur la mise en œuvre est légitime — voire recommandé — tout en posant des jalons pour mesurer les effets dès l’année suivante.

Étape 2 — Construire vos indicateurs

Un indicateur n’est pas un objectif reformulé. C’est un outil de mesure précis, observable et vérifiable. Il doit répondre à la question : comment saurai-je si cet objectif a été atteint ?

La distinction fondamentale à maîtriser est celle entre extrants et résultats :

• Extrants (outputs) : ce que vous produisez — nombre d’ateliers réalisés, participants rejoints, heures de service offertes.
• Résultats à court terme : changements de connaissances ou d’attitudes chez les participants, mesurables en fin de projet.
• Résultats à moyen terme : changements de comportements, observables 3 à 12 mois après l’intervention.
• Impacts à long terme : transformations systémiques durables — rarement exigés dans le cadre d’une seule demande de subvention.

Les agents évaluateurs chevronnés repèrent immédiatement les plans qui ne proposent que des extrants. Pour un projet d’insertion socioprofessionnelle, « 120 personnes ont participé à nos ateliers » est un extrant. « 68 % des participants ont intégré un emploi ou une formation dans les 6 mois suivant le programme » est un résultat. Ce dernier indicateur a une valeur démonstrative incomparablement plus forte.

Étape 3 — Préciser les méthodes de collecte

Pour chaque indicateur, votre plan doit préciser quatre éléments : l’outil de collecte (questionnaire pré/post-test, grille d’observation, entrevue semi-dirigée, données administratives internes), la source (participants, partenaires, personnel, registres, données statistiques publiques), la fréquence (avant le projet, à mi-parcours, à la fin, et parfois 3 à 6 mois après), et le volume ou l’échantillon visé si vous ne pouvez pas rejoindre l’ensemble des participants.

Évitez les formulations floues du type « nous conduirons une évaluation participative ». Préférez : « Nous utiliserons un questionnaire auto-administré en deux temps — à l’inscription et à la dernière séance — complété par un suivi téléphonique avec un échantillon de 20 participants consentants à 3 mois. »

Étape 4 — Désigner un responsable de l’évaluation

Un plan sans responsable désigné est un plan sans garantie d’exécution — l’agent évaluateur le sait. Nommez une personne (coordinatrice, chargée de projet, direction générale) et indiquez le pourcentage de son temps consacré à l’évaluation. Ce geste renforce considérablement la crédibilité du dossier.

Si votre organisme n’a pas les capacités internes suffisantes, un partenariat avec un groupe de recherche universitaire, un CISSS ou un organisme spécialisé en évaluation est une option réaliste. Plusieurs programmes permettent de budgéter ce soutien externe explicitement.

Étape 5 — Planifier la diffusion des résultats

Les bailleurs les plus exigeants veulent savoir ce que vous ferez des données collectées. Indiquez si les résultats seront intégrés à un rapport annuel, présentés aux participants, transmis à votre réseau sectoriel ou publiés sur votre site. Cet engagement témoigne d’une maturité organisationnelle que les évaluateurs remarquent — et qui distingue un organisme apprenant d’un organisme qui coche des cases.

Budget, indicateurs et reddition de comptes

L’évaluation a un coût, et ce coût doit figurer dans le budget du projet. Les postes à prévoir incluent le temps de personnel pour la collecte et l’analyse des données, la conception ou l’adaptation d’outils (questionnaires, grilles d’observation), les licences logicielles si nécessaire, et les honoraires d’un évaluateur externe si le programme l’exige ou si vous souhaitez renforcer l’objectivité de votre démarche.

La plupart des programmes québécois et fédéraux permettent qu’une portion du budget total — généralement entre 5 % et 15 % selon le programme — soit consacrée à l’évaluation. Certains projets pilotes financés par EDSC peuvent aller jusqu’à exiger une évaluation externe indépendante pour les projets dépassant 150 000 $ CA. Vérifiez les règles spécifiques dans le guide du demandeur.

Exemples concrets et scénarios applicables

Un organisme montréalais spécialisé en alphabétisation a soumis une première demande pour des ateliers de numératie auprès de 80 adultes immigrés. Son plan d’évaluation initial mentionnait : « nombre d’ateliers réalisés, nombre de participants, taux de satisfaction. » La demande a été refusée.

Après révision, le plan a été restructuré autour de quatre indicateurs distincts : un pré-test de compétences numériques à l’inscription ; un post-test identique à la fin des 12 semaines ; un sondage de satisfaction en deux temps (fin d’atelier et 3 mois après) ; et un indicateur de maintien des acquis mesuré par entrevue téléphonique brève à 3 mois, portant sur l’utilisation des compétences en situation réelle. La demande révisée a été acceptée, avec une mention explicite de la qualité du plan d’évaluation dans le retour de l’agent.

Le calibrage selon le programme est essentiel. Un organisme sportif déposant une demande au PSOC (volet organisations) n’a pas les mêmes attentes évaluatives qu’un organisme de santé communautaire. Pour le PSOC, les indicateurs portent davantage sur la gouvernance, la participation des membres et la portée territoriale. Utiliser un gabarit générique sans l’adapter au programme visé est une erreur stratégique qui se répercute directement sur le score de la demande.

À l’autre extrême, un organisme qui accompagne des personnes en situation de vulnérabilité dans le cadre d’un projet financé par la Fondation Lucie et André Chagnon devra démontrer des changements mesurables dans les déterminants du bien-être des participants — avec des méthodes de collecte robustes et, si possible, une triangulation des sources de données.

Boîte à outils : checklist et modèle express

Checklist avant dépôt :

• Chaque objectif opérationnel a au moins un indicateur mesurable
• Au moins un indicateur de résultat (pas uniquement des extrants)
• Une méthode de collecte précise est décrite pour chaque indicateur
• Un responsable de l’évaluation est nommé et son temps est budgété
• Des cibles réalistes sont formulées (ex. « 75 % des participants »)
• Un plan de diffusion des résultats est prévu
• Les coûts d’évaluation sont intégrés au budget du projet
• Les exigences spécifiques du guide du demandeur ont été vérifiées

À retenir

• Distinguez extrants et résultats : les bailleurs attendent des changements mesurables chez vos bénéficiaires. Au moins un indicateur de résultat par objectif opérationnel est la norme minimale attendue.
• Désignez un responsable d’évaluation : cette désignation formelle rassure les agents évaluateurs et rend votre plan crédible et exécutable.
• Calibrez selon le programme visé : les attentes du SACAIS, de Patrimoine canadien et d’une fondation privée diffèrent sensiblement. Lisez attentivement le guide du demandeur avant toute rédaction.
• Budgétez l’évaluation : un plan sans ressources dédiées n’est pas crédible. La plupart des programmes acceptent une enveloppe de 5 % à 15 % du budget total.
• Engagez-vous à diffuser les résultats : précisez concrètement ce que vous ferez des données collectées. C’est un signal de maturité organisationnelle que les bailleurs les plus exigeants remarquent.

Questions fréquentes

À quelle étape doit-on préparer le plan d’évaluation ?

Le plus tôt possible — idéalement au moment où vous définissez vos objectifs de projet. Un plan construit en amont est cohérent avec l’ensemble du dossier. Un plan ajouté en dernière minute manque d’articulation avec la logique d’intervention, et cela se perçoit à la lecture.

Peut-on réutiliser des données déjà collectées pour un autre programme ?

Oui, si les données sont pertinentes, récentes et que vous disposez de l’autorisation de les utiliser. Certains bailleurs valorisent les données longitudinales — elles renforcent la solidité de l’argumentation. Précisez toujours la source, la date de collecte et la méthodologie retenue.

Un évaluateur externe est-il obligatoire ?

Pas systématiquement. Certains programmes l’exigent pour les projets de grande envergure (souvent au-delà de 150 000 $ CA), mais la majorité acceptent une évaluation interne rigoureuse. Un partenariat avec une université, un CISSS ou un organisme de recherche communautaire peut renforcer la crédibilité du plan sans nécessiter un budget prohibitif.

Combien d’indicateurs faut-il inclure ?

La qualité prime sur la quantité. Trois à cinq indicateurs bien définis valent mieux que douze formulés vaguement. Certains guides du demandeur précisent un nombre maximal ou un format obligatoire — respectez-le, même si vous avez davantage à démontrer.