Élaborer les principales questions d’évaluation convenues

Available languages

L’évaluation, par définition, doit répondre à des questions vraiment évaluatives : elle doit non seulement demander « Quels ont été les résultats? » (une question descriptive), mais également « À quel point les résultats ont-ils été bons? » (une question évaluative). Selon le type d’évaluation, des questions logiques doivent également être posées (Dans quelle mesure les résultats découlent-ils de l’intervention?).

Une évaluation doit être axée sur la réponse à un petit nombre de questions principales d’évaluation  générale qui concernent le rendement global. Chacune de ces principales questions d’évaluation doit être approfondie davantage en posant des questions plus détaillées sur le rendement relatif à des dimensions précises du mérite (concernant des critères d’évaluation comme la pertinence, l’équité, l’efficacité et la durabilité). Les principales questions d’évaluation doivent également refléter les utilisations prévues de l’évaluation.

Les bonnes questions principales d’évaluation sont :

  • peu nombreuses : en général, 7 questions (±2) constituent un bon nombre de questions. Ce nombre de questions permet de couvrir différents aspects de l’intervention, mais est suffisamment faible pour ne pas devenir un fardeau;
  • des questions ouvertes (c.-à-d. auxquelles on ne peut pas répondre par oui ou non);
  • assez précises pour aider à orienter l’évaluation, mais assez vastes pour être divisées en questions plus détaillées afin de guider la collecte de données.

Collaborez avec les principaux utilisateurs prévus de l’évaluation afin d’élaborer une liste convenue des principales questions d’évaluation.

Le fait de déterminer clairement l’utilisation prévue de l’évaluation et le type d’évaluation nécessaire peut aider à élaborer les principales questions d’évaluation appropriées.

La typologie suivante peut être utilisée pour classer le type d’évaluation et les questions typiques

  • Besoin d’une analyse
    • Qu’est-ce qui est requis? 
    • Quels sont les besoins non comblés?
  • Conception de l’intervention
    • Quelle est la meilleure façon de concevoir l’intervention?
  • Surveillance
    • Comment cela se déroule-t-il? (rapports réguliers sur les mesures)
  • Évaluation du processus
    • L’intervention est-elle mise en oeuvre selon le plan (études périodiques)? 
    • Qu’est-ce qui a été fait dans un programme novateur?
  • Évaluation des résultats et des répercussions
    • What results have been produced?
    • What has (and has not) worked for whom in what circumstances?
  • Évaluation économique
    • L’intervention a-t-elle été rentable (par rapport à d’autres solutions)?
    • Quel a été le ratio coûts-avantages?

[Source : Adapté de Owen J with Rogers P (1999). Program Evaluation: Forms and Approaches. Sydney: Allen & Unwin/London: Sage UK.]

Ces types d’évaluation sont cumulatifs : l’évaluation des résultats et des répercussions requiert des données de l’évaluation du processus, et l’évaluation économique nécessite des données provenant de l’évaluation des résultats et des répercussions.

Le niveau des connaissances existantes jouera également un rôle important dans l’élaboration de questions d’évaluation appropriées.

Lorsque… Il est raisonnable…

... nous savons ce qui fonctionne et pourquoi

... de demander si des processus sont suivis (décrire les activités par rapport à une norme convenue)

... de démontrer la valeur de ce qui est fait (décrire les résultats par rapport à l’énoncé convenu des buts et des besoins)

...nous ne savons pas si cela fonctionne

d’examiner le processus ainsi que les résultats et les répercussions (mettre à l’essai la théorie)

... nous ne savons pas quelle est la meilleure façon

... de documenter le processus ainsi que le contexte et de comparer

le rendement (résultats et répercussions, efficience)

…we don’t know what could work

d’utiliser la recherche-action ainsi que l’apprentissage et de communiquer les résultats (poser une série de questions concernant les signes précurseurs de réussite ou d’échec)

Produit

  • Liste des principales questions d’évaluation convenues

Exemples

'Élaborer les principales questions d’évaluation convenues' is referenced in: