Élaborer les principales questions d’évaluation convenues

L’évaluation, par définition, doit répondre à des questions vraiment évaluatives : elle doit non seulement demander « Quels ont été les résultats? » (une question descriptive), mais également « À quel point les résultats ont-ils été bons? » (une question évaluative). Selon le type d’évaluation, des questions logiques doivent également être posées (Dans quelle mesure les résultats découlent-ils de l’intervention?).

Une évaluation doit être axée sur la réponse à un petit nombre de questions principales d’évaluation  générale qui concernent le rendement global. Chacune de ces principales questions d’évaluation doit être approfondie davantage en posant des questions plus détaillées sur le rendement relatif à des dimensions précises du mérite (concernant des critères d’évaluation comme la pertinence, l’équité, l’efficacité et la durabilité). Les principales questions d’évaluation doivent également refléter les utilisations prévues de l’évaluation.

Les bonnes questions principales d’évaluation sont :

  • peu nombreuses : en général, 7 questions (±2) constituent un bon nombre de questions. Ce nombre de questions permet de couvrir différents aspects de l’intervention, mais est suffisamment faible pour ne pas devenir un fardeau;
  • des questions ouvertes (c.-à-d. auxquelles on ne peut pas répondre par oui ou non);
  • assez précises pour aider à orienter l’évaluation, mais assez vastes pour être divisées en questions plus détaillées afin de guider la collecte de données.

Collaborez avec les principaux utilisateurs prévus de l’évaluation afin d’élaborer une liste convenue des principales questions d’évaluation.

Le fait de déterminer clairement l’utilisation prévue de l’évaluation et le type d’évaluation nécessaire peut aider à élaborer les principales questions d’évaluation appropriées.

La typologie suivante peut être utilisée pour classer le type d’évaluation et les questions typiques.

Type d’évaluation Types de questions posées

Besoin d’une analyse

Qu’est-ce qui est requis? Quels sont les besoins non comblés?

Conception de l’intervention

Quelle est la meilleure façon de concevoir l’intervention?

Surveillance

Comment cela se déroule-t-il? (rapports réguliers sur les mesures)

Évaluation du processus

L’intervention est-elle mise en oeuvre selon le plan (études périodiques)?

Qu’est-ce qui a été fait dans un programme novateur?

Évaluation des résultats et des répercussions

Quels résultats ont été produits?

Qu’est-ce qui a (et n’a pas) fonctionné pour quelles personnes et dans quelles circonstances?

Évaluation économique

L’intervention a-t-elle été rentable (par rapport à d’autres solutions)?

Quel a été le ratio coûts-avantages?

[Source : Adapté de Owen J with Rogers P (1999). Program Evaluation: Forms and Approaches. Sydney: Allen & Unwin/London: Sage UK.]

Ces types d’évaluation sont cumulatifs : l’évaluation des résultats et des répercussions requiert des données de l’évaluation du processus, et l’évaluation économique nécessite des données provenant de l’évaluation des résultats et des répercussions.

Le niveau des connaissances existantes jouera également un rôle important dans l’élaboration de questions d’évaluation appropriées.

Lorsque  Il est raisonnable …

... nous savons ce qui fonctionne et pourquoi

... de demander si des processus sont suivis (décrire les activités par rapport à une norme convenue)

... de démontrer la valeur de ce qui est fait (décrire les résultats par rapport à l’énoncé convenu des buts et des besoins)

...nous ne savons pas si cela fonctionne

d’examiner le processus ainsi que les résultats et les répercussions (mettre à l’essai la théorie)

... nous ne savons pas quelle est la meilleure façon

... de documenter le processus ainsi que le contexte et de comparer

le rendement (résultats et répercussions, efficience)

…we don’t know what could work

d’utiliser la recherche-action ainsi que l’apprentissage et de communiquer les résultats (poser une série de questions concernant les signes précurseurs de réussite ou d’échec)

Produit

  • Liste des principales questions d’évaluation convenues

Exemples

Exemples de principales questions d’évaluation de l’AIMS

Renseignements et ressources supplémentaires

Decide evaluation questions – fournit d’autres directives et ressources.

Good Evaluation Questions: A Checklist to Help Focus Your Evaluation – une orientation élaborée par le National Asthma Control Program des Centers for Disease Control and Prevention des États-Unis.

What are the key evaluation questions? – une orientation élaborée par l’Office for Learning and Teaching du gouvernement australien.

You are currently here:
Voir toutes les étapes du processus d’évaluation

Comments

There are currently no comments. Be the first to comment on this page!

Add new comment

Login Login and comment as BetterEvaluation member or simply fill out the fields below.