Selon Grant Wiggins, un chercheur et un spécialiste en réformes scolaires, « l'évaluation est authentique lorsqu'elle examine directement les performances des étudiants sur des tâches intellectuelles utiles. L'évaluation traditionnelle, par comparaison, repose sur des éléments indirectement liés — des substituts efficaces et simplistes dont on pense pouvoir tirer des conclusions pertinentes à partir des performances de l'étudiant sur ces défis estimés« Assessment is authentic when it directly examines students performance on worthy intellectual tasks. Traditional assessment, by contrast, relies on indirect proxy items —efficient, simplistic substitutes from which we think valid inferences can be made about the student’s performance at those valued challenges. ». »
Selon lui, l’étudiant peut démontrer par l’évaluation authentique sa maîtrise des compétences en l’utilisant dans un cadre le plus réel possible. Les examens traditionnels ne sont que des moyens de montrer que l’étudiant se rappelle les éléments d’informations ou qu’il peut appliquer machinalement des techniques.
« Test validity should depend in part upon whether the test stimulates real-world tests of ability. Validity on most multiple-choice tests is determined merely by matching items to the curriculum content. »Grant, P. Wiggins, The case for authentic Assessment. ERIC Digest, p1. Trad. « La réussite des tests devrait dépendre en partie du fait de stimuler des capacités mises en œuvre dans le monde réel. La réussite à la plupart des questionnaires à choix multiples est plutôt déterminée par la capacité à faire correspondre des éléments au contenu du programme d'enseignement. »
Selon Janine Huot : une tâche basée sur la performance consiste en une activité qui requiert la démonstration par les apprenants de leurs aptitudes à intégrer et utiliser leur savoir, savoir-faire et jugement dans un contexte authentique. Une telle tâche possède une ou plusieurs caractéristiques suivantes :
elle exige l’utilisation de connaissances et d’habiletés dans un contexte représentant des situations ou problèmes réels : elle permet de découvrir la démarche utilisée par les apprenants pour affronter une situation donnée, plutôt que de se limiter au résultat final : elle fait appel à plusieurs résultats d’apprentissage ou compétences ; elle exige l’utilisation d’aptitudes intellectuelles complexes ; elle permet d’observer de multiples facettes de l’apprentissage ; elle donne aux apprenants le choix des types de production pour exhiber ce qu’ils ont apprisJanine Huot, Un aperçu de l’approche pédagogique basée sur la performance Telecom British Columbia, Alberta, Ontario, Quebec | Uniserve, p3.
Quelques exemples d’application
Depuis très longtemps, l’évaluation authentique a été utilisée dans des domaines professionnels. On peut penser au droit et au notariat qui s’enseignaient par apprentissage et qui étaient évalués par un bureau d’examinateurs. Les armées américaine, britannique et canadienne se servent de l’évaluation authentique dans l’attribution des brevets d’officiers.
Exemple de l’École des aspirants officiers des Forces armées canadiennes
Dans le cours de l’École des aspirants officiers des Forces armées canadiennes, on utilise l’évaluation authentique pour vérifier les compétences en leadership. Un élève-officier reçoit l’ordre d’aller chercher deux rebelles de l’Armée de libération de l’Ontario sur une route située à plus de 15 kilomètres de la base militaire. Pour ce faire, il dirige une équipe de 6 soldats. On met à sa disposition un camion avec chauffeur et tout l’équipement militaire nécessaire. Durant toute l’opération, les actions de l’élève-officier sont examinées par un sergent ou un adjudant qui les évalue méthodiquement. On étudie la façon dont il planifie l’opération et la manière de passer les ordres à ses subalternes. On prépare une appréciation globale de toute l’opération. L’observateur n’interviendra que si la vie des participants est en jeu ou s’il y a des risques de destruction de matériel.
Afin de rendre l’opération plus réaliste, les rebelles peuvent opposer une résistance à leur arrestation ou un membre de l’équipe peut mourir subitement. L’évaluation des membres du corps médical se fait également par évaluation authentique. Au moment où l’interne se trouve au chevet d’un pseudo-patient et lui pose des questions, ce dernier peut mourir sans avertissementRobert L. Linn, David B. Swanson et Geoffrey R. Norman, A Performance-Based Assessment: Lessons From the Health Professions, in Educational Researcher, juin/juillet 1995, p9. Cette mise en scène peut également se réaliser avec un modèle informatique.
Chaque épreuve est suivie d’un briefing avec l’aspirant où toute l’opération sera passée en revue. Cette méthode permet aux autorités militaires de faire en même temps une évaluation formative des connaissances des candidats. En colligeant les rapports, les autorités produisent une évaluation sommative de la performance des individus.
Cette méthode d’évaluation respecte la validité et la fidélité. On peut définir la validité d’un test ou d’un examen comme l’évaluation globale, fondée sur des preuves empiriques et sur un rationnel théorique, de l’adéquation et de la justesse des inférences et des actions issues des scores de test. La fidélité se définit comme la qualité que possède un instrument à mesurer avec la même exactitude chaque fois qu’il est administré. Le ministère de l'Éducation du Québec (MEQ) considère la fidélité comme la qualité d’un instrument de mesure dont les résultats demeurent stables pour les mêmes sujets qui se trouvent dans des conditions identiques lors d’administrations différentesRenald Legendre, Dictionnaire actuel de l’éducation, , Édition 2000, Guérin, Montréal 1993, p609
Dans le cas des cours des aspirants officiers, la validité de l’évaluation est assurée par la corrélation entre les contenus de cours donnés et les compétences évaluées. La fidélité inter-juge est favorisée en préparant un cours que tous les évaluateurs doivent suivre.
Exemple dans l’enseignement général au secondaire Dans le domaine de l’enseignement général au secondaire, Guillermo Solano-Flores et Richard J. Shavelson rapportent quelques exemples d’utilisation de l’évaluation authentique. L’expérience Astronomie diurne consiste à recréer avec un globe terrestre, une lampe de poche et une boîte, les ombres créés par le soleil de l’aube au crépusculeGuilermo Solano-Flores et Richard J. Shavelson, A Development of Performance Assessment in Science: Conceptual, Practical and Logistical Issues, in Educational Measurement: Issues and Practice, automne 1997, p18.
Dans ce cas, l’évaluation d’une seule compétence demande du matériel parfois encombrant. Une de ces expériences permet seulement de vérifier un seul objectif. On doit ainsi laisser de côté d’autres objectifs.
Quelques problèmes associés à l’évaluation authentique
Samuel Messick, de Educational Testing Service, soutient qu’il existe deux standards d’évaluation quand il s’agit d’évaluer les compétences. Le premier type est le standard de contenu qui concerne ce que l’étudiant doit connaître et être capable de faire pour un sujet précis. L’autre type concerne le standard de performance qui indique le degré de compétence qu’un étudiant doit atteindre à un moment donné. Pour lui, la performance doit refléter la complexité du construit et non la complexité de l’épreuve. Ce qu’on veut vérifier c’est la capacité de l’étudiant à transférer en pratique ce qu’il a appris de façon théorique.
Messick voit un conflit entre le temps nécessaire pour passer une évaluation authentique et la nécessité d’évaluer toute la matière apprise. Une épreuve authentique demande beaucoup de temps et évalue peu de choses. Il soutient que ce genre d’épreuve peut avoir des conséquences adverses sur l’étudiant. Celui-ci peut ne pas se sentir à l’aise avec la manipulation d’instruments tout en maîtrisant parfaitement les concepts qu’il doit utiliserSamuel Messick, A Standards of Validity and the Validity of Standards in Performance Assessment, in Educational Measurement: Issues and Practice, hiver 1995, p6.
Solano-Flores soulève quelques problèmes avec l’administration de certains tests. Il souligne que le montage et le démontage de l’équipement peut prendre tellement de temps que l’administration des tests devient presque impossible. L’utilisation de matériel qui sera détruit au cours de l’évaluation authentique devient coûteux. Les institutions peuvent alors utiliser du matériel moins cher mais de qualité inférieure. La mauvaise qualité des matériaux introduit alors des erreurs de mesure et fausse les résultats finals. Il souligne également le problème de la fidélité entre les différents évaluateurs. Pour lui, il est très important de former les évaluateurs afin que d’une façon générale leur évaluation soit standardiséeGuilermo Solano-Flores et Richard J. Shavelson, A Development of Performance Assessment in Science: Conceptual, Practical and Logistical Issues, in Educational Measurement: Issues and Practice, automne 1997, p19.
Pour Bert F. Green, de Johns Hopkins University, si les autorités scolaires veulent pouvoir comparer les résultats de l’évaluation authentique d’une année à l’autre, il faut s’assurer que les résultats de performance puissent être comparables. Des changements dans l’administration des tests créent des difficultés de comparaison. D’autre part, si d’année en année, on utilise les mêmes tests, l’information circule parmi les étudiants. Les étudiants se préparent alors uniquement en fonction d’une épreuve spécifique. On assiste alors à du bachotageBert F.Green, A Comparability of Scores from Performance Assessments, in Educational Measurement: Issues and Practice, hiver 1995, p12.
Chez plusieurs auteurs que nous avons consulté, il semble se dégager une constante. L’évaluation authentique possède de nombreuses qualités mais elle ne peut pas dans tous les cas remplacer l’examen traditionnel, papier crayon. Pour ce qui est de vérifier l’acquisition de connaissance, l’examen traditionnel a fait ses preuves. On peut facilement en déterminer la fiabilité, la validité et la comparabilité.
L’évaluation de la formation professionnelle
Le Guide général d’évaluation pour la formation professionnelle et technique nous indique que ce type de formation au secondaire est axé sur l’évaluation de la compétence acquise. À cet égard, deux aspects importants sont retenus : la maîtrise du métier et la formation fondamentale.
Pour certifier l’atteinte des objectifs, on peut utiliser une ou plusieurs de ces méthodes:
l’évaluation d’un produit, qui donne lieu à une épreuve pratique l’évaluation d’un processus de travail, qui donne lieu également à une épreuve pratique l’évaluation des connaissances pratiques, qui donne lieu à une épreuve théorique.
On privilégie l’évaluation d’un produit plutôt que l’évaluation d’un processus de travail dans tous les cas où l’on peut confirmer par inférence l’acquisition de la compétence considérée.
L’administration d’une épreuve en vue de l’évaluation d’un produit est généralement moins complexe que celle d’une épreuve en vue de l’évaluation d’un processus de travail. De plus, l’évaluation d’un produit permet à l’examinateur d’observer plus de candidats à la fois.
La formation professionnelle du ministère de l’Éducation se fait par programme. Chaque programme contient un certain nombre de modules correspondant chacun à une compétence spécifique. Le processus d’acquisition des connaissances suit un logigramme spécifique à chaque programme. Chaque module fait l’objet d’une évaluation. Celle-ci peut être locale ou faire l’objet d’une épreuve ministérielle. La loi de l’Instruction publique prévoit que le ministre de l’Éducation peut imposer des épreuves pour tous les programmes de la formation professionnelle. Généralement, un module sur cinq sera soumis à une épreuve ministérielle.