Un évaluateur sachant évaluer

Smart est le partenaire qualité des formateurs

Depuis la mi-octobre, l’univers des logiciels accessibles en “open source” s’est enrichi d’un nouveau venu : exAMS (examinations Assessment Management System). Conçu au sein de l’unité de soutien logistique et de recherche Smart (Système méthodologique d’aide à la réalisation de tests) de l’ULg, ce logiciel apporte des solutions innovantes tant pour les évaluateurs que pour les évalués. Basé sur les recherches en docimologie - l’étude scientifique des techniques et des dispositifs d’évaluation des apprentissages et des compétences en pédagogie - du Smart, l’outil et sa mise à disposition sur le réseau marquent une étape importante dans le développement d’un service universitaire unique en son genre.

Supports d’évaluation

Né en 1995 sous le label Cafeim au sein de la faculté de Psychologie et des Sciences de l’éducation, le Smart est désormais un organe interfacultaire, intégré à l’Ifres depuis 2005. Depuis un an, son expertise se trouve valorisée par une spin-off, Assess group SA, qui propose des services dans le domaine de l’évaluation aux nombreux acteurs de l’enseignement et de la formation, privés et institutionnels. Un lien étroit est ainsi maintenu entre la recherche universitaire de pointe dans le domaine de l’ingénierie docimologique ou de l’édumétrie - la science de la mesure en éducation - et les besoins de la société.

Comment évaluer efficacement ? Comment vérifier la qualité d’une formation ? Des questions au cœur de l’activité du Smart, qui s’inscrivent dans la lignée des travaux initiés à l’ULg par feu le Pr Gilbert De Landsheere, grande figure internationale de la pédagogie, et poursuivies depuis, notamment par le Pr  Dieudonné Leclercq et Jean-Luc Gilles, désormais responsable académique de l’unité et président du CA d’Assess group.

L’expertise du Smart se déploie aujourd’hui dans trois domaines : l’évaluation des acquis des étudiants, l’évaluation des enseignements et des formations, et les enquêtes à caractère pédagogique. En soutien à ces missions, le Smart a élaboré sa propre panoplie d’outils informatiques – exAMS ainsi que e-NGELS –, lesquels permettent d’évaluer en ligne la qualité des enseignements. « Ces différents logiciels ont leur spécificité et se complètent parfaitement », souligne Pascal Detroz, directeur du Smart.

En ce qui concerne exAMS, cette plate-forme “open source”, prévue pour être utilisée via l’internet, implique tous les acteurs de la construction d’évaluations standardisées des apprentissages dans une démarche qualité. « L’outil exAMS permet de s’assurer, dans un travail collaboratif en ligne, que toutes les étapes pour aboutir à un questionnaire standardisé de qualité ont été respectées. Par exemple, lors de l’analyse du projet d’évaluation, l’enseignant peut vérifier que ses questions sont bien en adéquation avec les compétences qu’il veut mesurer. La mise en œuvre de ce cycle qualité des évaluations débouche sur des questionnaires standardisés de très haute qualité », souligne Jean-Luc Gilles, chef du projet qui a nécessité quatre années de R&D.

Les services docimologiques qui pourront être offerts en accompagnement de l’utilisation de la plate-forme exAMS viendront s’ajouter à ceux déjà proposés depuis plus d’un an par Assess group. « Notre société peut conseiller et accompagner tous les acteurs qui veulent s’assurer de la qualité de leurs projets de formation. Nous leur proposons le recours aux logiciels développés au Smart, avec lequel nous avons un lien permanent. Cette proximité avec la recherche est un atout majeur pour nous », explique Salvatore Tinnirello, administrateur délégué d’Assess group, une spin-off composée de spécialistes en ingénierie de l’évaluation et qui compte déjà parmi ses clients AXA, le Forem, l’Institut de formation de l’administration fédérale, l’Ecole royale militaire, des Hautes Ecoles, etc. Récemment, de nouveaux clients se sont manifestés au-delà des frontières belges, notamment des administrations françaises dans le cadre de concours de recrutement.

Soutien pour les enseignants

Dans un contexte plus scientifique, le Smart développe aussi des collaborations internationales. « Nous entamons en ce moment les derniers préparatifs d’une enquête en ligne à l’échelle planétaire sur les pratiques docimologiques des enseignants du supérieur, un projet qui est mené en collaboration avec l’université de Montréal », signale encore Jean-Luc Gilles.

Au fil des ans, le Smart est devenu un acteur important de l’enseignement au sein de l’ULg. « Les enseignants confrontés à de grands groupes d’étudiants viennent nous consulter, car ils ressentent le besoin d’un soutien méthodologique et logistique pour l’organisation de leurs évaluations », explique Jean-Luc Gilles. A ce jour, le Smart est associé à 400 épreuves d’examens par an et collabore avec environ 200 professeurs à l’ULg.

 

Didier Moreau

Contacts : tél. 04 366 20 78, courriel smart@ulg.ac.be Sites internet : www.smart.ulg.ac.be, www.smart.ulg.ac.be/exams ou www.assess-group.be