Évaluation chiffrée et suivi : comment les LMS utilisent nos résultats ?

Les données recueillies par les SCO participent à la conception pédagogique d'un dispositif e-learning

Les LMS sont dotés aujourd’hui d’un tracking et d’un scoring des plus efficaces qui permettent d’assurer un suivi, une relance, un tutorat et des courbes de progression visant à s’assurer de l’engagement des apprenants sur toute la durée de la formation.

Le suivi (tracking), au cœur du dispositif pédagogique

Initialement, le suivi (tracking) visait à récupérer des données relatives à l’avancement des apprenants et à les croiser, le tout aboutissant à établir des statistiques en termes de progression dans le parcours de formation. Ces tableaux de bord étaient ensuite communiqués régulièrement aux élèves pour leur signifier que le suivi était au centre de cette nouvelle forme d’apprentissage.

Mais l’évolution et la réflexion pédagogique dans le domaine du e-learning permet désormais de dépasser la simple production de données statistiques et de proposer des actions correctrices et un soutien en ligne. Ainsi, le temps passé sur une vidéo ou un exercice, le nombre et les dates de connexions, les scores obtenus aux évaluations en ligne, le parcours choisi, les modules réalisés, ceux effectués en partie, ceux délaissés sont autant de pistes pour comprendre les obstacles rencontrés et offrir un accompagnement adapté.

Car la suite donnée à ce «suivi» est la mise en œuvre d’un ensemble d’actions visant à appuyer la progression des apprenants comme le tutorat, des classes virtuelles ou des activités complémentaires décomposant la difficulté et facilitant les apprentissages. Comme nous le rappelle Jérome Bruet, directeur de e-docéo, « en formation à distance, le tracking s’inscrit dans une réelle logique pédagogique ».

L’utilité du tracking ne se limite pas à l’apprenant. Il permet aussi de donner des informations précieuses aux pédagogues qui pourront ainsi faire évoluer leurs formations. Un temps de réalisation d’un QCM trop long peut amener à s’interroger sur la formulation de la consigne et sur sa cohérence par rapport aux ressources proposées en amont. De la même manière, un module réalisé partiellement est un indicateur intéressant : est-il trop complexe, pas assez varié, trop académique, non interactif, les SCO (Sharable content object) sont-ils inadaptés ? Comment peut-on le faire évoluer ? Reconsidérer sa position dans le séquençage, analyser le grain pédagogique en lui-même, changer d’approche didactique,… ? Toutes ces questions sont inévitables et permettent de garantir les corrections et la réussite d’une formation à distance.

L'évaluation «scoring», l’indispensable indicateur de performance

Les résultats (scores) obtenus par l’apprenant sont des éléments indissociables du suivi (tracking) puisque ces évaluations chiffrées participent à la validation des apprentissages et à la certification. Ces résultats chiffrés sont nombreux dans les formations à distance (et dans les MOOCs). Le niveau atteint par l’apprenant est dépendant des tests, quiz ou des devoirs évalués par un formateur ou par les pairs.

La progression est donc intrinsèquement liée à des données chiffrées. Certes, ces chiffres sont le pendant des critères d’évaluation définis en amont mais ils restent impropres à refléter l’engagement réel des apprenants. Ainsi, un quiz permet souvent la compréhension de notions exposées et un taux de réussite de 100% devrait donc être un indicateur d’un haut degré de maîtrise de l’élève. Or comme tout indicateur, il est imparfait et doit être couplé à d’autres modes d’évaluation. Car obtenir un score 100% peut-être interprété de différentes façons : s’agit-il d’une réelle compréhension ou d’un clic chanceux sur une des solutions proposées ? Que faire alors ce quiz s’accompagne d’un devoir dont le score n’est que de 30 % ?

Se limiter à un lissage des résultats ou passer par une évaluation complémentaire ? Ceci n’est pas si simple et si certification il y a, autant s’assurer que les acquis sont bien là ! Le concepteur devra alors intégrer dans sa scénarisation la remontée des données chiffrées comme autant de rouages permettant de valider ou non un module.

Suivi et évaluation, comment en assurer le succès sur un LMS ?

Le suivi est à relier à ce que j’ai évoqué plus haut c’est-à-dire le SCO (Sharable Content Object). En effet, si l’on prend l’exemple d’un quiz réalisé grâce à une solution gratuite ou payante de « quizmaker », il est indispensable que celui-ci puisse être intégré au LMS, bref qu’il soit compatible. Attention, aujourd'hui il ne s’agit plus seulement de permettre la compatibilité d’un SCO à une plateforme mais de s’assurer de son interopérabilité, ce qui lui permettra d’être porté par de nombreuses plateformes disponibles sur le marché. Pour assurer cette interopérabilité, les SCO ont été normés. On parle alors de SCORM.

Ces SCORM sont alors la garantie d’intégrer le suivi - tracking des apprenants sur les plateformes mais aussi sur des applications de type m-learning (mobile learning). D’autres normes existent comme AICC et xAPI (plus communément appelée Tin Can API, du nom de la marque qui a contribué à sa large diffusion commerciale).

Le suivi et l'évaluation chiffrée sont aujourd'hui largement déployés sur les LMS. Reste que l'analyse des données et des statistiques reste sous-exploitée bien qu'elle soit un des facteurs explicatifs de la réussite d'une formation.

Illustration : Kisialiou Yury, Shutterstock.com

Références

Lestonat, Elodie. "La Bataille Tin Can API Versus SCORM." Thot Cursus. Date de publication 20 janvier 2015. http://cursus.edu/article/24819/bataille-tin-can-api-versus-scorm/#.VNipmC73QTY.

Lestonat, Elodie. "LMS Et LCMS : Les Tendances 2015." Thot Cursus. Date de publication 27 janvier 2015. http://cursus.edu/dossiers-articles/articles/24857/lms-lcms-les-tendances-2015/#.VNiqZi73QTY.

Lestonat, Elodie. "Organiser Des Classes Virtuelles Dans Les Formations E-Learning." Thot Cursus. Date de publication 3 février 2015. http://cursus.edu/dossiers-articles/articles/24902/organiser-des-classes-virtuelles-dans-les/#.VNiq9i73QTY.

Ortaer, İpek. "Outils De Suivi — EduTech Wiki." EduTech Wiki. Date de publication 2013. http://edutechwiki.unige.ch/fr/Outils_de_suivi.

Taylor, Mike. "3 Things to Know About Scoring E-Learning Quizzes." E-Learning Heroes. Date de publication 2014. https://community.articulate.com/articles/3-things-to-know-about-scoring-e-learning-quizzes.

Bruet, Jérome. "Pas De Tracking, Pas De E-learning ! ‹ E-doceo Blog." E-learning E-doceo. Date de publication 24 octobre 2012. http://www.e-doceo.net/blog/pas-de-tracking-pas-de-e-learning/.