E-learning conformité : complétion contre compétence réelle

L'efficacité d'un e-learning de conformité ne se lit pas dans son taux de complétion. Un taux très élevé indique que presque tout le monde est arrivé au dernier écran. Il ne dit pas que les salariés sauraient quoi faire face à une vraie situation. La complétion mesure un parcours, la compétence mesure un comportement.

Cet article explique pourquoi les deux se confondent si souvent. Il résume ce que la recherche sur la mémoire permet de dire, puis propose de mesurer autre chose que le clic. Il s'inscrit dans notre guide des formations obligatoires de conformité.

Pourquoi le taux de complétion séduit autant

La complétion est facile à obtenir. Le LMS la fournit sans effort, elle se met dans un tableau de bord et elle se compare d'une année à l'autre. Pour un responsable conformité qui doit rendre compte à sa direction ou à un contrôleur, c'est un chiffre rassurant.

Le problème vient de ce qu'on lui fait dire. Ce chiffre prouve que la formation a été diffusée et suivie. Il ne dit rien de ce que les salariés en ont retenu. Il dit encore moins ce qu'ils feront un mardi matin, au téléphone, avec un client qui s'agace.

Les recommandations de l'Agence française anticorruption (AFA) de 2021 vont d'ailleurs plus loin que la présence. Elles demandent des outils pour vérifier la bonne compréhension des formations, par exemple un test en fin de session ou après un délai. Elles proposent aussi de suivre le taux de couverture du public cible et les heures consacrées.

Ce que l'on sait de l'oubli

Une expérience de 2015, publiée dans PLoS ONE par Murre et Dros, a reproduit la courbe d'oubli décrite par Ebbinghaus en 1880. Ses résultats sont proches des données d'origine : on oublie vite après l'apprentissage, puis plus lentement. Cette expérience porte sur des listes de syllabes, pas sur des règles de conformité, mais elle rappelle le principe.

Une formation vue une fois, sans reprise, laisse donc peu de traces au bout de quelques semaines. Les salariés ne sont pas négligents. Ils font ce que fait toute mémoire humaine quand une information n'est pas réutilisée.

Les travaux de Roediger et Karpicke, publiés dans Psychological Science en 2006, vont dans le même sens. Les étudiants qui se sont testés sur un texte l'ont mieux retenu, à deux jours et à une semaine, que ceux qui l'avaient relu. Se tester, c'est-à-dire aller chercher l'information soi-même, renforce la mémoire plus que la simple relecture.

Savoir n'est pas savoir faire

Même un salarié qui se souvient de la règle peut ne pas l'appliquer. Entre la règle et le geste, il y a une conversation. Prenons un conseiller qui doit poser une question de vigilance à un client pressé, ou un manager qui doit couper court à une remarque déplacée. Tous deux savent. Peu l'ont déjà fait.

Trois obstacles reviennent :

• la pression sociale, qui rend la règle plus difficile à tenir face à un humain que sur un écran ;
• le manque de mots : sans phrase prête, on improvise, ou on se tait ;
• l'absence de retour : personne ne dit au salarié si sa réponse était bonne.

Un e-learning, même bien conçu, traite mal ces trois points. Il peut contenir un quiz, mais un quiz vérifie une reconnaissance, pas une production orale. Pour une analyse comparable côté cybersécurité, voir notre article sur les limites de l'e-learning pour les réflexes de sécurité.

Que mesurer à la place de la complétion ?

Un bon tableau de bord de conformité garde la complétion, car elle reste utile pour la preuve de diffusion. Il y ajoute des mesures de compétence. Voici celles qui sont les plus accessibles.

1. Le score à un test différé. Reposer trois ou quatre questions un mois plus tard montre ce qui reste.
2. Les décisions en scénario. Face à un cas, l'apprenant choisit-il la bonne conduite, et la justifie-t-il ?
3. La qualité de la conversation. A-t-il posé la bonne question, refusé clairement, évité de promettre ce qu'il ne peut pas tenir ?
4. Les signaux de terrain. Saisines du référent, signalements, questions remontées, erreurs détectées en contrôle.
5. La progression d'une tentative à l'autre. Si l'apprenant s'améliore en rejouant, la formation produit un effet.

Notre article sur la mesure de l'efficacité d'une sensibilisation à la cybersécurité reprend cette logique côté cyber.

Ce qu'apporte une mise en situation orale

La mise en situation fait produire une réponse. L'apprenant doit parler, choisir ses mots, tenir sa position, et il le fait devant un interlocuteur qui réagit. C'est la forme d'effort de rappel que décrit la recherche sur le test, appliquée à un geste professionnel.

Elle produit aussi une trace plus riche. Au lieu d'un score, on dispose de ce que la personne a dit et de ce qu'elle a évité. On voit aussi ses progrès d'une session à l'autre. Un formateur peut relire ces éléments et décider où concentrer son accompagnement.

Trois niveaux de preuve à distinguer

Pour piloter honnêtement un programme de conformité, il est utile de séparer trois niveaux, que le tableau de bord mélange souvent.

Le niveau de la diffusion

Qui a reçu la formation, quand, pendant combien de temps ? C'est la complétion et la présence. Ce niveau répond à la question « avons-nous fait ce qui était prévu ? ».

Le niveau de la compréhension

Les participants ont-ils retenu l'essentiel ? Un test en fin de parcours, puis un test différé, répond à cette question. Il reste dans le registre du savoir, ce qui est déjà plus informatif que la présence.

Le niveau du comportement

Les participants font-ils la bonne chose quand la situation se présente ? Seules la mise en situation et l'observation de terrain y répondent. C'est le niveau le plus difficile à atteindre, et le plus précieux pour réduire un risque réel.

Un programme sérieux rend compte des trois niveaux, sans en cacher un. Il admet que le troisième est le moins bien couvert, et il planifie comment l'améliorer.

Comment passer d'un module à une pratique

Il n'est pas nécessaire de tout refaire. Un chemin progressif suffit.

1. Garder le module existant pour l'information commune.
2. Choisir les deux ou trois situations où l'écart entre savoir et faire coûte le plus cher.
3. Ajouter une courte mise en situation par situation, jouée quelques semaines après le module.
4. Comparer la première et la seconde tentative, puis le résultat d'un trimestre à l'autre.
5. Ajuster le module à partir de ce que la pratique révèle de mal compris.

Cette boucle donne un second bénéfice : la pratique éclaire les points faibles du contenu. Si tous les apprenants butent sur la même question, le problème vient souvent du module, pas des apprenants.

Utiliser le jeu de rôle comme mesure de compétence

Un jeu de rôle ne remplace pas le module d'information : il vient après lui, pour vérifier ce qui tient. Avec Face Up, le formateur crée un scénario à partir de ses cas réels (un client qui s'agace d'une question de vigilance, par exemple). L'apprenant parle à un persona joué par une IA, puis lit son débriefing : objectifs atteints ou non, points forts, points à améliorer, citations, plan d'action. Il peut rejouer.

Face Up s'intègre aux LMS par LTI 1.3. Le module en ligne reste donc dans votre plateforme, et la pratique vient s'y ajouter. Pour le principe, voir notre page sur les jeux de rôle.

Un dernier conseil de méthode : annoncez dès le départ aux salariés que la mise en situation sert à apprendre, pas à noter. Si l'exercice est vécu comme un examen, les participants jouent la prudence et cachent leurs hésitations. S'il est vécu comme un entraînement, ils essaient, ratent, rejouent et progressent.

Les erreurs fréquentes quand on pilote la conformité

• Prendre la complétion pour le résultat. Elle prouve la diffusion, rien de plus.
• Rendre le quiz final trop facile. Un quiz que tout le monde réussit n'apprend rien au pilote du dispositif.
• Ne mesurer qu'à chaud. La satisfaction du jour même ne dit rien de l'effet à un mois.
• Multiplier les indicateurs. Trois mesures bien choisies valent mieux que quinze.
• Cacher les mauvais résultats. Une équipe qui échoue en mise en situation est une information utile, pas un échec à masquer.

Questions fréquentes

Faut-il abandonner l'e-learning de conformité ?

Non. Il convient bien pour diffuser une information commune à tous et pour garder une trace. Il devient insuffisant quand on attend un comportement. L'idéal est de le garder pour le savoir et d'ajouter de la pratique pour le geste.

Que répondre à un auditeur qui demande des preuves d'efficacité ?

Montrez la complétion, mais aussi des résultats de tests différés, des évaluations en scénario et des indicateurs de terrain. Notre article sur la preuve de formation en audit détaille les pièces à conserver.

Comment éviter que les salariés cliquent sans lire ?

En changeant ce qu'on leur demande : produire une réponse plutôt que valider un écran. Le sujet de la lassitude est traité dans notre article sur la lassitude des formations annuelles.

Pour voir comment une mise en situation peut compléter vos modules et mesurer autre chose que le clic, réservez une démonstration.