L'IA en matière de conception des examens: un gain d'efficacité responsable

Voilà longtemps que l'IA générative est bien plus qu'une simple tendance passagère. Utilisée à bon escient, elle permet d’améliorer l’efficacité des processus et d’alléger le travail des professionnels. L'AFA entend exploiter sciemment ce potentiel en vertu d’un principe clair: l'IA vient en soutien. La responsabilité demeure du ressort des humains.

 

De la nécessité de nouvelles approches

Les exigences en matière de formation initiale et de formation continue dans le secteur de l’assurance ne cessent d'augmenter. Aujourd'hui, les examens doivent porter sur des compétences bien spécifiques, refléter la pratique sur le terrain et être solidement étayés aux niveaux méthodologique et didactique. À cela s’ajoute le fait que le système de milice sollicité pour l'élaboration des examens se heurte de plus en plus à des limites en termes de temps et de ressources.

Pour des examens qualitatifs sur la durée, l’AFA confie sciemment à l’IA générative les tâches routinières chronophages, sans pour autant renoncer aux principes éprouvés ni aux normes de qualité.

Tâches confiées à l’IA générative par l’AFA

L'AFA recourt à l’IA générative en particulier pour la création de sujets d’examen par domaines de compétences, notamment:

  • développement de mini cases (analyses d’erreurs) et de use cases (cas de figure),

  • élaboration de critical incidents (situations déterminantes pour le succès),

  • préparation d'entretiens techniques, y compris les lignes directrices à l’intention des experts,

  • première correction des questions ouvertes,

  • analyse des mémoires de diplôme,

  • automatisation partielle des corrections portant sur les questions ouvertes.

L'IA est notamment utilisée dans les cursus de formation et les domaines d'activité suivants:

  • Employé-e de commerce CFC Assurance privée – procédure de qualification (travail pratique)

  • Intermédiaire d’assurance AFA – rédaction de sujets d’examens

  • Spécialiste en assurance avec brevet fédéral – examens de modules et travaux préparatoires de correction

Il s’agit ainsi d’améliorer l’efficacité des tâches répétitives et de soumettre aux experts des questions d’examen déjà préparées et de qualité.

L'être humain reste aux commandes

La position de l'AFA est claire: les professionnels du secteur continuent d’assumer la responsabilité du contenu des sujets d’examens.

Concrètement, cela signifie que les sujets d'examen sont d'abord préparés par l'AFA à l'aide de l'IA générative. Ils sont ensuite soumis aux professionnels correspondants pour l'assurance qualité, la vérification des aspects techniques et leur validation.

Cette procédure (human-in-the-loop) garantit que les sujets d’examen:

  • sont justes du point de vue technique,

  • continuent de refléter correctement la pratique sur le terrain,

  • sont conformes aux normes de qualité;

  • et que les responsabilités sont clairement définies.

Avec l'IA, la procédure change, mais pas les responsabilités.

Du projet pilote à l'amélioration de la qualité

Le cheminement vers la solution actuelle n’a pas été sans mal. Au début, les questions et les cas d'examen générés par l'IA n’étaient pas satisfaisants. Seulement la moitié d’entre eux présentait un contenu techniquement exact, exhaustif et fiable.

Des boucles itératives ad hoc, l’optimisation des assistants IA et l’étroite concertation avec les experts ont permis d’en améliorer la qualité à plus de 75 pour cent.

Dès le départ, la préoccupation première résidait dans le fait de soulager le système de milice. Les experts sont désormais censés recevoir des questions et des sujets d'examen dont la plupart – au moins 75 pour cent – répondent aux exigences élevées en matière de qualité et de reflet de la pratique.

La charge de travail individuelle des spécialistes n'en a pas été réduite pour autant. Cependant, avec la même implication, ils sont désormais en mesure de produire un nombre beaucoup plus important de questions d'examen de haute qualité – un volume difficilement réalisable sans l'aide de l'IA.

«L’IA apporte un gain d’efficacité, mais ne remplace pas l'expertise. Notre objectif est de soulager les experts au moyen d’outils intelligents, et non de les remplacer.»

Christoph Bosshard, responsable du département Learning Solutions et IT, AFA

 

Un partenariat solide avec ICT Formation professionnelle

Tout cela n’aurait pas pu être réalisé sans la collaboration étroite avec ICT-Formation professionnelle. Pour le développement des différents assistants IA et l’utilisation ciblée de l’IA générative, l’AFA s’est appuyée sur l’expérience d’ICT-Formation professionnelle. Cette dernière utilise activement depuis un certain temps déjà l’IA générative dans le développement d’examens pour le brevet fédéral et l’examen professionnel supérieur.

L'échange technique entre ces deux associations de formation professionnelle joue un rôle essentiel en matière de développement continu des assistants IA et d’amélioration croissante de la qualité des examens axés sur les compétences opérationnelles.

De l'innovation avec mesure

L'AFA ne considère pas l'IA générative comme un substitut, mais comme un complément. L'IA libère des tâches répétitives et dégage du temps pour d’autres choses, permet un développement à grande échelle et soutient l'assurance qualité, avec des responsabilités clairement définies.

L’AFA allie ainsi l'innovation à un professionnalisme éprouvé et renforce l'orientation pratique et la viabilité future de la formation professionnelle dans le secteur de l’assurance.