Dans le monde de l’éducation, la démocratisation des technologies d’intelligence artificielle (IA) a ouvert de nouvelles possibilités, mais a également posé de nouveaux défis en matière de sécurité et d’intégrité des examens. La plus connue d’entre elles est ChatGPT, un modèle de langage génératif développé par l’entreprise OpenAI.
Dès le mois de janvier, plusieurs cas de triches à des examens dus à l’IA sont évoqués par la presse. A l’Université de Strasbourg, une enseignante se rend compte de la supercherie au moment de la correction du QCM passé en ligne par les élèves. En effet, le taux de réussite de cet examen sur l’histoire du Japon était habituellement de 45% contre 92% pour l’examen en question. L’enseignante a finalement décidé de faire repasser l’examen en présentiel à tous ses élèves.
Bien que la démocratisation des IA représente une extraordinaire opportunité, il est crucial de mettre en place des mesures adéquates pour prévenir la triche aux examens liée à un usage frauduleux des IA génératives. Dans cet article, nous explorerons les meilleures pratiques pour encadrer l’usage des IA génératives lors des examens en mettant l’accent sur la création de sujets, l’utilisation de détecteurs d’IA et les solutions de sécurisation des examens, telles que celles que nous offrons chez Evaluo, qui permet de prévenir la fraude aux examens.
Mais avant toute chose, faisons un focus sur l’IA générative la plus connue : ChatGPT
- GPT pour Generative Pre-trained Transformer = ChatGPT est un réseau de neurones capable d’apprendre par lui-même et de repérer des tendances au sein d’un désordre apparent. Il est alimenté par 175 milliards de tokens (= de mots). Ce réseau est entrainé par les chercheurs pour apprendre à composer des phrases qui ont du sens à partir de différents éléments. C’est ensuite grâce à des calculs de probabilité que ChatGPT détermine quel élément est statistiquement le plus à même d’aller avec tel autre et de répondre par des phrases complètes.
- ChatGPT peut donc se tromper et ne pas l’admettre spontanément … Cette IA générative est même capable de s’inventer des sources et des citations de toutes pièces. C’est pourquoi il faut être particulièrement vigilant, bien souvent les gens ont tendance à juger de la crédibilité d’une information en fonction de la façon dont elle est présentée.
- Un prompt est une instruction ou une consigne donnée à un modèle d’intelligence artificielle, comme ChatGPT, pour lui indiquer ce qu’il doit générer ou répondre. Il s’agit d’un texte ou d’une phrase qui permet de guider le modèle dans sa production de contenu. Le prompt donne généralement un contexte ou une indication spécifique pour orienter la réponse du modèle. Il peut être utilisé pour poser une question, demander une explication ou fournir des exemples. Plus le prompt sera précis et détaillé, plus l’IA générative sera capable de fournir une réponse de qualité.
Créez des sujets d’examens qui rendent difficile la triche avec ChatGPT
La prévention de la triche aux examens avec les IA génératives doit être pensée dès la création des sujets d’évaluation. Voici quelques bonnes pratiques à mettre en place en amont du déroulement des examens :
Evaluez l’acquisition de compétences plutôt que la restitution de savoirs
Lorsqu’il s’agit de prévenir la triche aux examens via les IA génératives, une approche clé consiste à mettre l’accent sur l’évaluation de l’acquisition de compétences plutôt que sur la simple restitution de savoirs. En concevant des sujets qui mettent à l’épreuve les capacités analytiques, les compétences de résolution de problèmes et la pensée critique des élèves, cela favorise une évaluation authentique et approfondie de leur compréhension et de leurs compétences. Cette approche pousse les élèves à mobiliser leurs connaissances de manière réfléchie et créative, rendant l’utilisation des IA génératives moins pertinente pour tricher.
Privilégiez les oraux et les devoirs sur table aux devoirs maison
Si vous ne disposez pas d’une solution de sécurisation des examens, il est recommandé de favoriser les évaluations orales et les devoirs sur table par rapport aux devoirs à domicile. Opter pour des évaluations en face-à-face, telles que les examens oraux, les entretiens ou les devoirs réalisés en classe, permet aux enseignants d’observer directement les compétences et les connaissances des élèves, limitant ainsi les possibilités de triche avec les IA génératives. Si vous souhaitez organiser des QCM ou des QCU, privilégiez des questions chronométrées pour éviter que les étudiants aient le temps d’aller chercher des réponses via Chat-GPT.
Choisissez des sujets très actuels
Il est important de comprendre la principale différence entre ChatGPT-3 et ChatGPT-4, les deux IA génératives les plus utilisées actuellement. ChatGPT-3 est plus répandu car accessible gratuitement mais sa base de connaissances se limite à 2021. En revanche, ChatGPT-4 dispose de sources de données plus actuelles. Il est potentiellement moins utilisé par les étudiants car son accès complet est payant. Cependant, une version limitée est accessible à tous via le moteur de recherche Bing proposé par Microsoft. Cette version accessible depuis le moteur de recherche permet d’obtenir rapidement des réponses à des questions mais ne permet pas véritablement de rédiger de longues séquences de texte. Pour minimiser les risques de triche, il est tout de même conseillé de privilégier des sujets basés sur des événements postérieurs à 2021, où ChatGPT-3 n’a pas accès aux informations les plus récentes.
Utilisez des solutions de détection d’IA
GPTzero, Smodin, Ai Classifier ou encore Compilatio … De nombreuses solutions sont actuellement développées pour détecter le texte rédigé par des IA génératives. De la même manière que ChatGPT, elles fonctionnent en utilisant des modèles d’intelligence artificielle entraînés spécifiquement pour reconnaître les textes générés par une IA. Ces modèles analysent les caractéristiques du texte, tels que le style d’écriture, la cohérence, la grammaire et la pertinence du contenu. Ils comparent ensuite ces caractéristiques avec celles des textes réels écrits par des humains.
Si le texte généré par l’IA présente des divergences ou des signes de non-authenticité, la solution de détection peut alerter sur la possible utilisation d’une IA générative. Dans la plupart des cas, le détecteur d’IA proposera un pourcentage estimé de texte généré par l’IA par rapport au total du texte. Les solutions de détection utilisent souvent des techniques de machine learning et d’apprentissage supervisé pour améliorer leur capacité à distinguer les textes générés par des IA des textes écrits par des humains.
Cependant, il est important de noter que les détecteurs d’IA sont loin d’être infaillibles et peuvent parfois générer des faux positifs ou ne pas détecter certaines formes de triche. Ils sont donc un outil supplémentaire dans la lutte contre la fraude aux examens, mais doivent être utilisés en conjonction avec d’autres méthodes de surveillance et d’évaluation.
> A venir : découvrez notre comparateur des outils de détection de l’IA !
Utilisez une solution de sécurisation des examens
Comme nous l’avons vu précédemment, il est aujourd’hui assez compliqué de déterminer a posteriori et avec certitude si ChatGPT a été utilisé pour tricher à un examen. A l’heure actuelle, le meilleur moyen de prévenir ces risques de triches est de passer par des solutions de sécurisation des examens.
Chez Evaluo, nous proposons plusieurs options permettant d’empêcher la triche avec ChatGPT pour vos examens en présentiel et en distanciel :
- Un sytstème anti-triche : les élèves passent leur épreuve sur l’interface Evaluo et ne peuvent pas sortir de cette interface. Il ne leur est pas possible d’utiliser un deuxième écran, de faire un copier/coller, de quitter le mode plein écran. Si l’élève tente d’effectuer une manipulation interdite, une alerte est automatiquement créée.
- Du proctoring : Autrement dit de la surveillance vidéo ! Notre système enregistre alors tout ce qu’il se passe sur l’écran de l’élève ainsi que l’élève lui-même via sa webcam. Cette technique permet d’être certain que l’élève n’utilise pas ChatGPT pour tricher lors de son examen. Si vous souhaitez en savoir plus, nous vous conseillons la lecture de cet article : La surveillance d’examen à l’ère du distanciel
- Des prestations de surveillance : lors d’examens sous surveillance vidéo, nous pouvons également vous proposer de faire appel à notre équipe équipe de surveillants Evaluo afin d’empêcher les étudiants de tricher à l’aide de ChatGPT. Cela vous permet d’externaliser une bonne partie de la logistique de vos examens tout en bénéficiant de l’expertise de nos surveillants qualifiés et formés à l’usage de notre solution.
Nous avons vu qu’il est essentiel de faire preuve de vigilance concernant l’usage des IA génératives lors des examens. Actuellement, de bonnes pratiques permettent de limiter ce risque de triche avec ChatGPT, notamment en portant une attention toute particulière lors de la création des sujets d’examen. En effet, l‘évaluation de l’acquisition de compétences plutôt que la simple restitution de savoirs, l’utilisation d’évaluations orales ou sur table plutôt que des devoirs à domicile, et la sélection de sujets actuels sont des recommandations pour rendre la triche avec ChatGPT plus difficile.
Les solutions de détection d’IA peuvent également être utilisées pour repérer les textes générés par les IA, mais puisqu’elles sont aujourd’hui peu fiables, elles doivent être combinées à d’autres méthodes de surveillance et d’évaluation.
Actuellement, la meilleure manière d’encadrer l’usage des IA génératives lors des examens est l’utilisation de solutions de sécurisation des examens, telles que celles offertes par Evaluo. Ces options de sécurisation permettent en effet de prévenir efficacement la triche avec ChatGPT, tout en garantissant un environnement d’examen sécurisé.
Alors prêt pour faire face à ce nouveau défi ?
Et si vous voulez en savoir plus, visionnez le replay de notre webinaire sur le sujet de la triche aux examens via ChatGPT :
