Utiliser une IA générative en BTS pour répondre à une question sur corpus

Lycée Raoul Follereau

Belfort

   

Contexte, durée et classe :

1 séance de deux heures portant sur la 1ère partie de l’épreuve écrite de français au BTS, les questions sur documents.

production finale évaluée

   

Objectifs :

L’objectif est qu’il se rende compte de l’importance de la précision de leur prompt et surtout de la qualité de la réponse que leur fait l’IA par rapport aux attendus de l’examen. Plus leur regard critique sera pertinent plus leur activité sera réussie.

   

Conditions matérielles :

Tous les étudiants ont recours à Mistral, IA générative RGPD.

Ils déposent leur document word ou open office qui sera évalué dans le dossier partagé de l’espace des classes d’Eclat que j’ai préparé à l’avance.

   

Mise en œuvre :

1) En îlots, lors de la première heure, ils ont comme consigne de trouver une question (sur 1 document, 2 documents ou 3 documents) avec des éléments de réponse repérés dans les documents.

2) La deuxième heure, je leur donne les consignes suivantes IA_Feuille de route_corpus_paix_ST1GTLA accompagnées d’un modèle de réponse type rédigé collectivement avec une autre classe :

Consigne, choisissez une question et rédigez sa réponse en vous servant de l’IA de façon convaincante, c’est-à-dire en mêlant références aux documents et explications.

Objectif, comment je me sers de l’IA pour comprendre le fonctionnement de la réponse à la question choisie.

Suivez les consignes suivantes.

1. Je travaille avec l’IA française Mistral IA car elle est RGPD. Je précise la question que j’ai choisie et sur quels documents elle porte.

2. Je réfléchis à mon prompt pour optimiser mes chances d’avoir une bonne réponse. J’en fais le brouillon sur mon document word.

3. Je copie-colle mon prompt sur le document word, que je vais rendre sur l’espace des classes partagé d’Eclat, et la réponse donnée par l’IA.

4. Je commente cette réponse (je peux réutiliser les couleurs de la méthode) en précisant de manière rédigée ce qui va et ce qui ne va pas.

5. Je propose mes corrections.

Les étudiants ont une heure pour réaliser cette activité évaluée : je circule entre eux pour éventuellement les guider, les prévenir de ce qui ne va pas. Les documents terminés sont déposés sur le dossier partagé de l’espace des classes d’Éclat.

   

Résultats :

Certains sont passés à côté de l’exercice parce qu’ils n’ont pas compris au départ la finalité des questions. Dans la copie 1, l’étudiant confond prompt et réponse de l’IA. Copie 1

Certains maîtrisent déjà très bien les aller-venues sur les prompts. Copie 2

Certains font preuve d’un très bon regard critique. Copie 3

Nous dressons le bilan suivant :

Compte rendu de l’activité avec l’IA – version étudiants

1. Je comprends l’importance de la rédaction d’un prompt* quand je travaille avec l’IA.*prompt, ce que je demande à l’IA

2. Quand une question porte sur deux documents, ou trois, la réponse doit faire preuve d’une confrontation entre les documents. La réponse doit partir d’éléments convergents dans les documents (idées directrices qui constitueront des paragraphes). Par conséquent, les citations dans un même paragraphe proviendront forcément de documents différents. Je ne traite pas les documents les uns après les autres, dans une même réponse.

3. La réponse est complète si les citations et les références sont analysées = explication + déduction.

A l’issue de cette activité, les étudiants se sont rendu compte qu’aucune des réponses donnée par l’IA ne correspondait aux attendus de l’examen. A l’issue de cette activité, pratiquement tous les étudiants ont arrêté de se servir de l’IA pour tricher.