{"id":21248,"date":"2024-11-11T14:43:47","date_gmt":"2024-11-11T13:43:47","guid":{"rendered":"https:\/\/www.unifr.ch\/alma-georges?p=21248"},"modified":"2024-11-20T17:24:16","modified_gmt":"2024-11-20T16:24:16","slug":"universite-chatgpt-chamboule-les-methodes-devaluation","status":"publish","type":"post","link":"https:\/\/www.unifr.ch\/alma-georges\/articles\/2024\/universite-chatgpt-chamboule-les-methodes-devaluation","title":{"rendered":"Universit\u00e9: ChatGPT chamboule les m\u00e9thodes d\u2019\u00e9valuation"},"content":{"rendered":"

Comment juger de la qualit\u00e9, et surtout de l\u2019authenticit\u00e9, de travaux \u00e9crits r\u00e9dig\u00e9s tout ou partie avec l\u2019aide de l\u2019intelligence artificielle? C\u2019est la grande question que se pose le corps enseignant, confront\u00e9 \u00e0 l\u2019irruption massive des intelligences g\u00e9n\u00e9ratives textuelles dans le monde acad\u00e9mique. Prise de temp\u00e9rature aupr\u00e8s de trois professeur\u00b7e\u00b7s issu\u00b7e\u00b7s de trois facult\u00e9s diff\u00e9rentes.
<\/div><\/strong><\/h4>\n

\u00abIl est \u00e9vident que nombre de mes \u00e9tudiant\u00b7e\u00b7s recourent \u00e0 ChatGPT ou \u00e0 d\u2019autres formes d\u2019intelligence artificielle (IA) pour les travaux de s\u00e9minaires\u00bb. Tel est le constat p\u00e9remptoire d\u2019Elisabeth Dutton, professeure d\u2019anglais m\u00e9di\u00e9vale \u00e0 l\u2019Universit\u00e9 de Fribourg. Plusieurs indices l\u2019ont mise sur la piste, tout d\u2019abord la disparition de certaines fautes de grammaire qu\u2019elle avait l\u2019habitude de d\u00e9celer dans les textes; ensuite, une certaine sophistication des modes d\u2019expression.<\/p>\n

Il y a toutefois une contrepartie \u00e0 ces textes en apparence mieux r\u00e9dig\u00e9s: trop souvent, ils prennent des airs de patchworks\u2026 cousus de fil blanc. \u00abJ\u2019ai remarqu\u00e9 que les \u00e9tudiant\u00b7e\u00b7s cr\u00e9ent des assemblages \u00e0 partir de textes fournis par les intelligences g\u00e9n\u00e9ratives. Le tout manque de liant et les transitions s\u2019av\u00e8rent parfois d\u00e9nu\u00e9es de sens.\u00bb<\/p>\n

Pascal Pichonnaz, professeur de droit priv\u00e9 et de droit romain, dresse le m\u00eame constat: \u00abNous avons tr\u00e8s vite d\u00e9cel\u00e9 l\u2019usage d\u2019IA dans les lettres de motivation pour les d\u00e9parts Erasmus, leur qualit\u00e9 s\u2019\u00e9tant sensiblement am\u00e9lior\u00e9e. Nous contrebalan\u00e7ons cela par un entretien oral, ce qui r\u00e9fr\u00e8ne sans doute les vell\u00e9it\u00e9s d\u2019en abuser.\u00bb<\/p>\n

Quant \u00e0 la physique, l\u00e0 o\u00f9 les formules prennent le pas sur le texte, elle ne semble pas non plus \u00e9chapper au ph\u00e9nom\u00e8ne. \u00abJ\u2019ai remarqu\u00e9 que les chapitres d\u2019introduction sont de plus en plus format\u00e9s, standardis\u00e9s, ce qui trahit l\u2019usage d\u2019une IA\u00bb, explique Baptiste Hildebrand, lecteur au D\u00e9partement de physique, avant d\u2019ajouter ne pas \u00abforc\u00e9ment trouver cela probl\u00e9matique puisque l\u00e0 n\u2019est pas l\u2019essentiel.\u00bb<\/p>\n

L\u2019IA \u00e9cartel\u00e9e entre Shakespeare et la relativit\u00e9 restreinte
\n<\/strong>Cela dit, l\u2019intelligence artificielle reste encore relativement d\u00e9munie face aux exigences de ces trois disciplines. \u00abM\u00eame pour un exercice de physique de base de premi\u00e8re ann\u00e9e, ChatGPT ne donne pas toujours la bonne solution, s\u2019amuse Baptiste Hildebrand. Et dans notre discipline o\u00f9 il y a des paradoxes \u00e9tonnants, l\u2019IA s\u2019av\u00e8re peu fiable.\u00bb<\/p>\n

Ces outils modernes, bas\u00e9s sur le traitement de vaste quantit\u00e9 de donn\u00e9es, se retrouvent m\u00eame totalement superflus face aux textes \u00e9crits en anglais m\u00e9di\u00e9val. \u00abMes \u00e9tudiant\u00b7e\u00b7s doivent commenter certaines phrases d\u2019un point de vue philologique ou \u00e9tymologique, explique Elisabeth Dutton. Pour une telle demande, ChatGPT ne leur est d\u2019aucune aide, du moins pour le moment.\u00bb<\/p>\n

\"\"<\/a>

Pascal Pichonnaz, Professeur de droit priv\u00e9 et de droit romain<\/p><\/div>\n

Les \u00e9tudiant\u00b7e\u00b7s en droit, de leur c\u00f4t\u00e9, doivent rendre au moins un travail d\u2019une trentaine de pages chaque ann\u00e9e. \u00abPar leur nature m\u00eame, ces travaux \u00e9crits\u00a0 exigent la citation de nombreuses sources et requi\u00e8rent imp\u00e9rativement d\u2019avoir les bonnes r\u00e9f\u00e9rences, ce qui rend difficile le recours \u00e0 l\u2019intelligence g\u00e9n\u00e9ratives\u00bb, constate Pascal Pichonnaz.<\/p>\n

Un outil formidable malgr\u00e9 tout
\n<\/strong>Celui qui pr\u00e9side \u00e9galement l\u2019Institut de droit europ\u00e9en voit toutefois un avantage \u00e0 ces nouveaux outils qu\u2019il consid\u00e8re comme \u00abun sparring-partner<\/em> permettant d\u2019avoir des id\u00e9es, de g\u00e9n\u00e9rer une structure ou d\u2019am\u00e9liorer la qualit\u00e9 de la langue\u00bb.<\/p>\n

Peut-\u00eatre le plus optimiste de nos trois professeur\u00b7e\u00b7s, Baptiste Hildebrand estime qu\u2019une publication en physique consiste en r\u00e9sultats de recherches, en analyse de donn\u00e9es, obtenues apr\u00e8s des mois de travail en laboratoire ou de mani\u00e8re th\u00e9orique. \u00abL\u2019IA, elle, va permettre de gagner du temps pour la r\u00e9daction du texte, qui n\u2019est pas l\u2019aspect le plus important comme je l\u2019ai d\u00e9j\u00e0 mentionn\u00e9.\u00bb Et de conclure: \u00abCela prenait plus de temps, mais il existait d\u00e9j\u00e0 des moyens d\u2019am\u00e9liorer son texte par des moyens externes\u00bb.<\/p>\n

Interdiction peu r\u00e9aliste
\n<\/strong>Dans les disciplines o\u00f9 le texte joue un r\u00f4le plus pr\u00e9pond\u00e9rant qu\u2019en physique, faut-il d\u00e8s lors revoir la pond\u00e9ration des examens et, ainsi que l\u2019a sugg\u00e9r\u00e9 un enseignant sous couvert d\u2019anonymat, songer \u00e0 donner plus de poids aux \u00e9preuves orales par rapport aux \u00e9crits? Nos trois professeur\u00b7e\u00b7s n\u2019y songent pas encore, dans leur discipline respective les examens \u00e9crits se d\u00e9roulant encore de mani\u00e8re \u00abanalogique\u00bb, hors connexion internet et de mani\u00e8re manuscrite.<\/p>\n

Il en va en revanche autrement en ce qui concerne les travaux de s\u00e9minaire, dont certains peuvent \u00eatre r\u00e9dig\u00e9s \u00e0 la maison, hors de tout contr\u00f4le. Dans ce cas, Pascal Pichonnaz exige de ses \u00e9tudiant\u00b7e\u00b7s qu\u2019elles et ils d\u00e9clarent tout recours \u00e0 une IA et d\u00e9crivent \u00e0 quelles fins. \u00abEst-ce pour am\u00e9liorer le texte, pour une traduction, pour rechercher des id\u00e9es? L\u2019aspect central: c\u2019est la transparence! Si on utilise l\u2019IA, on doit le dire et pr\u00e9ciser de quelle fa\u00e7on on y a eu recours. C\u2019est d\u2019ailleurs conforme \u00e0 l\u2019AI Act, la r\u00e9glementation europ\u00e9enne.\u00bb<\/p>\n

D\u00e9marche similaire du c\u00f4t\u00e9 de plusieurs professeur\u00b7e\u00b7s du D\u00e9partement d\u2019anglais o\u00f9 une interdiction ne semble pas judicieuse, ne serait-ce qu\u2019en raison de la difficult\u00e9 de la mettre en \u0153uvre. \u00abEt pour \u00eatre honn\u00eate, conc\u00e8de Elisabeth Dutton, nous recourons tous les jours \u00e0 l\u2019intelligence artificielle. C\u2019est juste le copi\u00e9-coll\u00e9 qui pose probl\u00e8me.\u00bb Depuis peu, la professeure d\u2019anglais m\u00e9di\u00e9val demande \u00e0 ses \u00e9tudiant\u00b7e\u00b7s de d\u00e9crire, en quelques phrases, dans quelle mesure l\u2019IA les a aid\u00e9s et les probl\u00e8mes \u00e9ventuels que cela a pos\u00e9. Le but? \u00abJe voudrais qu\u2019ils soient auto-critiques envers leur pratique.\u00bb<\/p>\n

En physique, comme on l\u2019a vu, les avantages que procurent l\u2019IA semblent d\u2019avantage contrecarr\u00e9s par la nature m\u00eame des exigences de la discipline. \u00abUn travail de master repr\u00e9sente 9 mois dans un groupe de recherche, soit th\u00e9orique, soit exp\u00e9rimental, explique Baptiste Hildebrand. L\u2019\u00e9tudiant\u00b7e doit y effectuer toute une s\u00e9rie de mesures et de calculs dont les IA ne sont pas capables. Elles peuvent donner un coup de main bienvenu pour les t\u00e2ches de programmation, mais la compr\u00e9hension du sujet reste essentielle. En ce sens, une interdiction des IA ne me semble pas pertinente.\u00bb<\/p>\n

\"\"<\/a>

Baptiste Hildebrand, Lecteur au D\u00e9partement de physique<\/p><\/div>\n

On n\u2019arr\u00eate pas la technologie
\n<\/strong>Nos trois professeur\u00b7e\u00b7s se montrent pour l\u2019heure peu enclins \u00e0 l\u00e9gif\u00e9rer, d\u2019autant plus que la technologie avance \u00e0 un rythme que nul ne peut suivre. Ils reconnaissent tous les trois que les IA provoqueront sans doute des pertes de comp\u00e9tences, par exemple dans la capacit\u00e9 \u00e0 structurer sa pens\u00e9e. \u00abIl en est all\u00e9 de m\u00eame avec l\u2019apparition de la calculatrice, illustre Baptiste Hildebrand, et personne ne songerait \u00e0 retourner \u00e0 l\u2019\u00e9poque des bouliers-compteurs!\u00bb Pour Pascal Pichonnaz, une interdiction serait d\u2019autant plus inappropri\u00e9e que l\u2019IA va faire partie du quotidien professionnel de chacun\u00b7e: \u00abCertains pays, dont la Chine, utilisent des algorithmes en guise d\u2019aide \u00e0 la d\u00e9cision, voire pour se substituer aux juges. Notre d\u00e9fi, \u00e0 l\u2019Universit\u00e9, c\u2019est de continuer \u00e0 donner ces comp\u00e9tences de base aux juristes qui leur permettront de pouvoir interpr\u00e9ter, comprendre, critiquer la solution qu\u2019ils re\u00e7oivent.\u00bb<\/p>\n

\u00abOn pourrait souhaiter que cela n\u2019existe pas, conclut presque fataliste Elisabeth Dutton, mais la technologie est l\u00e0 et il faut trouver une mani\u00e8re de l\u2019utiliser d\u2019une mani\u00e8re intelligente. La mani\u00e8re de penser, la structuration des id\u00e9es restent et resteront des comp\u00e9tences fondamentales.\u00bb<\/p>\n

<\/div>\n
\n

Bon \u00e0 savoir: L’AI \u00e0 l’Uni<\/strong><\/p>\n

Quant aux principes g\u00e9n\u00e9raux, ils sont de m\u00eame nature que ceux \u00e9voqu\u00e9s par les trois professeur\u00b7e\u00b7s:<\/p>\n