Connexion Abonnez-vous

L’IA générative rend idiot, et c’est Microsoft qui le dit

Microsoft rend idiot, et c’est l’IA générative qui le dit

L’IA générative rend idiot, et c’est Microsoft qui le dit

Dans une étude réalisée avec l’université de Carnegie Mellon, des chercheurs de Microsoft ont pointé un appauvrissement de l’esprit critique allant de pair avec la confiance portée aux IA génératives. Ils mettent en avant un lien de cause à effet et les dangers qui l’accompagnent.

Le 14 février à 10h00

Lors de la Bordeaux I/O, nos discussions avec les ingénieures Marie-Alice Blete et Cécile Hannotte s’étaient orientées vers le danger de « l’assèchement » engendré par les IA génératives (GenAI). Ces dernières pouvaient, à force de dévorer tout nouveau contenu pour le recracher sous une forme digérée, lissée et uniforme, appauvrir petit à petit le socle des connaissances. La baisse drastique de fréquentation de sites comme Stack Overflow, servant au partage des connaissances, était perçue comme un indice.

Si la réflexion prenait place dans le domaine du développement logiciel, elle a des ramifications plus profondes. Elle posait ainsi la question d’un tarissement de la pensée créative. Des chercheurs de Microsoft, en partenariat avec l’université de Carnegie Mellon, vont encore plus loin : plus on fait confiance aux IA générative, moins on a d’esprit critique, avec tous les dangers que cela suppose.

Un schéma se dessine

L’étude a porté sur 319 personnes, des « travailleurs de la connaissance » recouvrant donc de nombreux corps de métiers, mais dont l’activité comprend dans tous les cas la manipulation d’informations ou de données.

Il reste 82% de l'article à découvrir.

Déjà abonné ? Se connecter

Cadenas en colère - Contenu premium

Soutenez un journalisme indépendant,
libre de ton, sans pub et sans reproche.

Accédez en illimité aux articles

Profitez d'un média expert et unique

Intégrez la communauté et prenez part aux débats

Partagez des articles premium à vos contacts

Commentaires (26)

votre avatar
Le sous-titre 🤣 !
votre avatar
J'y ai pensé avant de le lire; il devait être évident !
votre avatar
L'esprit critique, ou ce qu'il en reste, n'a pas fini de prendre cher !
votre avatar
Article très intéressant qui recoupe pour partie les inquiétudes de Florence Maraninchi (enseignante-chercheuse en informatique) dans le billet Pourquoi je n'utilise pas ChatGPT.
votre avatar
Merci du partage, très bon article.
votre avatar
Tartiflette forever ! :merci: :mike:

(Comprenne qui pourra.)
votre avatar
Le problème de fond, c'est qu'on a tendance à croire que ce qui est écrit sur un écran est la Sainte Vérité.

L'esprit critique n'est pas inné, ça s'apprend. Mais quand on habitue les gens à consommer passivement, il ne se développe pas.
votre avatar
Tout d'abord le titre est idiot parce que ce qualificatif est mauvais.

Ensuite, n'est-il pas normal de moins contrôler et plus confier de tâches à partir du moment où l'on a plus confiance en un outil ? On fait la même chose avec les humains.
Je ne sais pas si pour autant on perd son esprit critique. On l'exerce probablement moins et ça peut devenir embêtant quand on en a besoin.

Ce n'est pas une raison pour dire que l'on devient bête en utilisant ces outils.

Je suis déçu de l'utilisation de tels qualificatifs qui ne reflètent pas l'étude.
votre avatar
Je ne sais pas si pour autant on perd son esprit critique. On l'exerce probablement moins et ça peut devenir embêtant quand on en a besoin.
On perd toujours ce qu'on n'exerce pas régulièrement. Personnellement, depuis que j'ai pris du recul sur l'opérationnel (ce qu'on demande dans les métiers d'architecture : prendre de la hauteur), j'ai forcément perdu sur de la pratique technique où je serais moins efficace pour traiter des actions qu'un techos qui en fait tous les jours fera.

Par contre, je vois quand même un risque à vouloir faire confiance dans ces outils si on a pas la prise de recul nécessaire. C'est comme tout, cela dit.

J'ai le recul pour savoir que l'IA générative peut se tromper, je remets donc assez systématiquement en cause ce qu'elle produit (et à l'inverse, elle m'a déjà produit un excellent résultat en 5 min là où une heure de recherche web s'est avérée infructueuse). Et j'ai pris pour habitude de ne jamais la croire sur un sujet que je ne maîtrise pas.
Alors je te laisse imaginer ma réponse quand une fois on m'a demandé de convertir un script python vers un langage que je ne connaissais pas en me disant "t'as qu'à utiliser ChatGPT". Hélas, beaucoup s'en contenteront sans même challenger le résultat :craint:

Bref, l'IA générative ne rend pas idiot, elle montre qu'on l'est.

Ça me rappelle le même Linux / Windows : Windows prend l'utilisateur pour un imbécile, Linux en veut la preuve.
votre avatar
De l'article je n'en ai lu que:

-------

L’IA générative rend idiot, et c’est Microsoft qui le dit

Microsoft rend idiot, et c’est l’IA générative qui le dit


Dans une étude réalisée avec l’université de Carnegie Mellon, des chercheurs de Microsoft ont pointé un appauvrissement de l’esprit critique allant de pair avec la confiance portée aux IA génératives. Ils mettent en avant un lien de cause à effet et les dangers qui l’accompagnent.

-------

Mouais, comme la télé, le matraquage de discours quelque soit le media de diffusion et pour certains d'entre eux les manuels scolaires (au hasard les livres d'histoire).
votre avatar
Mouais, comme la télé, le matraquage de discours quelque soit le media de diffusion et pour certains d'entre eux les manuels scolaires (au hasard les livres d'histoire).
Tu ne leur délègue pas tes activités. Et ils représentent un problème précisément quand tu restes trop en mode passif devant ces médias. Je pense même que c'est exactement le même processus. J'enseigne en info, les étudiants recopient les énoncés dans un prompt et recopient la réponse de l'IA comme réponse aux exercices. Aucune réflexion, aucun recul. Heureusement tous ne sont pas comme ça.
votre avatar
J'enseigne en info, les étudiants recopient les énoncés dans un prompt et recopient la réponse de l'IA comme réponse aux exercices
Voir à ce sujet (lien déjà posté sous un autre article) : Entretien avec un vampire.
Intro :
Je suis persuadé qu’en faisant cela, mes étudiant⋅es se privent de l’expérience qu’on acquiert en se confrontant soit-même à la résolution de l’exercice. Mais à quel point ? L’IA-gen peut-elle vraiment les aider ? Jusqu’à quel point ? Où et comment va-t-elle les induire en erreur ? Tout cela je ne le mesure pas.
J’ai donc décidé d’ouvrir la boite de Pandore, de soumettre mes exercices à une IA-gen, et de l’interroger sur ce qu’elle produit.
votre avatar
L'autre problème de Microsoft avec l'IA, c'est qu'ils investissent des dizaines de milliards dans la techno, mais n'ont absolument aucune idée de cas concret d'utilisation. Ils espèrent que utilisateurs vont trouver des usages, et qu'ils soient prêt à payer pour. C'est relativement risqué comme stratégie.
votre avatar
Ah bon ? La reconnaissance optique, l'OCR, le développement assisté, la synthèse vocale, la reconnaissance vocale, la rédaction assistée, etc, ce ne sont pas des cas concrets d'utilisation ?
votre avatar
Je pense que @sephirostoy parlait de l'IA générative.
votre avatar
Le dev assisté, la synthèse vocale, et la rédaction que j'ai cités sont trois cas d'usage de l'IA générative implémentés dans plusieurs produits du marché et pas que du Microsoft.

Infomaniak a intégré du LLM pour sa suite kDrive, Antidote en propose pour de la reformulation / retouche de texte ainsi que l'analyse, GitLab a une offre de code assisté par IA, etc. Ajoutons à cela les moteurs de recherche Web augmentés par ce moyen, le RAG, etc. Les fonctions de retouche de Photoshop aussi.

Dire qu'il n'existe pas de cas concret d'utilisation est donc un mensonge ou une méconnaissance du sujet.
votre avatar
La synthèse vocale existait bien avant l'IA générative (c'est un mensonge de dire le contraire ou une méconnaissance du sujet 🤣).
Pour le développement et la rédaction assisté c'est effectivement lié à l'IA générative.
Reste à voir l'utilité de ça et du coup le risque pour M$ (et les autres).
Sans parler de l'impact environnemental qui pour moi est le plus gros problème.
votre avatar
La synthèse vocale existait certes avant (tout comme la génération de snippets de code n'a pas attendu GPT), mais désormais elle s'appuie sur des modèles de machine learning qui ont grandement amélioré son efficacité (un peu trop, même, cf les deepfakes).
votre avatar
Dire qu'il n'existe pas de cas concret d'utilisation est donc un mensonge ou une méconnaissance du sujet.
C'est exact, en revanche, il n'y a pas réellement de killer app, et surtout, aucune appli qui rapporte de l'argent à ces entreprises (puisque même à 200$/mois, OpenAI perd de l'argent).
votre avatar
Oui, là dessus on est d'accord.

Après, je relativiserai en disant que dans la Tech, c'est courant qu'ils perdent de l'argent pendant longtemps. On est dans la phase d'investissement donc le ROI est encore loin. Et je me demande s'il sera si évident à calculer. Encore pour le Cloud, avec tous les grosses entreprises de la Tech qui ont mis leurs propres services dessus, l'investissement se rentabiliser au travers des produits SaaS + des clients Cloud.

Pour les services basés IA, c'est plus un complément qu'un véritable backend aujourd'hui.
votre avatar
Moi je dirais plutôt l'inverse... Après est-ce que tous les cas proposés sont vraiment utiles et est-ce que ca ne va pas au final nous faire perdre en efficacité à terme, c'est une autre histoire.
votre avatar
Une très bonne BD sur l'esprit critique : https://www.editions-delcourt.fr/bd/series/serie-l-esprit-critique/album-l-esprit-critique
Promis je ne touche rien, en fait techniquement je fais de la pub pour un concurrent !! :D
votre avatar
Par exemple, la présence de correcteurs orthographiques toujours plus poussés nous rend-elle meilleurs dans la rédaction ou sape-t-elle l’envie de comprendre l’orthographe et la grammaire ?
La dernière fois que j'ai demandé aux collègues de faire un effort sur les phôttes dans les documents qu'ilds produisent ("Dans le fichier d'extraction, on doit retrouvées ..."), on m'a dit que j'étais "relou de toujours dire ça, vu que tout le monde comprend ce qui est demandé".

Du coup, sur la base de cette expérience (qui vaut ce qu'elle vaut), j'ai ma réponse à la question.
votre avatar
Pour ou contre les calculatrices ?

:mrgreen:
votre avatar
Ça dépend. Pour calculer 3+5, inutile mais pour 357874,58*8566464,346 ça peut servir. :D
votre avatar
Je faisais simplement un parallèle avec la polémique sur l'utilisation des calculatrices à l'école, au collège puis au lycée à l'époque.

L’IA générative rend idiot, et c’est Microsoft qui le dit

  • Un schéma se dessine

  • Danger de l’assèchement

  • Favoriser la pensée critique

  • Un air de déjà-vu

Fermer