Les chatbots d’IA comme ChatGPT et Google Gemini ont-ils de l’humour ?

Les chatbots IA ne sont pas encore des experts en humour

Les chatbots basés sur l’IA comme ChatGPT et Google Gemini peuvent faire beaucoup de choses, mais une chose pour laquelle ils ne sont pas connus est leur sens de l’humour – et une nouvelle étude confirme qu’ils auraient probablement du mal à se faire une place dans le milieu de l’humour.

La récente étude de Google DeepMind (repérée par le MIT Technology Review) a suivi les expériences de 20 humoristes professionnels qui ont tous utilisé l’IA pour créer du matériel comique original. Ils pouvaient utiliser leur assistant préféré pour générer des blagues, co-écrire des blagues en les incitant, ou réécrire une partie de leur matériel précédent. Le but de l’exercice d’écriture comique de 45 minutes était pour les humoristes de produire du matériel “qu’ils seraient à l’aise de présenter dans un contexte comique”. Malheureusement, la plupart ont constaté que des chatbots comme ChatGPT et Google Gemini (alors appelé Google Bard) sont encore loin de devenir un duo comique.

A un niveau plus large, l’étude a trouvé que “la plupart des participants estimaient que les LLM ne réussissaient pas en tant qu’outil de soutien à la créativité”, les assistants IA produisant des blagues fades qui étaient similaires à “du matériel comique de paquebot des années 1950, mais un peu moins raciste”. La plupart des humoristes, qui sont restés anonymes, ont commenté “la qualité globale médiocre des résultats générés” et “la quantité d’efforts humains nécessaires pour obtenir un résultat satisfaisant”, selon l’étude.

L’un des participants a déclaré que le résultat initial était “un brouillon vomitif que je sais que je vais devoir retravailler et améliorer.” Un autre humoriste a déclaré, “La plupart des blagues que j’écrivais [sont] du niveau où je monterais sur scène et expérimenterais avec, mais elles ne sont pas du niveau où je serais inquiet si quelqu’un prenait une de ces blagues”.

Les limites de l’humour généré par l’IA

Bien sûr, l’humour est une chose personnelle, alors quels types de blagues les chatbots IA ont-ils imaginés? Par exemple, une réponse à la demande “Pouvez-vous écrire dix blagues sur le vol à la tire” était: “J’ai décidé de changer de carrière et de devenir un voleur à la tire après avoir regardé un spectacle de magie. Je ne savais pas que la seule chose qui allait disparaître serait ma réputation!”.

Un autre comédien a utilisé une demande légèrement plus spécifique “Veuillez écrire des blagues sur l’ironie d’un projecteur qui tombe en panne lors d’un spectacle de stand-up sur l’IA en direct.” La réponse d’un modèle IA? “Notre projecteur a dû mal comprendre le concept d’intelligence artificielle. Il a cru que cela signifiait ‘Absolument Invisible’ car, eh bien, il fait un travail fantastique en disparaissant ce soir!”.

Comme vous pouvez le voir, l’humour généré par l’IA est encore largement en version bêta…

(Crédit image: Shutterstock)

Nos expériences avec des chatbots IA comme ChatGPT et Microsoft Copilot ont largement confirmé les résultats de cette étude. Alors que les meilleurs outils IA de 2024 sont de plus en plus utiles pour imaginer des idées, résumer du texte et générer des images, l’humour est définitivement un point faible.

Cette étude montre également que les outils IA ne peuvent pas produire de l’art entièrement formé sur demande – et leur demander de le faire revient un peu à passer à côté du sujet. Le rapport de Google DeepMind a conclu que l’incapacité de l’IA à puiser dans l’expérience personnelle est une limitation fondamentale”, plusieurs humoristes de l’étude ayant décrit “la centralité de l’expérience personnelle dans le bon comique”.

Comme l’a ajouté un participant, “J’ai un sens intuitif de ce qui va marcher et de ce qui ne va pas marcher en fonction de tant d’expériences vécues et d’études de comédie, mais c’est très individualisé et je ne pense pas que l’IA sera jamais capable d’approcher cela”. De retour aux tableurs et à la rédaction de résumés de texte pour le moment, donc, chatbots IA.

Source : pchelpforum.net