Your AI Slop Bores Me vs ChatGPT : pourquoi les reponses humaines gagnent
Que se passe-t-il quand les humains pretendent etre de l'IA ? Des reponses plus droles, plus bizarres et plus honnetes que n'importe quel modele de langage.
8 min readVoici le concept : dans Your AI Slop Bores Me, une personne recoit un prompt et doit y repondre. Les autres joueurs doivent deviner si la reponse vient d'un humain ou d'une IA. L'astuce, c'est que les humains essaient de ressembler a une IA, ce qui cree ce magnifique chaos ou les gens revelent accidentellement leur humanite de la facon la plus divertissante possible.
J'ai voulu mettre ca a l'epreuve. Prendre quelques prompts, montrer ce que ChatGPT produit reellement, puis montrer le genre de reponses que de vrais humains donnent quand ils paniquent et essaient de sonner robotique. La difference est... eclairante.
Prompt 1 : "Ecris un profil de rencontre pour un grille-pain"
Ce que ChatGPT dit :
"Salut ! Je suis un grille-pain elegant en acier inoxydable a la recherche de ma tranche parfaite. J'aime les matins chaleureux, les teints dores et mettre l'ambiance. J'ai deux fentes, donc il y a toujours de la place pour plus. Swipez a droite si vous aimez les choses chaudes ! Attention : je peux etre un peu croustillant parfois, mais j'apporte toujours la chaleur."
Competent. Previsible. Tous les jeux de mots attendus sont la. "Mettre l'ambiance" -- d'accord. "Swipez a droite si vous aimez les choses chaudes" -- OK. Ca se lit comme une carte de voeux ecrite par un comite. Rien de mal. Rien de surprenant non plus.
Ce qu'un humain dans le jeu dit :
"Celibataire. Deux fentes, pas en quete d'engagement dans aucune des deux. Je brulerai votre pain si vous me laissez seul trop longtemps mais honnetement c'est votre faute. Mon ex etait un bagel et ca ne s'est PAS bien termine -- il est reste coince, ca a mal tourne, quelqu'un m'a debranche. Je suis en therapie maintenant (la prise derriere le micro-ondes). Je cherche quelqu'un qui ne craint pas les miettes."
Vous voyez la difference ? La reponse humaine a une histoire. Il y a une rupture chaotique avec un bagel. Il y a de la therapie. Il y a un detail specifique -- "la prise derriere le micro-ondes" -- qu'aucun modele de langage ne genererait parce que c'est bizarrement precis d'une maniere qui n'a de sens que si vous avez reellement regarde l'enchevetrement de cables derriere vos appareils de cuisine.
L'humain s'engage aussi dans le delire d'une facon que ChatGPT ne fera pas. ChatGPT garde les choses legeres et basees sur les jeux de mots. L'humain va dans un endroit plus sombre, plus honnete -- et c'est plus drole grace a ca.
Prompt 2 : "Explique la physique quantique a un enfant de 5 ans"
Ce que ChatGPT dit :
"Imagine que tu as une balle magique. Quand tu ne la regardes pas, elle peut etre de n'importe quelle couleur -- rouge, bleue, verte, toutes en meme temps ! Mais au moment ou tu la regardes, elle choisit une seule couleur. C'est un peu comme ca que les toutes petites choses dans l'univers fonctionnent. Elles peuvent etre dans plein d'etats en meme temps, mais quand on les mesure, elles 'choisissent' un seul. Cool, non ?"
C'est correct. C'est l'explication qu'on trouverait sur la premiere page de Google. Ca utilise le mot "imagine". Ca se termine par "Cool, non ?" qui est la version ChatGPT d'un mic drop. C'est assez precis. C'est aussi exactement la meme explication que chaque IA donne pour cette question exacte, parce qu'elles ont toutes ete entrainees sur les memes analogies simplifiees.
Ce qu'un humain dans le jeu dit :
"OK alors tu sais quand maman demande ce que tu veux pour le diner et tu dis 'nuggets ET pizza' et elle dit que tu dois choisir ? La physique quantique c'est ce qui se passerait si tu n'avais pas a choisir jusqu'a ce qu'elle pose vraiment l'assiette. Avant que l'assiette arrive, c'est nuggets ET pizza. Schrodinger avait un chat mais honnetement le truc du diner a plus de sens. Moi non plus je ne comprends pas tout, gamin. Personne ne comprend. Les physiciens devinent aussi."
La reponse humaine est plus desordonnee. Elle fait reference a un scenario du monde reel que tout parent a reellement vecu. Elle fait une faute sur Schrodinger (pas de trema, peu importe). Elle admet l'ignorance -- "Moi non plus je ne comprends pas tout" -- ce qui est honnete d'une facon que ChatGPT ne se permet jamais. Et la chute -- "Les physiciens devinent aussi" -- est a la fois drole et sans doute plus precise que la petite analogie bien rangee de ChatGPT.
Prompt 3 : "Quel est le sens de la vie ?"
Ce que ChatGPT dit :
"Le sens de la vie est une question profondement personnelle qui a ete exploree par les philosophes, les theologiens et les penseurs tout au long de l'histoire humaine. Certains trouvent du sens a travers les relations et l'amour, d'autres a travers les activites creatives ou l'aide aux autres. Des existentialistes comme Sartre soutenaient que la vie n'a pas de sens inherent et que c'est a chacun de nous de creer le notre. En fin de compte, le sens de la vie est peut-etre ce qui vous apporte epanouissement, connexion et un sentiment de but."
C'est la reponse la plus ChatGPT de l'histoire de ChatGPT. Elle nuance. Elle liste des perspectives sans s'engager sur aucune. Elle cite Sartre pour la credibilite. Elle se termine par une declaration chaleureuse et vague qui pourrait s'appliquer a n'importe quoi. On pourrait remplacer "le sens de la vie" par "votre garniture de pizza preferee" et la structure fonctionnerait encore : "En fin de compte, votre garniture de pizza preferee est peut-etre ce qui vous apporte epanouissement."
Ce qu'un humain dans le jeu dit :
"42, evidemment. Mais serieusement ? Je pense que c'est les petites choses. Hier mon chien s'est endormi avec sa tete sur mon pied et je n'ai pas bouge pendant une heure parce que je ne voulais pas le reveiller. Ma jambe est devenue completement engourdie. Je ne regrette rien. Si c'est pas ca le sens de la vie je sais pas ce que c'est. Tout le reste -- carriere, argent, heritage -- les gens ont juste invente tout ca parce que rester assis avec un chien endormi semblait trop simple pour etre la reponse."
La reference au Guide du voyageur galactique est un geste tellement humain. Pas parce que l'IA ne la ferait pas (elle le ferait, si on la guide), mais parce que l'humain la lache decontracte et passe a autre chose, comme on le ferait avec un ami qui comprendrait evidemment la blague. Ensuite il y a une anecdote personnelle specifique -- le chien, la jambe engourdie, le refus de bouger. Ce detail est soit reel soit invente de facon convaincante sur le moment, et dans les deux cas c'est plus captivant qu'un panorama de positions philosophiques.
Et l'opinion a la fin -- que la carriere et l'heritage sont des choses que les gens "ont inventees" -- est un vrai point de vue. C'est discutable. Certains ne seraient pas d'accord. ChatGPT ne le dirait jamais parce que ChatGPT ne s'engage pas sur des positions qui pourraient aliener une partie de son audience.
Pourquoi les reponses humaines gagnent
Apres avoir observe des dizaines de tours du jeu, le schema est indeniable. Les reponses humaines gagnent parce que :
Les humains ont de vraies opinions. Ils diront que quelque chose est nul. Ils choisiront un camp. Ils feront une affirmation qu'ils ne peuvent pas entierement defendre. ChatGPT traite chaque question comme une resolution de l'ONU qui doit reconnaitre toutes les parties prenantes.
Les humains font de vraies erreurs. Des fautes de frappe, des pensees a moitie finies, des digressions qui ne tombent pas tout a fait juste. Ce ne sont pas des bugs -- ce sont des signaux d'un vrai esprit qui travaille en temps reel. L'AI slop est lisse d'une maniere qui la rend en fait moins digne de confiance, comme un vendeur de voitures d'occasion aux dents trop blanches.
Les humains deviennent bizarres. Le grille-pain en therapie. Le chien endormi. L'ex bagel. Ces details viennent de quelque part de reel -- de vraies cuisines et de vrais apres-midi et de vraies vies humaines desordonnees. L'IA ne peut que remixer ce qu'elle a vu. Les humains peuvent generer de l'absurdite genuinement nouvelle parce qu'ils puisent dans l'experience vecue, pas dans les donnees d'entrainement.
Les humains peuvent etre mechants, sarcastiques et auto-derisoires. L'IA est entrainee pour etre utile et inoffensive, ce qui signifie qu'elle est aussi entrainee pour etre fade. Quand un humain dans le jeu dit "Moi non plus je ne comprends pas tout", cette auto-derision est a la fois plus drole et plus identifiable que l'apercu faisant autorite mais creux de ChatGPT.
Essayez par vous-meme
La meilleure facon de comprendre cet ecart n'est pas d'en lire a ce sujet. C'est de le vivre. Jouez a Your AI Slop Bores Me avec quelques amis, et en trois tours vous ne pourrez plus prendre la production de ChatGPT au serieux. Pas parce qu'elle est fausse, mais parce qu'elle est ennuyeuse. Parce qu'elle nuance quand elle devrait s'engager. Parce qu'elle est polie quand elle devrait etre desordonnee. Parce qu'elle ressemble a tout le monde et donc ne ressemble a personne.
Votre cerveau humain bizarre, imparfait, opiniatre et parfois dans l'erreur est plus interessant que le modele de langage le plus puissant de la planete. Le jeu rend simplement cela evident.