Rédigé par Emile Dev
14 décembre 2023
ChatGPT est paresseux : La raison avancée est surprenante
Sommaire
Alors que les utilisateurs de ChatGPT ont constaté une baisse significative de la qualité des réponses en décembre, plusieurs sources ont émergé pour expliquer ce phénomène intrigant.
Communication officielle de l'équipe ChatGPT
L'équipe de ChatGPT a officiellement reconnu le problème à travers une publication sur Twitter (source).
Les raisons derrière cette baisse de performance
Rob Lynch, dans un tweet (source), soulève et détaille une hypothèse intéressante : selon lui, la présence de dates spécifiques dans le pré-prompt de GPT4, comme le mois de décembre, pourrait se traduire par une baisse générale de productivité pour le modèle, en écho aux comportements humains durant les fêtes de fin d'année.
Nick Dobos, dans son intervention (source), confirme cette tendance. Il souligne une corrélation entre le modèle et les jours ou mois de l'année, appuyant l'idée que GPT4 pourrait être indirectement influencé par des facteurs saisonniers.
La combinaison avec DALL-E 3 et Browser
Mikiane propose une analyse complémentaire (source), suggérant que l'intégration de GPT4 avec d'autres technologies comme DALL-E 3 et Browser pourrait compliquer le fonctionnement de ChatGPT. Cette combinaison pourrait introduire des instructions supplémentaires, potentiellement déstabilisantes pour le modèle, et contribuer ainsi à la baisse de performance observée.
Mes notes :
- GPT4 est de + en + paresseux
- L’équipe de ChatGPT a communiqué sur ce problème : https://twitter.com/ChatGPTapp/status/1732979491071549792
- La raison : ChatGPT serait impacté par l’hiver, et plus particulièrement le mois de décembre. Chaque mot ayant un poids, la date dans le pre-prompt de GPT4 influencerait négativement : Le mois de décembre signifierait une baisse globale de la productivité pour GPT4 (Fêtes de fin d'année), et donc, le modèle s’aligne.
- Une confirmation de Nick sur ce problème de liaison entre le modèle & les jours et mois de l’année : https://twitter.com/NickADobos/status/1734344256016597055
- Analyse intéressante, qui met en cause la combinaison DALL-E 3 et Browser, ce qui doit donc ajouter + d’instructions potentiellement déstabilisante à GPT4 : https://twitter.com/mikiane/status/1734474536832151756
- Plusieurs problèmes sont à l’origine de ce problème
