GPT4 perdrait en pertinence, selon une étude

Une étude met en lumière une régression de la pertinence de GPT-4

Selon une étude récente, l'intelligence artificielle GPT-4 d'OpenAI serait en train de perdre en pertinence. Cette étude sérieuse, dont les résultats ont été publiés sur arXiv, quantifie cette régression, révélant une baisse significative dans la pertinence des réponses fournies par le modèle d'IA.

En opposition à ces résultats, OpenAI, l'organisation à l'origine de GPT-4, assure que ce n'est absolument pas le cas. Sur Twitter, ils ont réfuté ces affirmations, insistant sur le fait que le niveau de pertinence de GPT-4 serait plutôt en amélioration.

Cependant, certains utilisateurs professionnels et personnels ont signalé une baisse de la pertinence lors de l'utilisation de GPT-4, en particulier dans sa version API. Certaines de ces observations anecdotiques corroborent les résultats de l'étude, ajoutant une couche de confusion à la situation.

Pourquoi la pertinence de GPT-4 pourrait-elle être en déclin ?

La question demeure : pourquoi la pertinence de GPT-4 pourrait-elle être en déclin ? L'une des hypothèses est qu'OpenAI chercherait à réduire ses coûts et à augmenter sa marge globale. Le développement de GPT-4 a peut-être été poussé à l'extrême pour prendre de l'avance sur la concurrence, au point que cela nécessite désormais trop de ressources par rapport aux capacités actuelles. Il est possible que les efforts pour optimiser l'efficacité aient conduit à une baisse de la qualité des résultats générés par le modèle.

En conclusion, bien que l'étude et les déclarations d'OpenAI soient en contradiction, il semble y avoir suffisamment de preuves anecdotiques pour soutenir l'idée que la pertinence de GPT-4 pourrait être en déclin. Si cela est vrai, cela pourrait avoir des implications importantes pour l'avenir de l'IA générative. Pour l'instant, tout ce que nous pouvons faire est de continuer à observer l'évolution de la situation et d'attendre des informations plus détaillées. Pour en savoir plus, consultez l'article du Journal du Net sur le sujet.

Notes de l’article :

• Selon une étude GPT4 apporterait des réponses de moins en moins pertinentes
• Une étude très sérieuse à quantifier cette régression : https://arxiv.org/pdf/2307.09009.pdf
• OpenAI assure qu’absolument pas, et que ce serait même l’inverse : https://twitter.com/npew/status/1679538687854661637
• Mais j’ai remarqué dans mon utilisation pro / perso depuis 1 mois une baisse de la pertinence, et GPT4 en version API.. Il y a des jours c’est compliqué
• Pourquoi OpenAI baisse la pertinence de GPT4 ? Pour réduire leur facture et augmenter leur marge globale, ils ont poussé tellement loins GPT4 pour avoir un gap d’avance sur la concu, que ça demande encore trop de ressources par apport aux capacités actuelles
• Pour aller + loins : https://www.journaldunet.com/solutions/dsi/1523839-chatgpt-les-reponses-de-gpt-4-et-gpt-3-5-se-degradent-confirme-une-etude/