Alors qu’OpenAI a promis des améliorations avec la mise à jour ChatGPT, nombreux sont ceux qui crient à la déception. Les performances de l’outil phare auraient drastiquement chuté. Les internautes sont donc perplexes. Simple impression ou véritable régression ? Plongeons dans cette affaire qui a fait couler beaucoup d’encre numérique.
Depuis son lancement, ChatGPT est devenu une référence incontournable dans le monde de l’intelligence artificielle. La dernière mise à jour du modèle GPT-4o, dévoilée en grande pompe par OpenAI. Cela promettait une écriture plus fluide, des réponses plus pertinentes et une meilleure gestion des dossiers. Pourtant, à peine déployée, cette version est accusée de régression. Entre critiques des internautes et chiffres qui ne mentent pas, on se demande si ChatGPT n’est pas en train de perdre de sa force ?
Une mise à jour ChatGPT qui bouscule tout
Vous avez probablement vu la dernière mise à jour de ChatGPT ? Apparemment, ce modèle phare du langage OpenAI a régressé, et pas qu’un peu. Cependant, l’entreprise a fièrement annoncé le 20 novembre que sa mise à jour améliorerait la qualité de rédaction et la pertinence des réponses.
« La capacité d’écriture créative du modèle a été améliorée : une écriture plus naturelle, engageante et personnalisée pour améliorer la pertinence et la lisibilité. », a affirmé OpenAI sur X.
Une analyse publiée par Analyse artificielle prouve en effet que les performances de GPT-4o ont chuté. L’indice de qualité est passé de 77 à 71une baisse qui place GPT-4o au même niveau que la version mini. Et ce n’est pas tout !
Sur le référence GPQA Diamant (test connu pour évaluer l’intelligence d’un modèle d’IA), GPT-4o est tombé de 51% à 39%. C’est pareil pour les tests de MATH avec un score de 78% à 69%. Là, je trouve qu’on est vraiment loin de la promesse d’un modèle » amélioré ».
Malgré tout, GPT-4o est deux fois plus vite qu’avant. Avant la mise à jour, le modèle produisait 80 mots par seconde, et maintenant c’est 180 mots par seconde.
Petite taille, grandes questions
Les chercheurs en analyse artificielle pensent que la tendance de novembre est probable plus petit que celui du mois d’août. Nous ne savons pas pourquoi OpenAI ferait cela ? Ce qui est sûr, c’est que cette mise à jour laisse un goût amer.
« Étant donné qu’OpenAI n’a pas réduit les prix pour la version du 20 novembre, nous recommandons aux développeurs de ne pas déplacer les charges de travail de la version d’août sans des tests approfondis. », soulignent les chercheurs.
Je vous rappelle également que GPT-4o a été lancé en mai 2024 et que ce modèle devait surpasser GPT-3.5 et GPT-4. Il devait également exceller dans des domaines tels que la traduction en temps réel, l’IA visuelle et, bien sûr, la conversation. Autant dire que cette version était une carte maîtresse dans la stratégie OpenAI. Mais sa régression met sérieusement en danger la réputation de l’entreprise.
Alors que s’est-il passé ? OpenAI n’a pas encore répondu directement aux critiques. Mais si je peux me permettre, je pense qu’ils optimisent peut-être les performances pour gérer un afflux important d’utilisateurs. Mais si c’est au détriment de la qualité, cela risque de mal se passer.
Et qu’en pensez-vous ? Avez-vous déjà testé cette fameuse version de novembre de GPT-4o ? Partagez votre point de vue dans les commentaires ?
Partagez l’article :
Facebook
Gazouillement
LinkedIn
Notre blog est alimenté par les lecteurs. Lorsque vous achetez via des liens sur notre site, nous pouvons gagner une commission d’affiliation.
