Des inquiétudes grandissantes planent autour de l'intelligence artificielle du chatbot ChatGPT d'OpenAI. Une étude menée par des chercheurs de l'UC Berkeley et de Stanford, publiée le 18 juillet, révèle que la version GPT-4 aurait subi une détérioration significative de ses performances par rapport à sa précédente version, GPT-3.5. Cette baisse d'intelligence remet en question la fiabilité du chatbot, déjà sujet à controverse concernant l'exactitude de certaines réponses.
Les chercheurs ont soumis GPT-4 et GPT-3.5 à un problème de mathématiques simple, à savoir l'identification de nombres premiers. Les résultats ont été surprenants, car GPT-4 n'a réussi à donner la bonne réponse que dans 2,4 % des cas, tandis que GPT-3.5 a répondu correctement dans 97,6 % des cas. Cette différence significative soulève des interrogations sur les raisons de cette baisse d'efficacité dans la version 4 du chatbot.
Outre les problèmes mathématiques, les chercheurs ont également observé des changements comportementaux chez ChatGPT. La version 4 montre plus de difficultés à expliquer pourquoi certaines questions sont sensibles à traiter, alors qu'auparavant, le chatbot fournissait des explications précises. De plus, GPT-4 éprouve des difficultés avec des questions de raisonnement spatial, mettant en évidence une dégradation de ses capacités par rapport à la version précédente.
Ces résultats suscitent des préoccupations quant à la fiabilité et à la pertinence de l'utilisation de ChatGPT dans certaines circonstances. Les modèles d'IA générative d'OpenAI, déjà critiqués pour leur exactitude sur des faits historiques et la diffusion d'informations erronées, pourraient voir leur utilisation limitée en raison de cette baisse de performance.
Actuellement, OpenAI n'a pas encore fourni d'explications officielles concernant cette détérioration de l'intelligence de GPT-4. Cependant, cette étude met en lumière la nécessité pour les utilisateurs et les entreprises de modèles d'IA de faire preuve de vigilance et de transparence dans leurs interactions avec cette technologie. L'avenir de ChatGPT dépendra de la manière dont OpenAI résoudra ces problèmes et s'engagera envers la communauté pour améliorer l'intelligence et la fiabilité de son chatbot.
