Au cours de Big GPT-5 Livestream jeudiOpenai a montré quelques graphiques qui ont rendu le modèle assez impressionnant – mais si vous regardez attentivement, certains graphiques étaient un peu éteints.
Dans l’un, en montrant ironiquement à quel point GPT-5 se comporte dans «Deception Evals à travers les modèles», l’échelle est partout. Pour la «tromperie de codage», par exemple, le graphique affiché sur scène indique que GPT-5 avec pensée obtient apparemment un taux de tromperie de 50,0%, mais cela est comparé au score O3 plus petit d’OpenAI de 47,4% qui a en quelque sorte une barre plus grande. Openai semble avoir des nombres précis pour ce graphique dans son Article de blog GPT-5Cependant, où le taux de tromperie de GPT-5 est étiqueté à 16,5%.
Avec ce graphiqueOpenai a montré sur scène que l’un des scores de GPT-5 est inférieur que l’O3 mais est montré avec une barre plus grande. Dans ce même graphique, les scores de O3 et GPT-4O sont différents mais représentés avec des barres de taille égale. C’était assez mauvais que le PDG Sam Altman ait commenté, l’appeler Une «méga graphique à visser», bien qu’il ait noté qu’une version correcte est dans le blog d’Openai.
Un membre du personnel du marketing Openai aussi excuséen disant: «Nous avons fixé le tableau des gars du blog, excuses pour le crime involontaire du graphique.»
Openai n’a pas immédiatement répondu à une demande de commentaires. Et bien qu’il ne soit pas clair si Openai a utilisé Gpt-5 Pour faire les graphiques, ce n’est toujours pas un excellent look pour la société lors de sa grande journée de lancement – surtout lorsqu’elle vante les «progrès importants dans la réduction des hallucinations» avec son nouveau modèle.
Sur le même sujet
