Nouveau rapport de sagesse
Editeur : Département éditorial HYZ
[Introduction à la nouvelle sagesse] Le modèle nouvelle génération d'OpenAI, o3, est né ! Tao Zhexuan a prédit que l'IA serait bloquée par les tests de mathématiques pendant plusieurs années. Il l'a réussi instantanément et son niveau de programmation s'est classé parmi les 200 meilleurs au monde. Il était encore plus étonnant dans le benchmark ARC-AGI, battant tous les records d'IA et. se rapprochant du niveau humain, un pas de plus vers l’AGI.
Le dernier jour des 12 jours, le modèle d'inférence de nouvelle génération o3 d'OpenAI est vraiment né !
Altman, Mark Chen, Ren Hongyu et le président de la Fondation ARC Prize, Greg Kamradt, nous ont présenté
Comme révélé, l'apparition soudaine d'o3 est devenue la « finale » de toute la diffusion en direct.
Altman a déclaré que la raison pour laquelle il avait sauté o2 était par respect pour ses partenaires et pour perpétuer la tradition d'OpenAI de « noms particulièrement mauvais ».
Vous savez, trois mois seulement se sont écoulés depuis la naissance d'O1 en septembre. La vitesse d'itération de o3 prouve que la loi de mise à l'échelle ne semble pas être terminée.
Selon un rapport publié par le père de Keras, o3 coûte jusqu'à 20 dollars par tâche en mode de calcul faible, et des milliers de dollars par tâche en mode de calcul élevé.
Le code mathématique o3 devient un dieu et écrase o1
Lors de plusieurs tests de référence, o3 a une fois de plus actualisé SOTA, écrasant complètement la version complète de o1 dans des domaines tels que les mathématiques, le codage et le génie logiciel !
Lors de l'évaluation du concours de mathématiques AIME 2024, o3 a atteint une précision de 96,7 % et ses performances ont grimpé de 13,4 %. Sur la référence scientifique de questions et réponses au niveau doctoral GPQA Diamond, la précision d'o3 était de 87,7 %, soit une augmentation de 9,7 % par rapport à celle du concours de mathématiques AIME 2024. génération précédente o1.
Sur la référence mathématique Frontier Math publiée par Epoch AI en novembre de cette année, la précision de o3 atteignait 25,2 %.
Dans ce benchmark, la précision de tous les modèles actuels est inférieure à 2 %, mais avec des paramètres de temps de test agressifs, o3 a pu atteindre une précision de 25 %.
Aujourd'hui, cette déclaration a été annulée par OpenAI o3.
Sur le benchmark d'ingénierie logicielle SWE-bench Verified, les performances du code d'o3 ont bondi de 22,8 %, passant de 48,9 % d'o1 à 71,7 %.
Dans Codeforces, le score Elo de o3 est de 2727, soit une augmentation de plus de 800 points par rapport à o1.
Cette performance a atteint le niveau d'International Grandmaster, équivalent à un joueur humain classé 175ème.
Encore plus que le vice-président principal de la recherche d’OpenAI.
En plus d'o3, o3-mini a également réalisé de nouvelles avancées dans des domaines tels que les mathématiques, le codage, les questions et réponses scientifiques au niveau du doctorat et les appels de fonctions.
Cela définit véritablement une nouvelle frontière du raisonnement coûts-avantages.
Altman a déclaré que ces deux nouveaux modèles seraient testés par les chercheurs et qu'il était impatient de les lancer dès que possible dans le futur.
Sébastien Bubeck, chercheur chez OpenAI, a déclaré que o3 avait atteint une précision de 25 % dans Frontier Maths, ce qui est extrêmement étonnant aux yeux du lauréat de la médaille Fields, Tim Gowers. Cela implique que l’étincelle du développement de l’IA s’...
[Courte citation de 8% de l'article original]