Refact.ai AI L'agent est le nouveau n ° 1 sur la référence polyglot d'Aider avec un score de 76,4% (une meilleure mesure que le banc SWE?)

L'agent Refact.ai, propulsé par Claude 3.7 Sonnet, a obtenu un score impressionnant de 76,4% sur la référence PolyGllot d'Aider - sans capacités de réflexion activées.

Cela place Refact.ai Agent en haut du classement LLM, dépassant le score de 60,4% d'Aider avec le même modèle, ainsi qu'avec Deepseek Chat V3, GPT-4.5 Aperçu, ChatGPT-4O et autres.

La clé est notre approche itérative pour résoudre les tâches de programmation. Dans votre IDE, Refact.ai ne génère pas seulement du code - il garantit qu'il fonctionne en itérant jusqu'à ce qu'il obtienne un résultat réussi. Cela garantit des résultats très précis et prêts à la production avec une intervention humaine minimale.

À propos de la référence polyglot d'Aider

La référence évalue la façon dont l'IA peut gérer les défis de programmation du monde réel sur plusieurs langages. Il se compose de 225 des exercices de ...
[Courte citation de 8% de l'article original]