174 étudiants de l'Université de Pékin peuvent-ils réussir le test d'IA ? Le résultat est surprenant

À l'École de chimie et d'ingénierie moléculaire de l'Université de Pékin, une annonce soudaine avant l'examen de mi-session a rendu l'atmosphère de l'examen inhabituelle : un groupe de « candidats spéciaux » a été accueilli dans la salle d'examen. Ils n’ont pas besoin de s’asseoir et aucun papier ni stylo n’est nécessaire. Il s'agit de GPT, Gemini, DeepSeek... ces IA les plus intelligentes au monde rivalisent dans le cloud avec 174 étudiants de deuxième année de l'École de chimie et d'ingénierie moléculaire de l'Université de Pékin.

Il s'agit d'un « test de Turing » soigneusement conçu et d'une « pierre de touche » pour le grand modèle de langage élaboré par l'équipe de recherche de l'Université de Pékin. Récemment, l'Institut de chimie de l'Université de Pékin, en collaboration avec les équipes du Centre informatique de l'Université de Pékin, de l'École d'informatique et du Yuanpei College, a publié le dernier résultat SUPERChem. Récemment, ils ont utilisé un ensemble de « papiers d'examen de l'Université de Pékin » comme critère pour mesurer calmement les véritables limites de l'IA dans le raisonnement scientifique.

Parlons des candidats

Un examen spécial de mi-session : les candidats à l'IA et les étudiants de l'Université de Pékin passent le même test

Lorsque j'ai ouvert la banque de questions SUPERChem, j'ai ressenti un « sentiment d'oppression ».

Analyse fine des structures cristallines, déductions approfondies des mécanismes réactionnels, calculs quantitatifs des propriétés physiques et chimiques... Ces 500 questions ne proviennent pas de banques de questions publiques facilement disponibles sur Internet, mais sont issues d'adaptations approfondies de questions d'examens difficiles...
[Courte citation de 8% de l'article original]