Gemini 3 Pro vient de prendre la première place dans notre nouvel Index AA-Omniscience — mais c'est une histoire nuancée AA-Omniscience est notre nouvelle évaluation de la connaissance et des hallucinations. Le leadership de Gemini 3 Pro est motivé par sa haute Précision (pourcentage de réponses correctes) ; le modèle a obtenu 14 points de plus que le modèle avec la deuxième meilleure précision, Grok 4. Le Taux d'Hallucination de Gemini 3 Pro dans l'évaluation est de 88 %, le même que Gemini 2.5 Pro et Gemini 2.5 Flash. Cela suggère que Gemini 3 Pro a réalisé des gains substantiels en connaissance mais pas autant de gains matériels dans sa tendance à halluciner. Nous mesurons le Taux d'Hallucination en fonction de la fréquence à laquelle le modèle répond incorrectement alors qu'il aurait dû refuser, défini comme la proportion de mauvaises réponses sur l'ensemble des tentatives non correctes. Dans AA-Omniscience, nous avons constaté qu'il y avait peu de corrélation entre la Précision et le Taux d'Hallucination. De plus, nous avons trouvé qu'il existe une forte corrélation entre la taille des modèles à poids ouverts et la Précision (mais pas le Taux d'Hallucination). Ainsi, la très haute Précision de Gemini 3 Pro suggère qu'il s'agit d'un modèle très grand. Voir ci-dessous pour plus de détails concernant AA-Omniscience 👇

Kimi K2 Thinking reprend la frontière de l'intelligence des poids ouverts pour 🇨🇳 les laboratoires d'IA chinois gpt-oss-120b de 🇺🇸 OpenAI, basé aux États-Unis, détenait auparavant le titre de modèle de poids ouverts le plus intelligent, le modèle M2 de MiniMax a atteint la parité et Kimi K2 Thinking a atteint une nouvelle frontière d'intelligence. L'intelligence est mesurée sur la base de notre Indice d'Analyse de l'Intelligence Artificielle de 10 évaluations que nous effectuons de manière indépendante et comparable sur tous les modèles. Lien vers une analyse plus approfondie ci-dessous

L'analyse artificielle a récemment été présentée dans le dernier podcast BG² de @altcap et @bgurley avec @sama et @satyanadella Nos benchmarks montrent que le coût d'accès à une intelligence de niveau GPT-4 a chuté d'environ 350X au cours des ~2 dernières années. De plus, nous montrons que le coût d'accès à de nouvelles frontières de l'intelligence a diminué après qu'elles aient été atteintes. Voir ci-dessous pour des liens vers notre analyse et le podcast