Google vient de changer la façon dont il mesure les modèles d'IA les plus efficaces pour écrire le code des applications Android, et la mise à jour a remanié les classements utilisés par les développeurs pour choisir leurs outils. Le classement Android Bench de la société, lancé en mars, fonctionne désormais sur un nouveau système de test appelé Harbor. Google affirme que cela remplace l'outil de test plus ancien et plus générique qu'il utilisait auparavant et donne une meilleure lecture de la façon dont les modèles fonctionnent sur de vraies tâches Android, comme la mise à jour de l'ancien code vers Jetpack Compose ou la gestion de la mise en réseau des appareils portables.
De nouveaux modèles bousculent le haut de la liste
Depuis que l’outil de test a changé, Google a réexécuté chaque modèle. Huit nouveaux modèles ont été ajoutés au classement, dont Claude Fable 5, Claude Sonnet 5, Claude Opus 4.8, GLM 5.2, Kimi K2.7 Code, MiniMax M3, Qwen 3.7 Plus et Qwen 3.7 Max.
Claude Fable 5 occupe désormais la première place avec un score de 84,5 pour cent, suivi de GPT 5,5 à 80,2 et Claude Sonnet 5 à 76,2. Parmi les modèles gratuits à poids ouvert, le GLM 5.2 est en tête avec 72,2 pour cent, devant le Kimi K2.7 Code avec 70,4 pour cent. Le Gemini 3.1 Pro de Google se classe cinquième avec un score de 73,7 %. Si vous vous référez à Android Bench pour choisir le bon modèle pour votre travail de codage, vous devez vous rendre sur le site Web d'Android Bench et consulter le classement actualisé.
Les développeurs peuvent désormais soumettre leurs propres tâches de test
Lorsque Google a lancé Android Bench en mars, il a publié sa méthodologie de test et son harnais de test sur GitHub par souci de transparence. Aujourd'hui, cette approche ouverte est poussée plus loin en permettant aux développeurs de contribuer à l'évaluation avec leurs propres tâches de développement Android. Les développeurs peuvent également exécuter eux-mêmes les tests avec leurs modèles préférés et partager les résultats avec la communauté.
Les classements sont susceptibles de changer à mesure que de nouveaux modèles apparaissent, comme les GPT-5.6 Sol, Terra et Luna récemment publiés par OpenAI. Si vous choisissez un outil d'IA pour le codage Android, traitez le classement actuel comme un instantané, et non comme un classement permanent, et revenez avant de vous engager dans un tel classement pour votre prochain projet.
