L'ESSENTIEL EN 30 SECONDES
- MLCommons a publié MLPerf Training v6.1 le 16 novembre : 250 résultats issus de 24 organisations, dont les premiers pour les GPU de génération Rubin de NVIDIA et le TPUv7 Ironwood de Google.
- La série introduit une épreuve de post-entraînement par apprentissage par renforcement (GRPO) sur Qwen3.5-397B et remplace l'ancien test de recommandation DLRM par DLRMv4-HSTU.
- NVIDIA affirme que Vera Rubin NVL72 a été le plus rapide sur six des sept tests et jusqu'à 2x plus rapide par GPU que le GB300 ; AMD dit que le MI355X égale ou dépasse le B200 dans ses comparaisons. Ces ratios sont calculés par les constructeurs.
MLCommons, le consortium industriel qui gère les benchmarks MLPerf, a publié le 16 novembre les résultats de MLPerf Training v6.1. Cette série rassemble 250 résultats soumis par 24 organisations, parmi lesquelles AMD, Azure, Cisco, CoreWeave, Dell, Google, HPE, Lambda, Nebius, NVIDIA, Oracle, Supermicro, tiny corp et l'université de Floride. Crusoe y participe pour la première fois. Selon MLCommons, le plus grand système comptait 10 240 accélérateurs, et 37 % des systèmes étaient hébergés dans le cloud, contre 29 % lors de la série précédente.
Ce qui change dans le benchmark
La suite comprend désormais sept tests. La principale nouveauté est une épreuve de post-entraînement : le modèle Qwen3.5-397B y est entraîné par Group Relative Policy Optimization, une méthode d'apprentissage par renforcement, sur des tâches de génie logiciel impliquant des appels d'outils. MLCommons a aussi remplacé son ancien test de recommandation par DLRMv4-HSTU, fondé sur une architecture à attention. TechArena souligne que cette épreuve sollicite l'ensemble du système, y compris les processeurs classiques qui exécutent les vérifications en bac à sable, et pas seulement les accélérateurs.
Cette série contient les premiers résultats des GPU de génération Rubin de NVIDIA et du TPUv7 Ironwood de Google. L'une des plus grandes exécutions sur DeepSeek-V3 a mobilisé 8 192 puces Ironwood.
Ce qu'affirment les constructeurs
NVIDIA indique que son rack Vera Rubin NVL72 a obtenu le meilleur temps d'entraînement sur six des sept tests. Sur DeepSeek-V3, le temps absolu le plus court revient à une configuration GB300 de 10 240 GPU. À nombre de GPU égal, l'entreprise estime que Vera Rubin est de 1,4 à 2 fois plus rapide par GPU que le GB300, l'écart maximal étant observé sur DeepSeek-V3. NVIDIA a aussi publié des réexécutions avec un logiciel plus récent atteignant 2,4x, en précisant que MLCommons ne les a pas vérifiées.
AMD a soumis des systèmes MI350X et MI355X sur cinq tests, contre trois auparavant, dont sa première entrée sur un modèle à mélange d'experts, GPT-OSS-20B. Le groupe présente un entraînement FLUX.1 en formats FP6 et FP4 comme la première démonstration publique et reproductible d'un entraînement en FP6. Il affirme que le MI355X a devancé le B200 de NVIDIA sur plusieurs tests à huit GPU, tout en restant derrière le B300. Crusoe, Dell, HPE, MiTAC, Oracle et Supermicro ont soumis des résultats sur ses puces.
Comment lire ces chiffres
MLCommons publie des temps d'entraînement bruts, sans classement. Les ratios par GPU et les écarts en pourcentage cités ici sont calculés par NVIDIA et AMD, à partir de matériels, de logiciels et de tailles de systèmes qui varient d'une soumission à l'autre. AMD précise que ses chiffres agrégés ne sont pas des scores MLPerf officiels.
