Grok-3 Mini
Grok-3 Mini est un LLM propriétaire de xAI, publié le 17 février 2025, avec des poids non ouverts. Son ancienneté d’environ un an est déjà importante à l’échelle de l’IA générative : il doit être lu comme un modèle de sa période, probablement dépassé par les générations récentes et…
Grok-3 Mini est un LLM propriétaire de xAI, publié le 17 février 2025, avec des poids non ouverts. Son ancienneté d’environ un an est déjà importante à l’échelle de l’IA générative : il doit être lu comme un modèle de sa période, probablement dépassé par les générations récentes et parfois absent des catalogues actuels.
Le modèle se distingue surtout par un positionnement très économique et une fenêtre de contexte large. Son profil est nettement plus convaincant en mathématiques qu’en questions factuelles vérifiables, avec une place particulièrement solide sur plusieurs évaluations quantitatives de sa génération.
Caractéristiques
| Caractéristique | Valeur |
|---|---|
| Type | Grand modèle de langage (LLM) |
| Éditeur | xAI |
| Licence | Proprietary (poids non ouverts) |
| Date de sortie | 17 février 2025 |
| Connaissances jusqu'à | 2024-11-17 |
| Multimodal | oui |
| Fenêtre de contexte | 131 072 tokens |
| Modalités (entrée → sortie) | text,image → text |
Indices de synthèse
| Indice | Valeur | Rang (LLM) |
|---|---|---|
| Intelligence Index | 22.5 | 91ᵉ / 136 |
| Math Index | 84.7 | 14ᵉ / 55 |
Indices Artificial Analysis. Le rang situe le modèle parmi tous les LLM du catalogue disposant de l'indice.
Performances (benchmarks)
| Benchmark | Score | Rang (LLM) | Source | Fiabilité |
|---|---|---|---|---|
| Epoch: MATH level 5 | 90,9 % | 14ᵉ / 84 | epoch | ✅ Mesuré |
| Epoch: OTIS Mock AIME 2024-2025 | 77,8 % | 45ᵉ / 111 | epoch | ✅ Mesuré |
| Epoch: GPQA diamond | 76,3 % | 51ᵉ / 132 | epoch | ✅ Mesuré |
| Epoch: SimpleQA Verified | 21,1 % | 44ᵉ / 52 | epoch | ✅ Mesuré |
| Epoch: FrontierMath-2025-02-28-Private | 5,9 % | 45ᵉ / 69 | epoch | ✅ Mesuré |
| Epoch: FrontierMath-Tier-4-2025-07-01-Public | 0,0 % | 3ᵉ / 36 | epoch | ✅ Mesuré |
| Epoch: FrontierMath-2025-02-28-Public | 0,0 % | 35ᵉ / 64 | epoch | ✅ Mesuré |
| AIME 2024 | 95,8 % | 1ᵉ / 52 | llm-stats | Auto-déclaré |
| AIME 2025 | 90,8 % | 41ᵉ / 108 | llm-stats | Auto-déclaré |
| GPQA | 84,0 % | 50ᵉ / 213 | llm-stats | Auto-déclaré |
| LiveCodeBench | 80,4 % | 8ᵉ / 72 | llm-stats | Auto-déclaré |
« Auto-déclaré » : score communiqué par l'éditeur, non rejoué indépendamment. « Mesuré » : évalué par un tiers (Epoch AI, LiveBench). Le rang est calculé parmi les LLM évalués sur le même benchmark.
Comment se situe-t-il ?
Le modèle (en orange) comparé aux meilleurs modèles « grand public » sur chaque dimension, et à ses voisins de classement.
Intelligence Index
Math Index
Classements Arena (Elo)
| Catégorie | Elo | Rang |
|---|---|---|
| Arena Text | 1362 | 161ᵉ |
Tarifs
| Fournisseur | Entrée / 1M | Sortie / 1M | Cache lecture / 1M |
|---|---|---|---|
| artificialanalysis | 0,3 $ | 0,5 $ | 0,075 $ |
Prix en dollars US par million de tokens.
Sa tarification se situe 85 % en dessous de la moyenne des LLM similaires, et 16,1 fois moins cher que les modèles frontières (Claude Fable 5, GPT-5.4, Gemini 3.1 Pro Preview).
Notre analyse
Forces. Grok-3 Mini ressort d’abord par ses résultats en mathématiques. Son Math Index le place dans le haut du classement, et MATH level 5 confirme une bonne maîtrise des problèmes structurés de niveau avancé. À sa sortie, il figurait aussi dans le top 6% des LLM de sa génération sur GPQA diamond (questions scientifiques niveau doctorat), ce qui situait le modèle dans le haut du panier pour le raisonnement scientifique. Sur FrontierMath-Tier-4, il apparaît dans le top 10, même si ce benchmark reste très exigeant et peu discriminant pour de nombreux modèles. Son autre atout est économique : sa tarification est très inférieure à celle des LLM similaires et environ 16.1 fois plus basse que celle des modèles frontière.
Limites et points d'attention. Grok-3 Mini est un modèle ancien pour le rythme du secteur. Ses performances doivent donc être comparées aux LLM de début 2025, pas aux modèles haut de gamme récents. Son Intelligence Index le situe plutôt loin dans le classement global, et Arena text indique une réception compétitive modeste en comparaison large. SimpleQA Verified met en évidence une faiblesse nette sur les questions factuelles vérifiables, un point critique pour les usages où l’exactitude prime. FrontierMath-2025-02-28-Private reste très bas, signe que les mathématiques de recherche les plus difficiles dépassent largement ses capacités. La licence propriétaire limite aussi l’audit, l’auto-hébergement et l’adaptation fine du modèle.
Sources des données : LLM-Stats (llm-stats.com) · OpenRouter (openrouter.ai) · Artificial Analysis (artificialanalysis.ai) · Arena.ai (arena.ai) · Epoch AI (epoch.ai), CC-BY-4.0.