Grok-2 mini
Grok-2 mini est un LLM propriétaire de xAI, sorti le 13 août 2024, avec des poids non ouverts. Son ancienneté, environ deux ans, est déjà très importante à l’échelle de l’IA générative, ce qui le situe surtout comme un modèle de sa génération plutôt que comme une référence actuelle.
Grok-2 mini est un LLM propriétaire de xAI, sorti le 13 août 2024, avec des poids non ouverts. Son ancienneté, environ deux ans, est déjà très importante à l’échelle de l’IA générative, ce qui le situe surtout comme un modèle de sa génération plutôt que comme une référence actuelle.
Le modèle combine une fenêtre de contexte de 32 768 tokens et des connaissances arrêtées au 31 mai 2024. Les données disponibles, issues de deux sources concordantes, permettent surtout d’évaluer sa place historique dans le catalogue xAI et face aux LLM lancés autour de la même période.
Caractéristiques
| Caractéristique | Valeur |
|---|---|
| Type | Grand modèle de langage (LLM) |
| Éditeur | xAI |
| Licence | Proprietary (poids non ouverts) |
| Date de sortie | 13 août 2024 |
| Connaissances jusqu'à | 2024-05-31 |
| Multimodal | oui |
| Fenêtre de contexte | 32 768 tokens |
| Modalités (entrée → sortie) | text → text |
Performances (benchmarks)
| Benchmark | Score | Rang (LLM) | Source | Fiabilité |
|---|---|---|---|---|
| DocVQA | 93,2 % | 13ᵉ / 26 | llm-stats | Auto-déclaré |
| MMLU | 86,2 % | 30ᵉ / 98 | llm-stats | Auto-déclaré |
| HumanEval | 85,7 % | 32ᵉ / 65 | llm-stats | Auto-déclaré |
| MATH | 73,0 % | 32ᵉ / 70 | llm-stats | Auto-déclaré |
| MMLU-Pro | 72,0 % | 74ᵉ / 125 | llm-stats | Auto-déclaré |
| MathVista | 68,1 % | 17ᵉ / 38 | llm-stats | Auto-déclaré |
| MMMU | 63,2 % | 38ᵉ / 61 | llm-stats | Auto-déclaré |
| GPQA | 51,0 % | 152ᵉ / 213 | llm-stats | Auto-déclaré |
« Auto-déclaré » : score communiqué par l'éditeur, non rejoué indépendamment. « Mesuré » : évalué par un tiers (Epoch AI, LiveBench). Le rang est calculé parmi les LLM évalués sur le même benchmark.
Notre analyse
Forces. À sa sortie, Grok-2 mini se plaçait dans le haut du panier de sa génération sur GPQA, avec un classement dans le top 26% des 27 LLM comparés sur une période de plus ou moins neuf mois. Cette position indique un modèle compétitif pour son époque, notamment dans les évaluations exigeantes utilisées pour départager les LLM généralistes. Sa fenêtre de contexte de 32 768 tokens constituait aussi un atout concret pour traiter des entrées longues, dans la limite des usages compatibles avec un modèle propriétaire de 2024.
Limites et points d'attention. Grok-2 mini est aujourd’hui un modèle ancien, probablement dépassé par les modèles haut de gamme plus récents et souvent retiré du catalogue de son éditeur. Ses connaissances s’arrêtent au 31 mai 2024, ce qui limite sa pertinence sur l’actualité, les bibliothèques logicielles récentes et les évolutions rapides du marché. Sa licence propriétaire empêche l’audit des poids et limite les usages nécessitant un contrôle fin du modèle. L’absence de chiffres publics sur l’entraînement, le coût ou le compute réduit aussi la capacité à apprécier l’effort industriel derrière cette version.
Sources des données : LLM-Stats (llm-stats.com) · OpenRouter (openrouter.ai).