Llama-3.3 Nemotron Super 49B v1
Llama-3.3 Nemotron Super 49B v1 est un LLM de NVIDIA publié le 18 mars 2025 sous Llama 3.1 Community License, avec des poids non ouverts. Avec environ un an d’ancienneté, il appartient déjà à une génération ancienne à l’échelle de l’IA, à comparer d’abord aux modèles disponibles autour…
Llama-3.3 Nemotron Super 49B v1 est un LLM de NVIDIA publié le 18 mars 2025 sous Llama 3.1 Community License, avec des poids non ouverts. Avec environ un an d’ancienneté, il appartient déjà à une génération ancienne à l’échelle de l’IA, à comparer d’abord aux modèles disponibles autour de sa sortie plutôt qu’aux systèmes actuels.
Le modèle combine 50 milliards de paramètres, une fenêtre de contexte de 131 072 tokens et des connaissances arrêtées au 31 décembre 2023. Sa fiche repose sur deux sources de données concordantes, ce qui permet de situer précisément son profil historique.
Caractéristiques
| Caractéristique | Valeur |
|---|---|
| Type | Grand modèle de langage (LLM) |
| Éditeur | NVIDIA |
| Licence | Llama 3.1 Community License (poids non ouverts) |
| Date de sortie | 18 mars 2025 |
| Connaissances jusqu'à | 2023-12-31 |
| Multimodal | non |
| Paramètres | 50 milliards |
| Fenêtre de contexte | 131 072 tokens |
| Modalités (entrée → sortie) | text → text |
Performances (benchmarks)
| Benchmark | Score | Rang (LLM) | Source | Fiabilité |
|---|---|---|---|---|
| MATH-500 | 96,6 % | 11ᵉ / 31 | llm-stats | Auto-déclaré |
| MT-Bench | 91,7 % | 2ᵉ / 12 | llm-stats | Auto-déclaré |
| MBPP | 91,3 % | 2ᵉ / 33 | llm-stats | Auto-déclaré |
| Arena Hard | 88,3 % | 4ᵉ / 26 | llm-stats | Auto-déclaré |
| BFCL v2 | 73,7 % | 3ᵉ / 5 | llm-stats | Auto-déclaré |
| GPQA | 66,7 % | 124ᵉ / 213 | llm-stats | Auto-déclaré |
| AIME 2025 | 58,4 % | 92ᵉ / 108 | llm-stats | Auto-déclaré |
« Auto-déclaré » : score communiqué par l'éditeur, non rejoué indépendamment. « Mesuré » : évalué par un tiers (Epoch AI, LiveBench). Le rang est calculé parmi les LLM évalués sur le même benchmark.
Notre analyse
Forces. À sa sortie, Llama-3.3 Nemotron Super 49B v1 se plaçait dans le haut du panier de sa génération sur GPQA, avec un classement dans le top 22% parmi 80 LLM comparables sur une période de plus ou moins neuf mois. Cette position indique un modèle solide pour son époque, sans le placer parmi les tout premiers systèmes disponibles. Sa fenêtre de contexte de 131 072 tokens constituait aussi un atout concret pour traiter de longs documents, maintenir davantage d’informations en mémoire et analyser des entrées étendues sans découpage immédiat.
Limites et points d'attention. L’ancienneté du modèle est le principal point faible. Environ un an représente un cycle très long pour les LLM, et ses performances doivent être considérées comme probablement largement dépassées face aux modèles haut de gamme actuels. Il est aussi typique de ce type de modèle de période d’être souvent retiré du catalogue actif de l’éditeur. Ses connaissances s’arrêtent au 31 décembre 2023, ce qui limite son intérêt pour les sujets récents. La licence Llama 3.1 Community License, associée à des poids non ouverts, restreint également la lecture du modèle comme solution pleinement ouverte.
Sources des données : LLM-Stats (llm-stats.com) · OpenRouter (openrouter.ai).