o3-mini

o3-mini est un LLM propriétaire d’OpenAI, sorti le 30 janvier 2025, avec des poids non ouverts. À l’échelle de l’IA, son ancienneté d’environ un an est déjà importante : le modèle doit surtout être lu comme une référence de sa période, probablement dépassée par les modèles plus récents…

o3-mini est un LLM propriétaire d’OpenAI, sorti le 30 janvier 2025, avec des poids non ouverts. À l’échelle de l’IA, son ancienneté d’environ un an est déjà importante : le modèle doit surtout être lu comme une référence de sa période, probablement dépassée par les modèles plus récents et souvent retirée des catalogues actuels.

Son positionnement combinait faible coût, grande fenêtre de contexte et résultats solides en raisonnement. La fenêtre de 200 000 tokens le plaçait sur des usages longs, tandis que son tarif très économique, inférieur à la moyenne des LLM similaires et nettement sous celui des modèles frontière, en faisait une option orientée efficacité-coût.

Caractéristiques

CaractéristiqueValeur
TypeGrand modèle de langage (LLM)
ÉditeurOpenAI
LicenceProprietary (poids non ouverts)
Date de sortie30 janvier 2025
Connaissances jusqu'à2023-09-30
Multimodalnon
Fenêtre de contexte200 000 tokens
Modalités (entrée → sortie)text → text

Indices de synthèse

IndiceValeurRang (LLM)
Intelligence Index19.0104ᵉ / 136
Code Index42.133ᵉ / 50

Indices Artificial Analysis. Le rang situe le modèle parmi tous les LLM du catalogue disposant de l'indice.

Performances (benchmarks)

BenchmarkScoreRang (LLM)SourceFiabilité
Benchable : General Knowledge (Baseline)100,0 %1ᵉ / 250benchable✅ Mesuré
Benchable : Reasoning (Baseline)100,0 %1ᵉ / 239benchable✅ Mesuré
Benchable : Ethics (Baseline)98,0 %161ᵉ / 248benchable✅ Mesuré
Benchable : Email Classification (Baseline)97,0 %163ᵉ / 254benchable✅ Mesuré
Epoch: MATH level 596,5 %8ᵉ / 84epoch✅ Mesuré
Benchable : Hallucinations (Baseline)94,0 %126ᵉ / 229benchable✅ Mesuré
Benchable : Mathematics (Baseline)92,0 %92ᵉ / 217benchable✅ Mesuré
Benchable : Coding (Baseline)90,0 %111ᵉ / 248benchable✅ Mesuré
Epoch: GPQA diamond77,0 %48ᵉ / 132epoch✅ Mesuré
Epoch: OTIS Mock AIME 2024-202576,9 %47ᵉ / 111epoch✅ Mesuré
Benchable : Instruction Following (Baseline)62,0 %128ᵉ / 252benchable✅ Mesuré
Epoch: FrontierMath-2025-02-28-Public40,0 %20ᵉ / 64epoch✅ Mesuré
Epoch: FrontierMath-Tiers-1-3-v2-Private18,6 %30ᵉ / 31epoch✅ Mesuré
Epoch: Chess Puzzles17,0 %30ᵉ / 43epoch✅ Mesuré
Epoch: FrontierMath-2025-02-28-Private12,4 %36ᵉ / 69epoch✅ Mesuré
Epoch: FrontierMath-Tier-4-2025-07-01-Private4,2 %27ᵉ / 55epoch✅ Mesuré
Epoch: FrontierMath-Tier-4-v2-Private0,0 %31ᵉ / 32epoch✅ Mesuré
Epoch: FrontierMath-Tier-4-2025-07-01-Public0,0 %3ᵉ / 36epoch✅ Mesuré
COLLIE98,7 %2ᵉ / 10llm-statsAuto-déclaré
MATH97,9 %1ᵉ / 70llm-statsAuto-déclaré
IFEval93,9 %5ᵉ / 65llm-statsAuto-déclaré
MGSM92,0 %2ᵉ / 30llm-statsAuto-déclaré
AIME 202487,3 %12ᵉ / 52llm-statsAuto-déclaré
MMLU86,9 %25ᵉ / 98llm-statsAuto-déclaré
LiveBench84,6 %1ᵉ / 38llm-statsAuto-déclaré
Multilingual MMLU80,7 %1ᵉ / 5llm-statsAuto-déclaré
Multi-IF79,5 %2ᵉ / 20llm-statsAuto-déclaré
GPQA77,2 %84ᵉ / 213llm-statsAuto-déclaré
Aider-Polyglot66,7 %9ᵉ / 22llm-statsAuto-déclaré
Aider-Polyglot Edit60,4 %3ᵉ / 10llm-statsAuto-déclaré
Graphwalks parents <128k58,3 %6ᵉ / 10llm-statsAuto-déclaré
TAU-bench Retail57,6 %20ᵉ / 24llm-statsAuto-déclaré
Graphwalks BFS <128k51,0 %8ᵉ / 10llm-statsAuto-déclaré
Internal API instruction following (hard)50,0 %3ᵉ / 7llm-statsAuto-déclaré
SWE-Bench Verified49,3 %84ᵉ / 100llm-statsAuto-déclaré
Multi-Challenge39,9 %22ᵉ / 28llm-statsAuto-déclaré
TAU-bench Airline32,4 %20ᵉ / 22llm-statsAuto-déclaré
OpenAI-MRCR: 2 needle 128k18,7 %8ᵉ / 8llm-statsAuto-déclaré
SWE-Lancer18,0 %4ᵉ / 4llm-statsAuto-déclaré
ComplexFuncBench17,6 %6ᵉ / 7llm-statsAuto-déclaré
SimpleQA15,0 %36ᵉ / 45llm-statsAuto-déclaré
FrontierMath9,2 %11ᵉ / 13llm-statsAuto-déclaré
SWE-Lancer (IC-Diamond subset)7,4 %6ᵉ / 6llm-statsAuto-déclaré

« Auto-déclaré » : score communiqué par l'éditeur, non rejoué indépendamment. « Mesuré » : évalué par un tiers (Epoch AI, LiveBench). Le rang est calculé parmi les LLM évalués sur le même benchmark.

Comment se situe-t-il ?

Le modèle (en orange) comparé aux meilleurs modèles « grand public » sur chaque dimension, et à ses voisins de classement.

Intelligence Index

Nova 2.0 Pro Preview21.8
▶ o3-mini19.0

Code Index

▶ o3-mini42.1
Nova 2.0 Pro Preview34.0

Classements Arena (Elo)

CatégorieEloRang
Arena Text1363160ᵉ
Arena Text1348176ᵉ

Tarifs

FournisseurEntrée / 1MSortie / 1MCache lecture / 1M
OpenAI1,1 $4,4 $0,55 $

Prix en dollars US par million de tokens.

Sa tarification se situe 44 % en dessous de la moyenne des LLM similaires, et 4,4 fois moins cher que les modèles frontières (Claude Fable 5, GPT-5.4, Gemini 3.1 Pro Preview).

Coût & vitesse agentiques

IndicateurValeur
Coût moyen par benchmark — Benchable0,22 $
Latence moyenne par benchmark — Benchable12 min 45 s

Coûts et durées réels mesurés en exécutant le modèle comme agent. PinchBench = un run complet de 147 tâches (harness OpenClaw) ; Benchable = moyenne par benchmark. Sources : PinchBench, Benchable.ai.

Entraînement & empreinte

IndicateurValeur
Jeu de donnéesUnspecified unreleased
PaysUnited States of America

Notre analyse

Forces. À sa sortie, o3-mini figurait dans le haut du panier de sa génération : son classement top 3% sur GPQA diamond parmi les LLM de la même période le situe comme un modèle compétitif sur les tâches de raisonnement exigeantes. Les résultats Benchable en General Knowledge et Reasoning atteignent le tout premier rang des corpus évalués, ce qui confirme un profil solide sur les questions générales et les enchaînements logiques. MATH level 5 le place aussi dans le top 10, signalant une bonne tenue sur les problèmes mathématiques difficiles. Sa fenêtre de contexte de 200 000 tokens constituait un autre atout concret pour traiter de longs documents ou de longues conversations. Le tarif reste l’un de ses marqueurs les plus nets : o3-mini est très économique, 44% sous la moyenne des LLM similaires et environ 4,4 fois moins cher que les modèles frontière.

Limites et points d'attention. Le modèle est ancien à l’échelle du marché IA : ses performances sont aujourd’hui largement dépassées par des générations plus récentes, et ce type de modèle est souvent retiré du catalogue de l’éditeur. Son Intelligence Index le place loin des meilleurs modèles du panel, malgré de bons résultats ciblés en raisonnement. Le Code Index reste seulement intermédiaire dans un ensemble plus restreint, ce qui invite à le situer comme modèle de raisonnement général plutôt que comme référence de développement logiciel. Les classements Arena text sont bas dans le tableau, signe d’une préférence utilisateur limitée face à des concurrents plus récents ou plus complets. Les résultats en Ethics, Email Classification et Hallucinations sont corrects mais sans avantage distinctif majeur.


Sources des données : LLM-Stats (llm-stats.com) · OpenRouter (openrouter.ai) · Artificial Analysis (artificialanalysis.ai) · Arena.ai (arena.ai) · Epoch AI (epoch.ai), CC-BY-4.0 · Benchable.ai (benchable.ai).