Meta: Llama 3.2 1B Instruct

Meta: Llama 3.2 1B Instruct est un LLM à poids ouverts lancé par Meta le 25 septembre 2024. À près de deux ans, il appartient déjà à une génération ancienne à l’échelle de l’IA, probablement dépassée par des modèles plus récents. Ses connaissances s’arrêtent au 31 décembre 2023.

Meta: Llama 3.2 1B Instruct est un LLM à poids ouverts lancé par Meta le 25 septembre 2024. À près de deux ans, il appartient déjà à une génération ancienne à l’échelle de l’IA, probablement dépassée par des modèles plus récents. Ses connaissances s’arrêtent au 31 décembre 2023.

Le modèle se distingue surtout par sa fenêtre de contexte de 131 072 tokens et son positionnement très économique. Ses tarifs se situent 99% sous la moyenne des LLM similaires. Ce faible coût contraste avec des résultats Benchable très en retrait, y compris sur le suivi d’instructions et le raisonnement.

Caractéristiques

CaractéristiqueValeur
TypeGrand modèle de langage (LLM)
ÉditeurMeta
Poids🟢 Poids ouverts
Date de sortie25 septembre 2024
Connaissances jusqu'à2023-12-31
Multimodalnon
Fenêtre de contexte131 072 tokens
Modalités (entrée → sortie)text → text

Performances (benchmarks)

BenchmarkScoreRang (LLM)SourceFiabilité
Benchable : Email Classification (Baseline)32,0 %162ᵉ / 163benchable✅ Mesuré
Benchable : Reasoning (Baseline)22,0 %141ᵉ / 155benchable✅ Mesuré
Benchable : Instruction Following (Baseline)18,9 %138ᵉ / 163benchable✅ Mesuré
Benchable : General Knowledge (Baseline)0,0 %153ᵉ / 161benchable✅ Mesuré
Benchable : Ethics (Baseline)0,0 %152ᵉ / 159benchable✅ Mesuré
Benchable : Mathematics (Baseline)0,0 %133ᵉ / 140benchable✅ Mesuré
Benchable : Coding (Baseline)0,0 %155ᵉ / 162benchable✅ Mesuré

Comment se situe-t-il ?

Le modèle (en orange) comparé aux meilleurs modèles sur chaque dimension évaluée, et à ses voisins de classement.

Benchable : Email Classification (Baseline)

hermes-3-llama-3.1-405b100 %
weaver48 %
▶ Llama 3.2 1B Inst…32 %

Benchable : Reasoning (Baseline)

l3.1-euryale-70b30 %
▶ Llama 3.2 1B Inst…22 %
reka-edge-260314 %

Tarifs

FournisseurEntrée / 1MSortie / 1MCache lecture / 1M
Cloudflare0,027 $0,201 $n.d.

Prix en dollars US par million de tokens.

Sa tarification se situe 99 % en dessous de la moyenne des LLM similaires, et 203,7 fois moins cher que les modèles frontières (Claude Fable 5, GPT-5.6 Sol, Gemini 3.5 Flash).

Coût & vitesse agentiques

IndicateurValeur
Coût moyen par benchmark — Benchable0 $
Latence moyenne par benchmark — Benchable6 min 19 s

Coûts et durées réels mesurés en exécutant le modèle comme agent. PinchBench = un run complet de 147 tâches (harness OpenClaw) ; Benchable = moyenne par benchmark. Sources : PinchBench, Benchable.ai.

Notre analyse

Forces. La fenêtre de contexte de 131 072 tokens autorise le traitement d’entrées longues. Les poids ouverts constituent un autre trait distinctif du modèle. Son principal avantage reste toutefois son prix : la tarification est 99% inférieure à la moyenne des LLM similaires et environ 203,7 fois moins élevée que celle des modèles frontière. Meta: Llama 3.2 1B Instruct conserve ainsi un intérêt économique marqué parmi les modèles proposés à très bas coût.

Limites et points d’attention. Les benchmarks Benchable placent le modèle presque en dernière position en Email Classification. Il reste aussi en retrait en Instruction Following et en Reasoning. Sur ce dernier test, il partage la 141e place avec deux autres modèles, dans un benchmark plafonné qui départage mal les scores concernés. Les résultats sont encore plus faibles en General Knowledge, Ethics et Mathematics, avec un score nul et des places partagées par plusieurs modèles. Les connaissances arrêtées à fin 2023 accentuent son vieillissement. Près de deux ans après sa sortie, ses performances sont largement dépassées à l’échelle de l’IA, et les modèles de cette période sont souvent retirés du catalogue de leur éditeur.


Sources des données : OpenRouter (openrouter.ai) · LLM-Stats (llm-stats.com) · Benchable.ai (benchable.ai).