MedicalBenchmark
Meta: Llama 3.2 1B Instruct provider

Llama 3.2 1B Instruct

316

#316 de 319 modelos no ranking geral

Desempenho acumulado em 3 exames MIR

Pontuação líquida

38.66 pts

Exatidão

17.0%

Corretas / Incorretas

102 / 190

Custo total

$0.07

Desempenho Geral

(vs. média)
Exatidão

17.0%

avg: 80.6%

Pontuação líquida

38.66 pts

avg: 453.30 pts

Acertos

102

avg: 483

Erros

190

avg: 90

Custo total

$0.07

avg: $9.58

Tempo médio de resposta

3.4s

avg: 17.9s

Tokens de saída

309K

avg: 1.3M

Tokens de raciocínio

0

avg: 898K

Confiança média

49.1%

avg: 95.4%

Desagregação por Exame

MIR 2024
317
Corretas
29
Incorretas
65
Exatidão
14.5%
Pontuação líquida
7.33
MIR 2025
315
Corretas
29
Incorretas
67
Exatidão
14.5%
Pontuação líquida
6.66
MIR 2026
315
Corretas
44
Incorretas
58
Exatidão
22.0%
Pontuação líquida
24.66