MedicalBenchmark
Meta: Llama 3.1 8B Instruct provider

Llama 3.1 8B Instruct

298

#298 de 319 modelos no ranking xeral

Rendemento acumulado en 3 exames MIR

Puntuación neta

160.33 pts

Certeza

39.8%

Correctas / Incorrectas

239 / 236

Custo total

$0.06

Rendemento Xeral

(vs. media)
Certeza

39.8%

avg: 80.6%

Puntuación neta

160.33 pts

avg: 453.30 pts

Acertos

239

avg: 483

Erros

236

avg: 90

Custo total

$0.06

avg: $9.58

Tempo promedio de resposta

25.0s

avg: 17.9s

Tokens saíntes

784K

avg: 1.3M

Tokens de razoamento

0

avg: 898K

Confianza promedia

79.1%

avg: 95.4%

Desagregación por Exame

MIR 2024
303
Correctas
74
Incorrectas
90
Certeza
37.0%
Puntuación neta
44.00
MIR 2025
290
Correctas
79
Incorrectas
78
Certeza
39.5%
Puntuación neta
53.00
MIR 2026
299
Correctas
86
Incorrectas
68
Certeza
43.0%
Puntuación neta
63.33