MedicalBenchmark
EleutherAI: Llemma 7b provider

Llemma 7b

318

#318 de 319 modelos en el ranking general

Rendimiento acumulado en 3 exámenes MIR

Puntuación neta

8.33 pts

Certeza

7.0%

Correctas / Incorrectas

42 / 101

Coste total

$1.98

Rendimiento General

(vs. media)
Certeza

7.0%

avg: 80.6%

Puntuación neta

8.33 pts

avg: 453.30 pts

Aciertos

42

avg: 483

Fallos

101

avg: 90

Coste total

$1.98

avg: $9.58

Tiempo promedio de respuesta

69.0s

avg: 17.9s

Tokens salientes

1.4M

avg: 1.3M

Tokens de razonamiento

0

avg: 898K

Confianza promedio

22.8%

avg: 95.4%

Desglose por Examen

MIR 2024
320
Correctas
7
Incorrectas
37
Certeza
3.5%
Puntuación neta
0.00
MIR 2025
316
Correctas
17
Incorrectas
41
Certeza
8.5%
Puntuación neta
3.33
MIR 2026
317
Correctas
18
Incorrectas
23
Certeza
9.0%
Puntuación neta
10.33