MedicalBenchmark
EleutherAI: Llemma 7b provider

Llemma 7b

289

#289 de 290 modelosMIR 2026

Puntuación neta

9.33 pts

Certeza

8.5%

Correctas / Incorrectas

17 / 23

Coste total

$0.68

Rendimiento General

(vs. media)
Certeza

8.5%

avg: 81.6%

Puntuación neta

9.33 pts

avg: 154.00 pts

Aciertos

17

avg: 163

Fallos

23

avg: 28

Coste total

$0.68

avg: $3.33

Tiempo promedio de respuesta

72.4s

avg: 16.2s

Tokens salientes

484K

avg: 430K

Tokens de razonamiento

0

avg: 310K

Confianza promedio

19.4%

avg: 95.1%

Desglose por Asignatura

Alergología
Aciertos
0
Fallos
0
Vacías
1
Certeza
0.0%
Media
96.9%
Anestesiología y Reanimación
Aciertos
0
Fallos
1
Vacías
6
Certeza
0.0%
Media
69.6%
Cardiología
Aciertos
1
Fallos
4
Vacías
20
Certeza
4.0%
Media
77.3%
Cuidados Paliativos
Aciertos
1
Fallos
1
Vacías
4
Certeza
16.7%
Media
80.2%
Dermatología
Aciertos
1
Fallos
0
Vacías
10
Certeza
9.1%
Media
72.3%
Endocrinología y Nutrición
Aciertos
1
Fallos
0
Vacías
14
Certeza
6.7%
Media
84.0%
Enfermedades Infecciosas
Aciertos
2
Fallos
2
Vacías
10
Certeza
14.3%
Media
77.9%
Epidemiología
Aciertos
1
Fallos
1
Vacías
5
Certeza
14.3%
Media
80.2%
Estadística
Aciertos
1
Fallos
1
Vacías
0
Certeza
50.0%
Media
83.8%
Farmacología
Aciertos
4
Fallos
0
Vacías
7
Certeza
36.4%
Media
78.6%
Gastroenterología
Aciertos
2
Fallos
6
Vacías
22
Certeza
6.7%
Media
79.3%
Genética
Aciertos
2
Fallos
0
Vacías
9
Certeza
18.2%
Media
78.7%
Geriatría
Aciertos
2
Fallos
2
Vacías
9
Certeza
15.4%
Media
83.0%
Ginecología y Obstetricia
Aciertos
1
Fallos
1
Vacías
10
Certeza
8.3%
Media
84.3%
Hematología
Aciertos
0
Fallos
0
Vacías
9
Certeza
0.0%
Media
76.6%
Inmunología
Aciertos
0
Fallos
1
Vacías
5
Certeza
0.0%
Media
91.4%
Medicina Legal y Bioética
Aciertos
2
Fallos
0
Vacías
9
Certeza
18.2%
Media
82.9%
Nefrología
Aciertos
0
Fallos
1
Vacías
9
Certeza
0.0%
Media
85.1%
Neumología
Aciertos
1
Fallos
2
Vacías
13
Certeza
6.3%
Media
82.8%
Neurología
Aciertos
0
Fallos
3
Vacías
10
Certeza
0.0%
Media
88.6%
Oftalmología
Aciertos
0
Fallos
0
Vacías
5
Certeza
0.0%
Media
83.7%
Oncología Médica
Aciertos
3
Fallos
4
Vacías
16
Certeza
13.0%
Media
83.0%
ORL
Aciertos
0
Fallos
3
Vacías
5
Certeza
0.0%
Media
84.7%
Pediatría
Aciertos
2
Fallos
3
Vacías
17
Certeza
9.1%
Media
87.6%
Planificación y Gestión Sanitaria
Aciertos
2
Fallos
0
Vacías
8
Certeza
20.0%
Media
78.4%
Psiquiatría
Aciertos
0
Fallos
0
Vacías
8
Certeza
0.0%
Media
87.9%
Radiología-Urgencias
Aciertos
1
Fallos
2
Vacías
10
Certeza
7.7%
Media
67.7%
Reumatología
Aciertos
2
Fallos
0
Vacías
9
Certeza
18.2%
Media
88.4%
Traumatología
Aciertos
1
Fallos
0
Vacías
10
Certeza
9.1%
Media
65.2%
Urología
Aciertos
1
Fallos
1
Vacías
6
Certeza
12.5%
Media
82.5%

Desglose por Tipo de Pregunta

Anatomía
Aciertos
0
Fallos
0
Vacías
3
Certeza
0.0%
Media
82.6%
Bioestadística
Aciertos
1
Fallos
1
Vacías
0
Certeza
50.0%
Media
83.8%
Diagnóstico
Aciertos
5
Fallos
11
Vacías
65
Certeza
6.2%
Media
82.2%
Epidemiología
Aciertos
1
Fallos
1
Vacías
7
Certeza
11.1%
Media
88.7%
Ética
Aciertos
1
Fallos
0
Vacías
5
Certeza
16.7%
Media
92.0%
Farmacología
Aciertos
3
Fallos
2
Vacías
10
Certeza
20.0%
Media
82.3%
Fisiopatología
Aciertos
1
Fallos
1
Vacías
24
Certeza
3.8%
Media
84.3%
Interpretación
Aciertos
3
Fallos
4
Vacías
30
Certeza
8.1%
Media
72.0%
Legal
Aciertos
2
Fallos
0
Vacías
7
Certeza
22.2%
Media
82.4%
Prevención
Aciertos
2
Fallos
1
Vacías
13
Certeza
12.5%
Media
80.6%
Pronóstico
Aciertos
0
Fallos
2
Vacías
3
Certeza
0.0%
Media
93.2%
Pruebas
Aciertos
4
Fallos
7
Vacías
22
Certeza
12.1%
Media
80.3%
Riesgo
Aciertos
2
Fallos
0
Vacías
13
Certeza
13.3%
Media
84.3%
Tratamiento
Aciertos
4
Fallos
10
Vacías
58
Certeza
5.6%
Media
80.1%
#RespuestaCorrectaEstado
1A
2BB
3CD
4D
5B
6C
7B
8D
9D
10AA
11CB
12A
13Anulada
14CC
15A
16C
17C
18D
19B
20B
21B
22C
23B
24A
25AC
26A
27B
28D
29AA
30D
31C
32C
33DB
34B
35DC
36D
37D
38AA
39C
40A
41D
42A
43B
44CB
45AB
46B
47D
48C
49C
50Anulada
51A
52C
53AC
54C
55AA
56A
57A
58A
59B
60B
61C
62B
63B
64Anulada
65C
66CC
67C
68A
69B
70B
71BB
72B
73B
74AA
75C
76C
77A
78D
79A
80D
81AC
82D
83B
84A
85D
86AA
87B
88DB
89B
90C
91A
92C
93D
94C
95C
96B
97AB
98A
99B
100C
101BC
102A
103BC
104CC
105C
106B
107C
108A
109AC
110C
111B
112C
113CC
114D
115B
116D
117C
118B
119A
120A
121C
122B
123AB
124B
125C
126B
127C
128CB
129C
130C
131B
132B
133C
134B
135C
136BB
137D
138B
139Anulada
140D
141A
142Anulada
143A
144D
145C
146C
147B
148C
149AB
150B
151B
152C
153CC
154D
155B
156A
157BD
158B
159C
160A
161AAnulada
162AA
163DC
164DC
165A
166A
167AD
168C
169B
170B
171A
172B
173D
174C
175B
176A
177D
178D
179BB
180C
181B
182C
183D
184D
185B
186D
187D
188C
189C
190B
191D
192D
193C
194C
195D
196AA
197AC
198A
199B
200D
201C
202A
203A
204C
205B
206BC
207A
208DAnulada
209B
210C