MedicalBenchmark
Meta: Llama 3.1 8B Instruct provider

Llama 3.1 8B Instruct

290

#290 de 319 modelos — MIR 2025

Puntuación neta

53.00 pts

Certeza

39.5%

Correctas / Incorrectas

79 / 78

Coste total

$0.02

Rendimiento General

(vs. media)
Certeza

39.5%

avg: 77.9%

Puntuación neta

53.00 pts

avg: 143.96 pts

Aciertos

79

avg: 156

Fallos

78

avg: 35

Coste total

$0.02

avg: $3.36

Tiempo promedio de respuesta

20.8s

avg: 19.0s

Tokens salientes

234K

avg: 430K

Tokens de razonamiento

0

avg: 306K

Confianza promedio

77.5%

avg: 95.2%

Desglose por Asignatura

Alergología
Aciertos
1
Fallos
3
Vacías
0
Certeza
25.0%
Media
87.9%
Anestesiología y Reanimación
Aciertos
1
Fallos
5
Vacías
0
Certeza
16.7%
Media
82.3%
Cardiología
Aciertos
8
Fallos
8
Vacías
6
Certeza
36.4%
Media
78.6%
Cuidados Paliativos
Aciertos
2
Fallos
2
Vacías
0
Certeza
50.0%
Media
78.6%
Dermatología
Aciertos
9
Fallos
2
Vacías
1
Certeza
75.0%
Media
69.4%
Endocrinología y Nutrición
Aciertos
6
Fallos
8
Vacías
2
Certeza
37.5%
Media
83.5%
Enfermedades Infecciosas
Aciertos
11
Fallos
9
Vacías
7
Certeza
40.7%
Media
74.9%
Epidemiología
Aciertos
2
Fallos
5
Vacías
0
Certeza
28.6%
Media
69.1%
Estadística
Aciertos
1
Fallos
2
Vacías
0
Certeza
33.3%
Media
76.6%
Farmacología
Aciertos
8
Fallos
6
Vacías
3
Certeza
47.1%
Media
74.1%
Gastroenterología
Aciertos
7
Fallos
9
Vacías
5
Certeza
33.3%
Media
74.1%
Genética
Aciertos
0
Fallos
3
Vacías
3
Certeza
0.0%
Media
69.5%
Geriatría
Aciertos
7
Fallos
3
Vacías
1
Certeza
63.6%
Media
77.5%
Ginecología y Obstetricia
Aciertos
9
Fallos
7
Vacías
3
Certeza
47.4%
Media
86.7%
Hematología
Aciertos
5
Fallos
2
Vacías
4
Certeza
45.5%
Media
82.7%
Inmunología
Aciertos
5
Fallos
2
Vacías
2
Certeza
55.6%
Media
83.3%
Medicina Legal y Bioética
Aciertos
4
Fallos
1
Vacías
0
Certeza
80.0%
Media
68.4%
Nefrología
Aciertos
6
Fallos
4
Vacías
4
Certeza
42.9%
Media
84.8%
Neumología
Aciertos
2
Fallos
8
Vacías
4
Certeza
14.3%
Media
80.4%
Neurología
Aciertos
8
Fallos
6
Vacías
6
Certeza
40.0%
Media
77.3%
Oftalmología
Aciertos
2
Fallos
2
Vacías
1
Certeza
40.0%
Media
74.2%
Oncología Médica
Aciertos
16
Fallos
6
Vacías
3
Certeza
64.0%
Media
87.2%
ORL
Aciertos
4
Fallos
1
Vacías
3
Certeza
50.0%
Media
74.8%
Pediatría
Aciertos
14
Fallos
5
Vacías
7
Certeza
53.8%
Media
71.9%
Planificación y Gestión Sanitaria
Aciertos
1
Fallos
1
Vacías
0
Certeza
50.0%
Media
82.6%
Psiquiatría
Aciertos
5
Fallos
3
Vacías
0
Certeza
62.5%
Media
83.0%
Radiología-Urgencias
Aciertos
2
Fallos
9
Vacías
3
Certeza
14.3%
Media
69.4%
Reumatología
Aciertos
7
Fallos
6
Vacías
2
Certeza
46.7%
Media
76.6%
Traumatología
Aciertos
6
Fallos
8
Vacías
4
Certeza
33.3%
Media
79.3%
Urología
Aciertos
4
Fallos
2
Vacías
1
Certeza
57.1%
Media
80.7%

Desglose por Tipo de Pregunta

Anatomía
Aciertos
3
Fallos
3
Vacías
1
Certeza
42.9%
Media
78.6%
Bioestadística
Aciertos
2
Fallos
2
Vacías
0
Certeza
50.0%
Media
79.8%
Diagnóstico
Aciertos
32
Fallos
35
Vacías
21
Certeza
36.4%
Media
79.9%
Epidemiología
Aciertos
2
Fallos
3
Vacías
0
Certeza
40.0%
Media
76.7%
Ética
Aciertos
2
Fallos
1
Vacías
0
Certeza
66.7%
Media
74.1%
Farmacología
Aciertos
7
Fallos
6
Vacías
0
Certeza
53.8%
Media
83.3%
Fisiopatología
Aciertos
9
Fallos
9
Vacías
9
Certeza
33.3%
Media
76.1%
Interpretación
Aciertos
10
Fallos
18
Vacías
14
Certeza
23.8%
Media
70.7%
Legal
Aciertos
3
Fallos
1
Vacías
0
Certeza
75.0%
Media
64.6%
Prevención
Aciertos
5
Fallos
5
Vacías
2
Certeza
41.7%
Media
75.6%
Pronóstico
Aciertos
2
Fallos
4
Vacías
1
Certeza
28.6%
Media
80.8%
Pruebas
Aciertos
8
Fallos
15
Vacías
4
Certeza
29.6%
Media
77.9%
Riesgo
Aciertos
2
Fallos
2
Vacías
1
Certeza
40.0%
Media
85.2%
Tratamiento
Aciertos
37
Fallos
29
Vacías
15
Certeza
45.7%
Media
77.3%
#RespuestaCorrectaEstado
1—B
2—A
3—C
4—B
5—A
6—C
7—C
8AA
9CA
10—D
11BD
12DD
13AB
14DD
15——Anulada
16CB
17—B
18—A
19CC
20BA
21—B
22CD
23AC
24DD
25CC
26C—Anulada
27CC
28D—Anulada
29CD
30—B
31—D
32—A
33—D
34AD
35BB
36DD
37DC
38BC
39DD
40BA
41DD
42CC
43CB
44—D
45BD
46AA
47AA
48DA
49DD
50BB
51DC
52CB
53DD
54DB
55AA
56——Anulada
57CC
58AB
59DD
60BA
61CA
62DD
63BB
64DD
65—A
66—A
67BB
68—B
69CB
70AA
71DD
72CA
73DD
74DC
75AA
76BB
77BB
78BB
79—C
80CC
81CC
82CD
83DB
84DD
85AC
86BC
87BA
88DD
89BB
90DA
91DB
92—C
93BB
94DC
95BA
96CC
97AD
98—C
99—A
100—C
101—B
102CD
103BA
104CC
105AA
106DC
107BB
108—D
109DB
110—C
111BA
112CC
113AB
114—D
115—D
116—C
117CA
118CD
119DC
120AB
121CD
122CC
123CC
124CC
125CD
126BD
127AB
128DD
129BA
130—D
131—D
132CA
133BB
134—C
135CB
136CC
137CA
138DD
139DD
140CB
141AA
142AA
143BB
144BB
145BD
146—C
147BB
148—A
149CA
150—D
151AA
152AA
153—B
154AB
155BB
156CC
157BA
158DC
159AC
160—A
161DA
162——Anulada
163DD
164—C
165CA
166BB
167AC
168BD
169—B
170AB
171BC
172—A
173BA
174BB
175BB
176CC
177CC
178BA
179CD
180AA
181BB
182CC
183DB
184BB
185BB
186D—Anulada
187CC
188CD
189BD
190BA
191CB
192BA
193AC
194BA
195AA
196AA
197BB
198CC
199DD
200CC
201—B
202—A
203DD
204BC
205DB
206DD
207AA
208—C
209CC
210—B