MedicalBenchmark
Meta: Llama 3.2 1B Instruct provider

Llama 3.2 1B Instruct

317

#317 de 320 modelosMIR 2024

Puntuación neta

7.33 pts

Certeza

14.5%

Correctas / Incorrectas

29 / 65

Coste total

$0.02

Rendimiento General

(vs. media)
Certeza

14.5%

avg: 81.3%

Puntuación neta

7.33 pts

avg: 153.08 pts

Aciertos

29

avg: 163

Fallos

65

avg: 29

Coste total

$0.02

avg: $3.09

Tiempo promedio de respuesta

3.6s

avg: 17.7s

Tokens salientes

101K

avg: 414K

Tokens de razonamiento

0

avg: 296K

Confianza promedio

47.8%

avg: 95.7%

Desglose por Asignatura

Alergología
Aciertos
0
Fallos
1
Vacías
2
Certeza
0.0%
Media
90.8%
Anestesiología y Reanimación
Aciertos
0
Fallos
0
Vacías
4
Certeza
0.0%
Media
87.7%
Cardiología
Aciertos
1
Fallos
11
Vacías
9
Certeza
4.8%
Media
80.4%
Cuidados Paliativos
Aciertos
1
Fallos
1
Vacías
2
Certeza
25.0%
Media
88.6%
Dermatología
Aciertos
2
Fallos
5
Vacías
7
Certeza
14.3%
Media
81.0%
Endocrinología y Nutrición
Aciertos
5
Fallos
9
Vacías
5
Certeza
26.3%
Media
85.1%
Enfermedades Infecciosas
Aciertos
2
Fallos
10
Vacías
11
Certeza
8.7%
Media
82.5%
Epidemiología
Aciertos
3
Fallos
1
Vacías
4
Certeza
37.5%
Media
89.7%
Estadística
Aciertos
1
Fallos
0
Vacías
2
Certeza
33.3%
Media
91.6%
Farmacología
Aciertos
4
Fallos
10
Vacías
9
Certeza
17.4%
Media
85.8%
Gastroenterología
Aciertos
1
Fallos
6
Vacías
15
Certeza
4.5%
Media
71.5%
Genética
Aciertos
1
Fallos
2
Vacías
4
Certeza
14.3%
Media
87.1%
Geriatría
Aciertos
1
Fallos
5
Vacías
4
Certeza
10.0%
Media
87.7%
Ginecología y Obstetricia
Aciertos
3
Fallos
4
Vacías
7
Certeza
21.4%
Media
82.0%
Hematología
Aciertos
2
Fallos
4
Vacías
7
Certeza
15.4%
Media
82.4%
Inmunología
Aciertos
2
Fallos
3
Vacías
3
Certeza
25.0%
Media
89.7%
Medicina Legal y Bioética
Aciertos
0
Fallos
0
Vacías
2
Certeza
0.0%
Media
91.8%
Nefrología
Aciertos
1
Fallos
6
Vacías
6
Certeza
7.7%
Media
81.8%
Neumología
Aciertos
2
Fallos
6
Vacías
11
Certeza
10.5%
Media
81.6%
Neurología
Aciertos
3
Fallos
6
Vacías
13
Certeza
13.6%
Media
84.5%
Oftalmología
Aciertos
1
Fallos
1
Vacías
3
Certeza
20.0%
Media
81.3%
Oncología Médica
Aciertos
6
Fallos
5
Vacías
10
Certeza
28.6%
Media
80.9%
ORL
Aciertos
3
Fallos
2
Vacías
2
Certeza
42.9%
Media
75.1%
Pediatría
Aciertos
3
Fallos
1
Vacías
13
Certeza
17.6%
Media
82.9%
Planificación y Gestión Sanitaria
Aciertos
0
Fallos
1
Vacías
1
Certeza
0.0%
Media
75.1%
Psiquiatría
Aciertos
2
Fallos
0
Vacías
8
Certeza
20.0%
Media
90.0%
Radiología-Urgencias
Aciertos
0
Fallos
3
Vacías
11
Certeza
0.0%
Media
66.0%
Reumatología
Aciertos
1
Fallos
6
Vacías
7
Certeza
7.1%
Media
82.4%
Traumatología
Aciertos
2
Fallos
7
Vacías
6
Certeza
13.3%
Media
75.4%
Urología
Aciertos
0
Fallos
2
Vacías
4
Certeza
0.0%
Media
79.0%

Desglose por Tipo de Pregunta

Anatomía
Aciertos
2
Fallos
4
Vacías
0
Certeza
33.3%
Media
81.1%
Bioestadística
Aciertos
1
Fallos
0
Vacías
4
Certeza
20.0%
Media
91.3%
Diagnóstico
Aciertos
10
Fallos
19
Vacías
44
Certeza
13.7%
Media
80.0%
Epidemiología
Aciertos
3
Fallos
3
Vacías
6
Certeza
25.0%
Media
82.1%
Ética
Aciertos
0
Fallos
0
Vacías
1
Certeza
0.0%
Media
94.0%
Farmacología
Aciertos
3
Fallos
11
Vacías
11
Certeza
12.0%
Media
84.7%
Fisiopatología
Aciertos
8
Fallos
12
Vacías
13
Certeza
24.2%
Media
86.1%
Interpretación
Aciertos
3
Fallos
9
Vacías
25
Certeza
8.1%
Media
70.5%
Prevención
Aciertos
3
Fallos
5
Vacías
4
Certeza
25.0%
Media
90.3%
Pronóstico
Aciertos
0
Fallos
1
Vacías
6
Certeza
0.0%
Media
84.6%
Pruebas
Aciertos
4
Fallos
4
Vacías
13
Certeza
19.0%
Media
75.0%
Riesgo
Aciertos
0
Fallos
4
Vacías
9
Certeza
0.0%
Media
84.5%
Tratamiento
Aciertos
10
Fallos
27
Vacías
34
Certeza
14.1%
Media
82.1%
#RespuestaCorrectaEstado
1AB
2D
3B
4AC
5C
6B
7BD
8C
9A
10D
11D
12A
13BC
14A
15B
16AA
17C
18A
19CB
20C
21AD
22B
23A
24AA
25C
26B
27AC
28CA
29AB
30AC
31AD
32AA
33C
34AB
35BD
36CD
37AA
38AA
39C
40B
41BC
42AD
43CA
44D
45D
46BB
47C
48CC
49CB
50C
51AA
52D
53C
54B
55AC
56DD
57DA
58CA
59A
60AA
61AA
62D
63D
64CAnulada
65D
66BC
67B
68Anulada
69A
70DB
71BB
72D
73B
74C
75AB
76A
77D
78CC
79B
80A
81CC
82C
83B
84C
85AA
86CA
87B
88D
89B
90AA
91D
92A
93C
94B
95CD
96B
97B
98B
99AA
100CB
101BA
102AD
103BB
104D
105B
106C
107C
108B
109D
110BD
111AB
112DC
113BAnulada
114D
115D
116DA
117D
118D
119A
120C
121A
122AB
123BD
124DD
125B
126AD
127A
128B
129D
130C
131AC
132D
133A
134AC
135A
136D
137BA
138AC
139A
140C
141B
142BC
143BA
144BD
145AC
146AC
147C
148A
149C
150CD
151A
152A
153BC
154B
155AD
156C
157CC
158D
159CD
160CB
161B
162AB
163BB
164DB
165A
166C
167AA
168AB
169AC
170A
171D
172B
173A
174B
175CA
176DC
177DC
178DB
179DC
180CAnulada
181AB
182D
183C
184BA
185CC
186D
187A
188DC
189CD
190DD
191BB
192B
193C
194C
195AC
196B
197AA
198B
199CD
200AA
201BB
202D
203B
204DD
205D
206BAnulada
207CA
208BA
209AB
210D