MedicalBenchmark
Meta: Llama 3.2 1B Instruct provider

Llama 3.2 1B Instruct

289

#289 de 291 modelosMIR 2024

Puntuación neta

7.33 pts

Certeza

14.5%

Correctas / Incorrectas

29 / 65

Coste total

$0.02

Rendimiento General

(vs. media)
Certeza

14.5%

avg: 80.5%

Puntuación neta

7.33 pts

avg: 150.85 pts

Aciertos

29

avg: 161

Fallos

65

avg: 30

Coste total

$0.02

avg: $3.32

Tiempo promedio de respuesta

3.6s

avg: 16.4s

Tokens salientes

101K

avg: 427K

Tokens de razonamiento

0

avg: 310K

Confianza promedio

47.8%

avg: 95.4%

Desglose por Asignatura

Alergología
Aciertos
0
Fallos
1
Vacías
2
Certeza
0.0%
Media
90.5%
Anestesiología y Reanimación
Aciertos
0
Fallos
0
Vacías
4
Certeza
0.0%
Media
87.1%
Cardiología
Aciertos
1
Fallos
11
Vacías
9
Certeza
4.8%
Media
79.7%
Cuidados Paliativos
Aciertos
1
Fallos
1
Vacías
2
Certeza
25.0%
Media
88.2%
Dermatología
Aciertos
2
Fallos
5
Vacías
7
Certeza
14.3%
Media
80.2%
Endocrinología y Nutrición
Aciertos
5
Fallos
9
Vacías
5
Certeza
26.3%
Media
84.2%
Enfermedades Infecciosas
Aciertos
2
Fallos
10
Vacías
11
Certeza
8.7%
Media
81.8%
Epidemiología
Aciertos
3
Fallos
1
Vacías
4
Certeza
37.5%
Media
89.3%
Estadística
Aciertos
1
Fallos
0
Vacías
2
Certeza
33.3%
Media
91.1%
Farmacología
Aciertos
4
Fallos
10
Vacías
9
Certeza
17.4%
Media
85.4%
Gastroenterología
Aciertos
1
Fallos
6
Vacías
15
Certeza
4.5%
Media
70.5%
Genética
Aciertos
1
Fallos
2
Vacías
4
Certeza
14.3%
Media
86.5%
Geriatría
Aciertos
1
Fallos
5
Vacías
4
Certeza
10.0%
Media
86.9%
Ginecología y Obstetricia
Aciertos
3
Fallos
4
Vacías
7
Certeza
21.4%
Media
81.2%
Hematología
Aciertos
2
Fallos
4
Vacías
7
Certeza
15.4%
Media
81.5%
Inmunología
Aciertos
2
Fallos
3
Vacías
3
Certeza
25.0%
Media
89.1%
Medicina Legal y Bioética
Aciertos
0
Fallos
0
Vacías
2
Certeza
0.0%
Media
91.7%
Nefrología
Aciertos
1
Fallos
6
Vacías
6
Certeza
7.7%
Media
80.8%
Neumología
Aciertos
2
Fallos
6
Vacías
11
Certeza
10.5%
Media
80.6%
Neurología
Aciertos
3
Fallos
6
Vacías
13
Certeza
13.6%
Media
83.7%
Oftalmología
Aciertos
1
Fallos
1
Vacías
3
Certeza
20.0%
Media
80.0%
Oncología Médica
Aciertos
6
Fallos
5
Vacías
10
Certeza
28.6%
Media
80.2%
ORL
Aciertos
3
Fallos
2
Vacías
2
Certeza
42.9%
Media
74.4%
Pediatría
Aciertos
3
Fallos
1
Vacías
13
Certeza
17.6%
Media
82.0%
Planificación y Gestión Sanitaria
Aciertos
0
Fallos
1
Vacías
1
Certeza
0.0%
Media
73.2%
Psiquiatría
Aciertos
2
Fallos
0
Vacías
8
Certeza
20.0%
Media
89.5%
Radiología-Urgencias
Aciertos
0
Fallos
3
Vacías
11
Certeza
0.0%
Media
64.9%
Reumatología
Aciertos
1
Fallos
6
Vacías
7
Certeza
7.1%
Media
81.4%
Traumatología
Aciertos
2
Fallos
7
Vacías
6
Certeza
13.3%
Media
74.5%
Urología
Aciertos
0
Fallos
2
Vacías
4
Certeza
0.0%
Media
78.2%

Desglose por Tipo de Pregunta

Anatomía
Aciertos
2
Fallos
4
Vacías
0
Certeza
33.3%
Media
79.8%
Bioestadística
Aciertos
1
Fallos
0
Vacías
4
Certeza
20.0%
Media
90.7%
Diagnóstico
Aciertos
10
Fallos
19
Vacías
44
Certeza
13.7%
Media
79.2%
Epidemiología
Aciertos
3
Fallos
3
Vacías
6
Certeza
25.0%
Media
81.2%
Ética
Aciertos
0
Fallos
0
Vacías
1
Certeza
0.0%
Media
94.5%
Farmacología
Aciertos
3
Fallos
11
Vacías
11
Certeza
12.0%
Media
84.0%
Fisiopatología
Aciertos
8
Fallos
12
Vacías
13
Certeza
24.2%
Media
85.4%
Interpretación
Aciertos
3
Fallos
9
Vacías
25
Certeza
8.1%
Media
69.6%
Prevención
Aciertos
3
Fallos
5
Vacías
4
Certeza
25.0%
Media
89.8%
Pronóstico
Aciertos
0
Fallos
1
Vacías
6
Certeza
0.0%
Media
83.9%
Pruebas
Aciertos
4
Fallos
4
Vacías
13
Certeza
19.0%
Media
73.9%
Riesgo
Aciertos
0
Fallos
4
Vacías
9
Certeza
0.0%
Media
83.6%
Tratamiento
Aciertos
10
Fallos
27
Vacías
34
Certeza
14.1%
Media
81.3%
#RespuestaCorrectaEstado
1AB
2D
3B
4AC
5C
6B
7BD
8C
9A
10D
11D
12A
13BC
14A
15B
16AA
17C
18A
19CB
20C
21AD
22B
23A
24AA
25C
26B
27AC
28CA
29AB
30AC
31AD
32AA
33C
34AB
35BD
36CD
37AA
38AA
39C
40B
41BC
42AD
43CA
44D
45D
46BB
47C
48CC
49CB
50C
51AA
52D
53C
54B
55AC
56DD
57DA
58CA
59A
60AA
61AA
62D
63D
64CAnulada
65D
66BC
67B
68Anulada
69A
70DB
71BB
72D
73B
74C
75AB
76A
77D
78CC
79B
80A
81CC
82C
83B
84C
85AA
86CA
87B
88D
89B
90AA
91D
92A
93C
94B
95CD
96B
97B
98B
99AA
100CB
101BA
102AD
103BB
104D
105B
106C
107C
108B
109D
110BD
111AB
112DC
113BAnulada
114D
115D
116DA
117D
118D
119A
120C
121A
122AB
123BD
124DD
125B
126AD
127A
128B
129D
130C
131AC
132D
133A
134AC
135A
136D
137BA
138AC
139A
140C
141B
142BC
143BA
144BD
145AC
146AC
147C
148A
149C
150CD
151A
152A
153BC
154B
155AD
156C
157CC
158D
159CD
160CB
161B
162AB
163BB
164DB
165A
166C
167AA
168AB
169AC
170A
171D
172B
173A
174B
175CA
176DC
177DC
178DB
179DC
180CAnulada
181AB
182D
183C
184BA
185CC
186D
187A
188DC
189CD
190DD
191BB
192B
193C
194C
195AC
196B
197AA
198B
199CD
200AA
201BB
202D
203B
204DD
205D
206BAnulada
207CA
208BA
209AB
210D