MedicalBenchmark
Meta: Llama 3.2 1B Instruct provider

Llama 3.2 1B Instruct

289

#289 de 291 modelosMIR 2024

Puntuación neta

7.33 pts

Certeza

14.5%

Correctas / Incorrectas

29 / 65

Custo total

$0.02

Rendemento Xeral

(vs. media)
Certeza

14.5%

avg: 80.5%

Puntuación neta

7.33 pts

avg: 150.85 pts

Acertos

29

avg: 161

Erros

65

avg: 30

Custo total

$0.02

avg: $3.32

Tempo promedio de resposta

3.6s

avg: 16.4s

Tokens saíntes

101K

avg: 427K

Tokens de razoamento

0

avg: 310K

Confianza promedia

47.8%

avg: 95.4%

Desglose por Materia

Alerxoloxía
Acertos
0
Erros
1
Non contestadas
2
Certeza
0.0%
Media
90.5%
Anestesioloxía e Reanimación
Acertos
0
Erros
0
Non contestadas
4
Certeza
0.0%
Media
87.1%
Cardioloxía
Acertos
1
Erros
11
Non contestadas
9
Certeza
4.8%
Media
79.7%
Coidados Paliativos
Acertos
1
Erros
1
Non contestadas
2
Certeza
25.0%
Media
88.2%
Dermatoloxía
Acertos
2
Erros
5
Non contestadas
7
Certeza
14.3%
Media
80.2%
Endocrinoloxía e Nutrición
Acertos
5
Erros
9
Non contestadas
5
Certeza
26.3%
Media
84.2%
Enfermidades Infecciosas
Acertos
2
Erros
10
Non contestadas
11
Certeza
8.7%
Media
81.8%
Epidemioloxía
Acertos
3
Erros
1
Non contestadas
4
Certeza
37.5%
Media
89.3%
Estatística
Acertos
1
Erros
0
Non contestadas
2
Certeza
33.3%
Media
91.1%
Farmacoloxía
Acertos
4
Erros
10
Non contestadas
9
Certeza
17.4%
Media
85.4%
Gastroenteroloxía
Acertos
1
Erros
6
Non contestadas
15
Certeza
4.5%
Media
70.5%
Hematoloxía
Acertos
2
Erros
4
Non contestadas
7
Certeza
15.4%
Media
81.5%
Inmunoloxía
Acertos
2
Erros
3
Non contestadas
3
Certeza
25.0%
Media
89.1%
Medicina Legal e Bioética
Acertos
0
Erros
0
Non contestadas
2
Certeza
0.0%
Media
91.7%
Nefroloxía
Acertos
1
Erros
6
Non contestadas
6
Certeza
7.7%
Media
80.8%
Neuroloxía
Acertos
3
Erros
6
Non contestadas
13
Certeza
13.6%
Media
83.7%
Oftalmoloxía
Acertos
1
Erros
1
Non contestadas
3
Certeza
20.0%
Media
80.0%
Oncoloxía Médica
Acertos
6
Erros
5
Non contestadas
10
Certeza
28.6%
Media
80.2%
ORL
Acertos
3
Erros
2
Non contestadas
2
Certeza
42.9%
Media
74.4%
Pediatría
Acertos
3
Erros
1
Non contestadas
13
Certeza
17.6%
Media
82.0%
Planificación e Xestión Sanitaria
Acertos
0
Erros
1
Non contestadas
1
Certeza
0.0%
Media
73.2%
Pneumoloxía
Acertos
2
Erros
6
Non contestadas
11
Certeza
10.5%
Media
80.6%
Psiquiatría
Acertos
2
Erros
0
Non contestadas
8
Certeza
20.0%
Media
89.5%
Radioloxía-Urxencias
Acertos
0
Erros
3
Non contestadas
11
Certeza
0.0%
Media
64.9%
Reumatoloxía
Acertos
1
Erros
6
Non contestadas
7
Certeza
7.1%
Media
81.4%
Traumatoloxía
Acertos
2
Erros
7
Non contestadas
6
Certeza
13.3%
Media
74.5%
Uroloxía
Acertos
0
Erros
2
Non contestadas
4
Certeza
0.0%
Media
78.2%
Xenética
Acertos
1
Erros
2
Non contestadas
4
Certeza
14.3%
Media
86.5%
Xeriatría
Acertos
1
Erros
5
Non contestadas
4
Certeza
10.0%
Media
86.9%
Xinecoloxía e Obstetricia
Acertos
3
Erros
4
Non contestadas
7
Certeza
21.4%
Media
81.2%

Desglose por Tipo de Pregunta

Anatomía
Acertos
2
Erros
4
Non contestadas
0
Certeza
33.3%
Media
79.8%
Bioestatística
Acertos
1
Erros
0
Non contestadas
4
Certeza
20.0%
Media
90.7%
Diagnóstico
Acertos
10
Erros
19
Non contestadas
44
Certeza
13.7%
Media
79.2%
Epidemioloxía
Acertos
3
Erros
3
Non contestadas
6
Certeza
25.0%
Media
81.2%
Ética
Acertos
0
Erros
0
Non contestadas
1
Certeza
0.0%
Media
94.5%
Farmacoloxía
Acertos
3
Erros
11
Non contestadas
11
Certeza
12.0%
Media
84.0%
Fisiopatoloxía
Acertos
8
Erros
12
Non contestadas
13
Certeza
24.2%
Media
85.4%
Interpretación
Acertos
3
Erros
9
Non contestadas
25
Certeza
8.1%
Media
69.6%
Prevención
Acertos
3
Erros
5
Non contestadas
4
Certeza
25.0%
Media
89.8%
Probas
Acertos
4
Erros
4
Non contestadas
13
Certeza
19.0%
Media
73.9%
Prognóstico
Acertos
0
Erros
1
Non contestadas
6
Certeza
0.0%
Media
83.9%
Risco
Acertos
0
Erros
4
Non contestadas
9
Certeza
0.0%
Media
83.6%
Tratamento
Acertos
10
Erros
27
Non contestadas
34
Certeza
14.1%
Media
81.3%
#RespostaCorrectaEstado
1AB
2D
3B
4AC
5C
6B
7BD
8C
9A
10D
11D
12A
13BC
14A
15B
16AA
17C
18A
19CB
20C
21AD
22B
23A
24AA
25C
26B
27AC
28CA
29AB
30AC
31AD
32AA
33C
34AB
35BD
36CD
37AA
38AA
39C
40B
41BC
42AD
43CA
44D
45D
46BB
47C
48CC
49CB
50C
51AA
52D
53C
54B
55AC
56DD
57DA
58CA
59A
60AA
61AA
62D
63D
64CAnulada
65D
66BC
67B
68Anulada
69A
70DB
71BB
72D
73B
74C
75AB
76A
77D
78CC
79B
80A
81CC
82C
83B
84C
85AA
86CA
87B
88D
89B
90AA
91D
92A
93C
94B
95CD
96B
97B
98B
99AA
100CB
101BA
102AD
103BB
104D
105B
106C
107C
108B
109D
110BD
111AB
112DC
113BAnulada
114D
115D
116DA
117D
118D
119A
120C
121A
122AB
123BD
124DD
125B
126AD
127A
128B
129D
130C
131AC
132D
133A
134AC
135A
136D
137BA
138AC
139A
140C
141B
142BC
143BA
144BD
145AC
146AC
147C
148A
149C
150CD
151A
152A
153BC
154B
155AD
156C
157CC
158D
159CD
160CB
161B
162AB
163BB
164DB
165A
166C
167AA
168AB
169AC
170A
171D
172B
173A
174B
175CA
176DC
177DC
178DB
179DC
180CAnulada
181AB
182D
183C
184BA
185CC
186D
187A
188DC
189CD
190DD
191BB
192B
193C
194C
195AC
196B
197AA
198B
199CD
200AA
201BB
202D
203B
204DD
205D
206BAnulada
207CA
208BA
209AB
210D