MedicalBenchmark
Meta: Llama 3.2 1B Instruct provider

Llama 3.2 1B Instruct

315

#315 de 319 modelos — MIR 2025

Pontuação líquida

6.66 pts

Exatidão

14.5%

Corretas / Incorretas

29 / 67

Custo total

$0.03

Desempenho Geral

(vs. média)
Exatidão

14.5%

avg: 77.9%

Pontuação líquida

6.66 pts

avg: 143.96 pts

Acertos

29

avg: 156

Erros

67

avg: 35

Custo total

$0.03

avg: $3.36

Tempo médio de resposta

4.9s

avg: 19.0s

Tokens de saída

121K

avg: 430K

Tokens de raciocínio

0

avg: 306K

Confiança média

47.1%

avg: 95.2%

Desagregação por Disciplina

Alergologia
Acertos
0
Erros
0
Sem resposta
4
Exatidão
0.0%
Média
87.9%
Anestesiologia e Reanimação
Acertos
2
Erros
2
Sem resposta
2
Exatidão
33.3%
Média
82.3%
Cardiologia
Acertos
1
Erros
8
Sem resposta
13
Exatidão
4.5%
Média
78.6%
Cuidados Paliativos
Acertos
0
Erros
1
Sem resposta
3
Exatidão
0.0%
Média
78.6%
Dermatologia
Acertos
1
Erros
4
Sem resposta
7
Exatidão
8.3%
Média
69.4%
Doenças Infecciosas
Acertos
4
Erros
10
Sem resposta
13
Exatidão
14.8%
Média
74.9%
Endocrinologia e Nutrição
Acertos
2
Erros
7
Sem resposta
7
Exatidão
12.5%
Média
83.5%
Epidemiologia
Acertos
1
Erros
4
Sem resposta
2
Exatidão
14.3%
Média
69.1%
Estatística
Acertos
1
Erros
2
Sem resposta
0
Exatidão
33.3%
Média
76.6%
Farmacologia
Acertos
1
Erros
5
Sem resposta
11
Exatidão
5.9%
Média
74.1%
Gastrenterologia
Acertos
4
Erros
10
Sem resposta
7
Exatidão
19.0%
Média
74.1%
Genética
Acertos
3
Erros
1
Sem resposta
2
Exatidão
50.0%
Média
69.5%
Geriatria
Acertos
1
Erros
3
Sem resposta
7
Exatidão
9.1%
Média
77.5%
Ginecologia e Obstetrícia
Acertos
3
Erros
7
Sem resposta
9
Exatidão
15.8%
Média
86.7%
Hematologia
Acertos
3
Erros
2
Sem resposta
6
Exatidão
27.3%
Média
82.7%
Imunologia
Acertos
3
Erros
2
Sem resposta
4
Exatidão
33.3%
Média
83.3%
Medicina Legal e Bioética
Acertos
1
Erros
2
Sem resposta
2
Exatidão
20.0%
Média
68.4%
Nefrologia
Acertos
0
Erros
3
Sem resposta
11
Exatidão
0.0%
Média
84.8%
Neurologia
Acertos
4
Erros
6
Sem resposta
10
Exatidão
20.0%
Média
77.3%
Oftalmologia
Acertos
2
Erros
1
Sem resposta
2
Exatidão
40.0%
Média
74.2%
Oncologia Médica
Acertos
7
Erros
8
Sem resposta
10
Exatidão
28.0%
Média
87.2%
ORL
Acertos
2
Erros
4
Sem resposta
2
Exatidão
25.0%
Média
74.8%
Pediatria
Acertos
4
Erros
11
Sem resposta
11
Exatidão
15.4%
Média
71.9%
Planeamento e Gestão em Saúde
Acertos
0
Erros
2
Sem resposta
0
Exatidão
0.0%
Média
82.6%
Pneumologia
Acertos
0
Erros
5
Sem resposta
9
Exatidão
0.0%
Média
80.4%
Psiquiatria
Acertos
4
Erros
2
Sem resposta
2
Exatidão
50.0%
Média
83.0%
Radiologia-Urgências
Acertos
1
Erros
5
Sem resposta
8
Exatidão
7.1%
Média
69.4%
Reumatologia
Acertos
1
Erros
3
Sem resposta
11
Exatidão
6.7%
Média
76.6%
Traumatologia
Acertos
2
Erros
6
Sem resposta
10
Exatidão
11.1%
Média
79.3%
Urologia
Acertos
0
Erros
4
Sem resposta
3
Exatidão
0.0%
Média
80.7%

Desagregação por Tipo de Pergunta

Anatomia
Acertos
2
Erros
2
Sem resposta
3
Exatidão
28.6%
Média
78.6%
Bioestatística
Acertos
1
Erros
3
Sem resposta
0
Exatidão
25.0%
Média
79.8%
Diagnóstico
Acertos
15
Erros
24
Sem resposta
49
Exatidão
17.0%
Média
79.9%
Epidemiologia
Acertos
1
Erros
3
Sem resposta
1
Exatidão
20.0%
Média
76.7%
Ética
Acertos
0
Erros
1
Sem resposta
2
Exatidão
0.0%
Média
74.1%
Exames
Acertos
5
Erros
11
Sem resposta
11
Exatidão
18.5%
Média
77.9%
Farmacologia
Acertos
3
Erros
4
Sem resposta
6
Exatidão
23.1%
Média
83.3%
Fisiopatologia
Acertos
4
Erros
15
Sem resposta
8
Exatidão
14.8%
Média
76.1%
Interpretação
Acertos
5
Erros
12
Sem resposta
25
Exatidão
11.9%
Média
70.7%
Legal
Acertos
1
Erros
2
Sem resposta
1
Exatidão
25.0%
Média
64.6%
Prevenção
Acertos
2
Erros
4
Sem resposta
6
Exatidão
16.7%
Média
75.6%
Prognóstico
Acertos
1
Erros
4
Sem resposta
2
Exatidão
14.3%
Média
80.8%
Risco
Acertos
0
Erros
4
Sem resposta
1
Exatidão
0.0%
Média
85.2%
Tratamento
Acertos
8
Erros
23
Sem resposta
50
Exatidão
9.9%
Média
77.3%
#RespostaCorretaEstado
1BB
2AA
3AC
4DB
5—A
6CC
7BC
8BA
9—A
10—D
11—D
12—D
13—B
14—D
15B—Anulada
16—B
17—B
18—A
19—C
20—A
21—B
22—D
23—C
24AD
25—C
26B—Anulada
27—C
28C—Anulada
29AD
30DB
31AD
32—A
33DD
34CD
35BB
36AD
37CC
38—C
39—D
40AA
41CD
42AC
43—B
44CD
45AD
46AA
47—A
48AA
49DD
50BB
51BC
52—B
53BD
54—B
55CA
56——Anulada
57—C
58BB
59—D
60—A
61—A
62AD
63—B
64BD
65—A
66—A
67—B
68—B
69—B
70CA
71—D
72AA
73DD
74BC
75BA
76—B
77BB
78AB
79—C
80AC
81CC
82—D
83BB
84AD
85—C
86DC
87—A
88—D
89—B
90BA
91—B
92AC
93—B
94—C
95—A
96—C
97—D
98—C
99CA
100—C
101—B
102CD
103BA
104—C
105—A
106—C
107CB
108—D
109—B
110—C
111DA
112—C
113—B
114BD
115—D
116AC
117BA
118CD
119CC
120—B
121DD
122—C
123—C
124CC
125BD
126CD
127BB
128BD
129BA
130—D
131—D
132BA
133—B
134—C
135—B
136—C
137BA
138—D
139AD
140DB
141BA
142AA
143—B
144BB
145—D
146—C
147CB
148—A
149—A
150—D
151—A
152—A
153BB
154CB
155—B
156—C
157—A
158—C
159CC
160—A
161BA
162B—Anulada
163—D
164BC
165—A
166—B
167AC
168—D
169—B
170CB
171CC
172BA
173—A
174—B
175—B
176CC
177—C
178BA
179CD
180AA
181AB
182—C
183DB
184AB
185—B
186——Anulada
187AC
188AD
189—D
190CA
191—B
192—A
193—C
194AA
195—A
196BA
197—B
198—C
199—D
200BC
201CB
202—A
203AD
204—C
205AB
206CD
207—A
208—C
209CC
210—B