MedicalBenchmark
Meta: Llama 3.2 3B Instruct provider

Llama 3.2 3B Instruct

305

#305 de 319 modelosMIR 2025

Pontuação líquida

28.66 pts

Exatidão

32.0%

Corretas / Incorretas

64 / 106

Custo total

$0.01

Desempenho Geral

(vs. média)
Exatidão

32.0%

avg: 77.9%

Pontuação líquida

28.66 pts

avg: 143.96 pts

Acertos

64

avg: 156

Erros

106

avg: 35

Custo total

$0.01

avg: $3.36

Tempo médio de resposta

19.5s

avg: 19.0s

Tokens de saída

113K

avg: 430K

Tokens de raciocínio

0

avg: 306K

Confiança média

82.5%

avg: 95.2%

Desagregação por Disciplina

Alergologia
Acertos
1
Erros
3
Sem resposta
0
Exatidão
25.0%
Média
87.9%
Anestesiologia e Reanimação
Acertos
1
Erros
3
Sem resposta
2
Exatidão
16.7%
Média
82.3%
Cardiologia
Acertos
3
Erros
14
Sem resposta
5
Exatidão
13.6%
Média
78.6%
Cuidados Paliativos
Acertos
2
Erros
1
Sem resposta
1
Exatidão
50.0%
Média
78.6%
Dermatologia
Acertos
4
Erros
7
Sem resposta
1
Exatidão
33.3%
Média
69.4%
Doenças Infecciosas
Acertos
11
Erros
12
Sem resposta
4
Exatidão
40.7%
Média
74.9%
Endocrinologia e Nutrição
Acertos
9
Erros
4
Sem resposta
3
Exatidão
56.3%
Média
83.5%
Epidemiologia
Acertos
2
Erros
4
Sem resposta
1
Exatidão
28.6%
Média
69.1%
Estatística
Acertos
0
Erros
2
Sem resposta
1
Exatidão
0.0%
Média
76.6%
Farmacologia
Acertos
6
Erros
9
Sem resposta
2
Exatidão
35.3%
Média
74.1%
Gastrenterologia
Acertos
3
Erros
15
Sem resposta
3
Exatidão
14.3%
Média
74.1%
Genética
Acertos
1
Erros
3
Sem resposta
2
Exatidão
16.7%
Média
69.5%
Geriatria
Acertos
5
Erros
5
Sem resposta
1
Exatidão
45.5%
Média
77.5%
Ginecologia e Obstetrícia
Acertos
8
Erros
5
Sem resposta
6
Exatidão
42.1%
Média
86.7%
Hematologia
Acertos
4
Erros
5
Sem resposta
2
Exatidão
36.4%
Média
82.7%
Imunologia
Acertos
5
Erros
3
Sem resposta
1
Exatidão
55.6%
Média
83.3%
Medicina Legal e Bioética
Acertos
3
Erros
2
Sem resposta
0
Exatidão
60.0%
Média
68.4%
Nefrologia
Acertos
7
Erros
6
Sem resposta
1
Exatidão
50.0%
Média
84.8%
Neurologia
Acertos
7
Erros
7
Sem resposta
6
Exatidão
35.0%
Média
77.3%
Oftalmologia
Acertos
1
Erros
3
Sem resposta
1
Exatidão
20.0%
Média
74.2%
Oncologia Médica
Acertos
11
Erros
11
Sem resposta
3
Exatidão
44.0%
Média
87.2%
ORL
Acertos
0
Erros
7
Sem resposta
1
Exatidão
0.0%
Média
74.8%
Pediatria
Acertos
9
Erros
14
Sem resposta
3
Exatidão
34.6%
Média
71.9%
Planeamento e Gestão em Saúde
Acertos
0
Erros
2
Sem resposta
0
Exatidão
0.0%
Média
82.6%
Pneumologia
Acertos
3
Erros
10
Sem resposta
1
Exatidão
21.4%
Média
80.4%
Psiquiatria
Acertos
3
Erros
5
Sem resposta
0
Exatidão
37.5%
Média
83.0%
Radiologia-Urgências
Acertos
2
Erros
11
Sem resposta
1
Exatidão
14.3%
Média
69.4%
Reumatologia
Acertos
6
Erros
8
Sem resposta
1
Exatidão
40.0%
Média
76.6%
Traumatologia
Acertos
10
Erros
7
Sem resposta
1
Exatidão
55.6%
Média
79.3%
Urologia
Acertos
3
Erros
3
Sem resposta
1
Exatidão
42.9%
Média
80.7%

Desagregação por Tipo de Pergunta

Anatomia
Acertos
3
Erros
3
Sem resposta
1
Exatidão
42.9%
Média
78.6%
Bioestatística
Acertos
0
Erros
3
Sem resposta
1
Exatidão
0.0%
Média
79.8%
Diagnóstico
Acertos
31
Erros
43
Sem resposta
14
Exatidão
35.2%
Média
79.9%
Epidemiologia
Acertos
2
Erros
3
Sem resposta
0
Exatidão
40.0%
Média
76.7%
Ética
Acertos
2
Erros
1
Sem resposta
0
Exatidão
66.7%
Média
74.1%
Exames
Acertos
8
Erros
16
Sem resposta
3
Exatidão
29.6%
Média
77.9%
Farmacologia
Acertos
4
Erros
7
Sem resposta
2
Exatidão
30.8%
Média
83.3%
Fisiopatologia
Acertos
11
Erros
13
Sem resposta
3
Exatidão
40.7%
Média
76.1%
Interpretação
Acertos
9
Erros
26
Sem resposta
7
Exatidão
21.4%
Média
70.7%
Legal
Acertos
2
Erros
2
Sem resposta
0
Exatidão
50.0%
Média
64.6%
Prevenção
Acertos
5
Erros
5
Sem resposta
2
Exatidão
41.7%
Média
75.6%
Prognóstico
Acertos
0
Erros
7
Sem resposta
0
Exatidão
0.0%
Média
80.8%
Risco
Acertos
2
Erros
1
Sem resposta
2
Exatidão
40.0%
Média
85.2%
Tratamento
Acertos
24
Erros
45
Sem resposta
12
Exatidão
29.6%
Média
77.3%
#RespostaCorretaEstado
1DB
2A
3DC
4AB
5A
6CC
7AC
8AA
9AA
10BD
11CD
12BD
13AB
14CD
15DAnulada
16AB
17AB
18CA
19BC
20CA
21CB
22AD
23C
24DD
25CC
26BAnulada
27AC
28DAnulada
29CD
30BB
31CD
32DA
33CD
34D
35BB
36BD
37CC
38BC
39DD
40BA
41D
42BC
43BB
44D
45CD
46A
47CA
48AA
49AD
50BB
51DC
52AB
53BD
54DB
55CA
56Anulada
57AC
58BB
59DD
60A
61A
62DD
63CB
64DD
65A
66AA
67BB
68AB
69DB
70BA
71DD
72CA
73CD
74DC
75AA
76CB
77BB
78BB
79C
80C
81C
82D
83AB
84D
85BC
86BC
87A
88BD
89BB
90AA
91BB
92CC
93BB
94CC
95AA
96CC
97D
98BC
99CA
100DC
101AB
102CD
103BA
104BC
105DA
106C
107BB
108BD
109AB
110CC
111CA
112C
113AB
114AD
115CD
116AC
117DA
118D
119AC
120B
121CD
122AC
123CC
124DC
125CD
126AD
127AB
128D
129CA
130BD
131DD
132AA
133AB
134CC
135B
136CC
137BA
138AD
139BD
140AB
141AA
142AA
143BB
144BB
145AD
146CC
147BB
148A
149DA
150DD
151AA
152AA
153BB
154BB
155BB
156C
157AA
158C
159AC
160BA
161AA
162Anulada
163BD
164CC
165DA
166CB
167C
168BD
169DB
170DB
171BC
172BA
173CA
174CB
175DB
176CC
177DC
178AA
179CD
180AA
181CB
182CC
183AB
184BB
185B
186Anulada
187CC
188CD
189DD
190AA
191B
192AA
193AC
194BA
195CA
196AA
197AB
198DC
199CD
200CC
201CB
202A
203DD
204DC
205AB
206CD
207BA
208AC
209CC
210B