MedicalBenchmark
Meta: Llama 3.2 1B Instruct provider

Llama 3.2 1B Instruct

315

#315 de 319 modelosMIR 2025

Pontuação líquida

6.66 pts

Exatidão

14.5%

Corretas / Incorretas

29 / 67

Custo total

$0.03

Desempenho Geral

(vs. média)
Exatidão

14.5%

avg: 77.9%

Pontuação líquida

6.66 pts

avg: 143.96 pts

Acertos

29

avg: 156

Erros

67

avg: 35

Custo total

$0.03

avg: $3.36

Tempo médio de resposta

4.9s

avg: 19.0s

Tokens de saída

121K

avg: 430K

Tokens de raciocínio

0

avg: 306K

Confiança média

47.1%

avg: 95.2%

Desagregação por Disciplina

Alergologia
Acertos
0
Erros
0
Sem resposta
4
Exatidão
0.0%
Média
87.9%
Anestesiologia e Reanimação
Acertos
2
Erros
2
Sem resposta
2
Exatidão
33.3%
Média
82.3%
Cardiologia
Acertos
1
Erros
8
Sem resposta
13
Exatidão
4.5%
Média
78.6%
Cuidados Paliativos
Acertos
0
Erros
1
Sem resposta
3
Exatidão
0.0%
Média
78.6%
Dermatologia
Acertos
1
Erros
4
Sem resposta
7
Exatidão
8.3%
Média
69.4%
Doenças Infecciosas
Acertos
4
Erros
10
Sem resposta
13
Exatidão
14.8%
Média
74.9%
Endocrinologia e Nutrição
Acertos
2
Erros
7
Sem resposta
7
Exatidão
12.5%
Média
83.5%
Epidemiologia
Acertos
1
Erros
4
Sem resposta
2
Exatidão
14.3%
Média
69.1%
Estatística
Acertos
1
Erros
2
Sem resposta
0
Exatidão
33.3%
Média
76.6%
Farmacologia
Acertos
1
Erros
5
Sem resposta
11
Exatidão
5.9%
Média
74.1%
Gastrenterologia
Acertos
4
Erros
10
Sem resposta
7
Exatidão
19.0%
Média
74.1%
Genética
Acertos
3
Erros
1
Sem resposta
2
Exatidão
50.0%
Média
69.5%
Geriatria
Acertos
1
Erros
3
Sem resposta
7
Exatidão
9.1%
Média
77.5%
Ginecologia e Obstetrícia
Acertos
3
Erros
7
Sem resposta
9
Exatidão
15.8%
Média
86.7%
Hematologia
Acertos
3
Erros
2
Sem resposta
6
Exatidão
27.3%
Média
82.7%
Imunologia
Acertos
3
Erros
2
Sem resposta
4
Exatidão
33.3%
Média
83.3%
Medicina Legal e Bioética
Acertos
1
Erros
2
Sem resposta
2
Exatidão
20.0%
Média
68.4%
Nefrologia
Acertos
0
Erros
3
Sem resposta
11
Exatidão
0.0%
Média
84.8%
Neurologia
Acertos
4
Erros
6
Sem resposta
10
Exatidão
20.0%
Média
77.3%
Oftalmologia
Acertos
2
Erros
1
Sem resposta
2
Exatidão
40.0%
Média
74.2%
Oncologia Médica
Acertos
7
Erros
8
Sem resposta
10
Exatidão
28.0%
Média
87.2%
ORL
Acertos
2
Erros
4
Sem resposta
2
Exatidão
25.0%
Média
74.8%
Pediatria
Acertos
4
Erros
11
Sem resposta
11
Exatidão
15.4%
Média
71.9%
Planeamento e Gestão em Saúde
Acertos
0
Erros
2
Sem resposta
0
Exatidão
0.0%
Média
82.6%
Pneumologia
Acertos
0
Erros
5
Sem resposta
9
Exatidão
0.0%
Média
80.4%
Psiquiatria
Acertos
4
Erros
2
Sem resposta
2
Exatidão
50.0%
Média
83.0%
Radiologia-Urgências
Acertos
1
Erros
5
Sem resposta
8
Exatidão
7.1%
Média
69.4%
Reumatologia
Acertos
1
Erros
3
Sem resposta
11
Exatidão
6.7%
Média
76.6%
Traumatologia
Acertos
2
Erros
6
Sem resposta
10
Exatidão
11.1%
Média
79.3%
Urologia
Acertos
0
Erros
4
Sem resposta
3
Exatidão
0.0%
Média
80.7%

Desagregação por Tipo de Pergunta

Anatomia
Acertos
2
Erros
2
Sem resposta
3
Exatidão
28.6%
Média
78.6%
Bioestatística
Acertos
1
Erros
3
Sem resposta
0
Exatidão
25.0%
Média
79.8%
Diagnóstico
Acertos
15
Erros
24
Sem resposta
49
Exatidão
17.0%
Média
79.9%
Epidemiologia
Acertos
1
Erros
3
Sem resposta
1
Exatidão
20.0%
Média
76.7%
Ética
Acertos
0
Erros
1
Sem resposta
2
Exatidão
0.0%
Média
74.1%
Exames
Acertos
5
Erros
11
Sem resposta
11
Exatidão
18.5%
Média
77.9%
Farmacologia
Acertos
3
Erros
4
Sem resposta
6
Exatidão
23.1%
Média
83.3%
Fisiopatologia
Acertos
4
Erros
15
Sem resposta
8
Exatidão
14.8%
Média
76.1%
Interpretação
Acertos
5
Erros
12
Sem resposta
25
Exatidão
11.9%
Média
70.7%
Legal
Acertos
1
Erros
2
Sem resposta
1
Exatidão
25.0%
Média
64.6%
Prevenção
Acertos
2
Erros
4
Sem resposta
6
Exatidão
16.7%
Média
75.6%
Prognóstico
Acertos
1
Erros
4
Sem resposta
2
Exatidão
14.3%
Média
80.8%
Risco
Acertos
0
Erros
4
Sem resposta
1
Exatidão
0.0%
Média
85.2%
Tratamento
Acertos
8
Erros
23
Sem resposta
50
Exatidão
9.9%
Média
77.3%
#RespostaCorretaEstado
1BB
2AA
3AC
4DB
5A
6CC
7BC
8BA
9A
10D
11D
12D
13B
14D
15BAnulada
16B
17B
18A
19C
20A
21B
22D
23C
24AD
25C
26BAnulada
27C
28CAnulada
29AD
30DB
31AD
32A
33DD
34CD
35BB
36AD
37CC
38C
39D
40AA
41CD
42AC
43B
44CD
45AD
46AA
47A
48AA
49DD
50BB
51BC
52B
53BD
54B
55CA
56Anulada
57C
58BB
59D
60A
61A
62AD
63B
64BD
65A
66A
67B
68B
69B
70CA
71D
72AA
73DD
74BC
75BA
76B
77BB
78AB
79C
80AC
81CC
82D
83BB
84AD
85C
86DC
87A
88D
89B
90BA
91B
92AC
93B
94C
95A
96C
97D
98C
99CA
100C
101B
102CD
103BA
104C
105A
106C
107CB
108D
109B
110C
111DA
112C
113B
114BD
115D
116AC
117BA
118CD
119CC
120B
121DD
122C
123C
124CC
125BD
126CD
127BB
128BD
129BA
130D
131D
132BA
133B
134C
135B
136C
137BA
138D
139AD
140DB
141BA
142AA
143B
144BB
145D
146C
147CB
148A
149A
150D
151A
152A
153BB
154CB
155B
156C
157A
158C
159CC
160A
161BA
162BAnulada
163D
164BC
165A
166B
167AC
168D
169B
170CB
171CC
172BA
173A
174B
175B
176CC
177C
178BA
179CD
180AA
181AB
182C
183DB
184AB
185B
186Anulada
187AC
188AD
189D
190CA
191B
192A
193C
194AA
195A
196BA
197B
198C
199D
200BC
201CB
202A
203AD
204C
205AB
206CD
207A
208C
209CC
210B