MedicalBenchmark
Meta: Llama 3.2 11B Vision Instruct provider

Llama 3.2 11B Vision Instruct

276

#276 de 290 modelosMIR 2025

Pontuação líquida

29.00 pts

Exatidão

22.5%

Corretas / Incorretas

45 / 48

Custo total

$0.04

Desempenho Geral

(vs. média)
Exatidão

22.5%

avg: 75.9%

Pontuação líquida

29.00 pts

avg: 138.99 pts

Acertos

45

avg: 152

Erros

48

avg: 38

Custo total

$0.04

avg: $3.59

Tempo médio de resposta

50.8s

avg: 18.1s

Tokens de saída

171K

avg: 443K

Tokens de raciocínio

0

avg: 320K

Confiança média

45.4%

avg: 94.7%

Desagregação por Disciplina

Alergologia
Acertos
0
Erros
2
Sem resposta
2
Exatidão
0.0%
Média
86.9%
Anestesiologia e Reanimação
Acertos
3
Erros
1
Sem resposta
2
Exatidão
50.0%
Média
81.3%
Cardiologia
Acertos
1
Erros
4
Sem resposta
17
Exatidão
4.5%
Média
77.4%
Cuidados Paliativos
Acertos
1
Erros
1
Sem resposta
2
Exatidão
25.0%
Média
77.2%
Dermatologia
Acertos
5
Erros
5
Sem resposta
3
Exatidão
38.5%
Média
62.8%
Doenças Infecciosas
Acertos
8
Erros
6
Sem resposta
14
Exatidão
28.6%
Média
71.1%
Endocrinologia e Nutrição
Acertos
4
Erros
1
Sem resposta
11
Exatidão
25.0%
Média
82.5%
Epidemiologia
Acertos
0
Erros
2
Sem resposta
5
Exatidão
0.0%
Média
67.1%
Estatística
Acertos
0
Erros
2
Sem resposta
1
Exatidão
0.0%
Média
74.9%
Farmacologia
Acertos
9
Erros
2
Sem resposta
6
Exatidão
52.9%
Média
73.1%
Gastrenterologia
Acertos
8
Erros
4
Sem resposta
9
Exatidão
38.1%
Média
72.9%
Genética
Acertos
0
Erros
2
Sem resposta
4
Exatidão
0.0%
Média
68.2%
Geriatria
Acertos
3
Erros
3
Sem resposta
5
Exatidão
27.3%
Média
71.2%
Ginecologia e Obstetrícia
Acertos
5
Erros
4
Sem resposta
10
Exatidão
26.3%
Média
85.9%
Hematologia
Acertos
1
Erros
3
Sem resposta
7
Exatidão
9.1%
Média
81.8%
Imunologia
Acertos
3
Erros
2
Sem resposta
4
Exatidão
33.3%
Média
82.5%
Medicina Legal e Bioética
Acertos
1
Erros
2
Sem resposta
2
Exatidão
20.0%
Média
67.2%
Nefrologia
Acertos
3
Erros
4
Sem resposta
8
Exatidão
20.0%
Média
78.2%
Neurologia
Acertos
4
Erros
5
Sem resposta
11
Exatidão
20.0%
Média
76.2%
Oftalmologia
Acertos
0
Erros
1
Sem resposta
4
Exatidão
0.0%
Média
72.6%
Oncologia Médica
Acertos
4
Erros
7
Sem resposta
14
Exatidão
16.0%
Média
86.3%
ORL
Acertos
0
Erros
2
Sem resposta
6
Exatidão
0.0%
Média
73.8%
Pediatria
Acertos
6
Erros
6
Sem resposta
13
Exatidão
24.0%
Média
72.7%
Planeamento e Gestão em Saúde
Acertos
0
Erros
0
Sem resposta
2
Exatidão
0.0%
Média
81.6%
Pneumologia
Acertos
3
Erros
6
Sem resposta
5
Exatidão
21.4%
Média
73.0%
Psiquiatria
Acertos
4
Erros
0
Sem resposta
4
Exatidão
50.0%
Média
82.0%
Radiologia-Urgências
Acertos
4
Erros
4
Sem resposta
6
Exatidão
28.6%
Média
67.9%
Reumatologia
Acertos
2
Erros
5
Sem resposta
7
Exatidão
14.3%
Média
74.6%
Traumatologia
Acertos
2
Erros
5
Sem resposta
11
Exatidão
11.1%
Média
78.2%
Urologia
Acertos
1
Erros
2
Sem resposta
4
Exatidão
14.3%
Média
79.5%

Desagregação por Tipo de Pergunta

Anatomia
Acertos
1
Erros
0
Sem resposta
6
Exatidão
14.3%
Média
77.1%
Bioestatística
Acertos
0
Erros
2
Sem resposta
2
Exatidão
0.0%
Média
78.4%
Diagnóstico
Acertos
19
Erros
23
Sem resposta
47
Exatidão
21.3%
Média
77.9%
Epidemiologia
Acertos
1
Erros
1
Sem resposta
3
Exatidão
20.0%
Média
75.0%
Ética
Acertos
0
Erros
1
Sem resposta
2
Exatidão
0.0%
Média
72.0%
Exames
Acertos
5
Erros
8
Sem resposta
13
Exatidão
19.2%
Média
76.3%
Farmacologia
Acertos
8
Erros
0
Sem resposta
5
Exatidão
61.5%
Média
82.4%
Fisiopatologia
Acertos
5
Erros
9
Sem resposta
13
Exatidão
18.5%
Média
72.6%
Interpretação
Acertos
5
Erros
11
Sem resposta
26
Exatidão
11.9%
Média
69.3%
Legal
Acertos
1
Erros
2
Sem resposta
1
Exatidão
25.0%
Média
63.6%
Prevenção
Acertos
4
Erros
2
Sem resposta
6
Exatidão
33.3%
Média
74.5%
Prognóstico
Acertos
2
Erros
1
Sem resposta
3
Exatidão
33.3%
Média
77.8%
Risco
Acertos
1
Erros
2
Sem resposta
2
Exatidão
20.0%
Média
84.3%
Tratamento
Acertos
19
Erros
19
Sem resposta
44
Exatidão
23.2%
Média
75.2%
#RespostaCorretaEstado
1B
2A
3DC
4AB
5A
6C
7C
8BA
9A
10D
11D
12D
13AB
14BD
15D
16B
17B
18AA
19CC
20DA
21CB
22D
23AC
24BD
25CC
26Anulada
27C
28CAnulada
29D
30CB
31AD
32A
33D
34AD
35BB
36BD
37C
38C
39CD
40BA
41D
42C
43B
44D
45BD
46AA
47A
48AA
49D
50B
51DC
52B
53D
54DB
55A
56Anulada
57C
58B
59D
60BA
61AA
62CD
63BB
64D
65A
66AA
67BB
68B
69B
70AA
71DD
72AA
73D
74C
75AA
76BB
77B
78B
79BC
80C
81C
82D
83BB
84BD
85C
86C
87A
88AD
89BB
90DA
91B
92C
93B
94C
95CA
96CC
97D
98C
99A
100C
101B
102D
103A
104CC
105A
106C
107B
108D
109B
110CC
111A
112BC
113AB
114DD
115CD
116C
117AA
118DD
119C
120BB
121D
122CC
123C
124AC
125BD
126D
127B
128DD
129BA
130D
131DD
132A
133B
134C
135B
136AC
137AA
138D
139DD
140CB
141AA
142A
143B
144B
145D
146C
147CB
148BA
149CA
150AA
151A
152AA
153B
154B
155B
156C
157AA
158CC
159DC
160A
161A
162B
163DD
164C
165A
166B
167C
168D
169B
170B
171CC
172AA
173A
174BB
175AB
176C
177C
178BA
179D
180AA
181AB
182C
183DB
184B
185BB
186Anulada
187C
188DD
189BD
190BA
191CB
192A
193CC
194A
195A
196AA
197B
198DC
199DD
200C
201CB
202A
203D
204CC
205BB
206DD
207A
208C
209CC
210B