MedicalBenchmark
Sao10K: Llama 3.1 70B Hanami x1 provider

Llama 3.1 70B Hanami x1

193

#193 de 290 modelosMIR 2026

Pontuação líquida

155.66 pts

Exatidão

81.5%

Corretas / Incorretas

163 / 22

Custo total

$0.61

Desempenho Geral

(vs. média)
Exatidão

81.5%

avg: 81.6%

Pontuação líquida

155.66 pts

avg: 154.00 pts

Acertos

163

avg: 163

Erros

22

avg: 28

Custo total

$0.61

avg: $3.33

Tempo médio de resposta

31.2s

avg: 16.2s

Tokens de saída

103K

avg: 430K

Tokens de raciocínio

0

avg: 310K

Confiança média

91.7%

avg: 95.1%

Desagregação por Disciplina

Alergologia
Acertos
1
Erros
0
Sem resposta
0
Exatidão
100.0%
Média
96.9%
Anestesiologia e Reanimação
Acertos
5
Erros
2
Sem resposta
0
Exatidão
71.4%
Média
69.6%
Cardiologia
Acertos
20
Erros
2
Sem resposta
3
Exatidão
80.0%
Média
77.3%
Cuidados Paliativos
Acertos
4
Erros
2
Sem resposta
0
Exatidão
66.7%
Média
80.2%
Dermatologia
Acertos
9
Erros
1
Sem resposta
1
Exatidão
81.8%
Média
72.3%
Doenças Infecciosas
Acertos
9
Erros
4
Sem resposta
1
Exatidão
64.3%
Média
77.9%
Endocrinologia e Nutrição
Acertos
13
Erros
2
Sem resposta
0
Exatidão
86.7%
Média
84.0%
Epidemiologia
Acertos
4
Erros
1
Sem resposta
2
Exatidão
57.1%
Média
80.2%
Estatística
Acertos
1
Erros
1
Sem resposta
0
Exatidão
50.0%
Média
83.8%
Farmacologia
Acertos
10
Erros
1
Sem resposta
0
Exatidão
90.9%
Média
78.6%
Gastrenterologia
Acertos
21
Erros
5
Sem resposta
4
Exatidão
70.0%
Média
79.3%
Genética
Acertos
7
Erros
2
Sem resposta
2
Exatidão
63.6%
Média
78.7%
Geriatria
Acertos
9
Erros
1
Sem resposta
3
Exatidão
69.2%
Média
83.0%
Ginecologia e Obstetrícia
Acertos
9
Erros
2
Sem resposta
1
Exatidão
75.0%
Média
84.3%
Hematologia
Acertos
7
Erros
2
Sem resposta
0
Exatidão
77.8%
Média
76.6%
Imunologia
Acertos
6
Erros
0
Sem resposta
0
Exatidão
100.0%
Média
91.4%
Medicina Legal e Bioética
Acertos
9
Erros
2
Sem resposta
0
Exatidão
81.8%
Média
82.9%
Nefrologia
Acertos
10
Erros
0
Sem resposta
0
Exatidão
100.0%
Média
85.1%
Neurologia
Acertos
12
Erros
1
Sem resposta
0
Exatidão
92.3%
Média
88.6%
Oftalmologia
Acertos
4
Erros
1
Sem resposta
0
Exatidão
80.0%
Média
83.7%
Oncologia Médica
Acertos
19
Erros
2
Sem resposta
2
Exatidão
82.6%
Média
83.0%
ORL
Acertos
5
Erros
2
Sem resposta
1
Exatidão
62.5%
Média
84.7%
Pediatria
Acertos
20
Erros
2
Sem resposta
0
Exatidão
90.9%
Média
87.6%
Planeamento e Gestão em Saúde
Acertos
6
Erros
2
Sem resposta
2
Exatidão
60.0%
Média
78.4%
Pneumologia
Acertos
14
Erros
2
Sem resposta
0
Exatidão
87.5%
Média
82.8%
Psiquiatria
Acertos
8
Erros
0
Sem resposta
0
Exatidão
100.0%
Média
87.9%
Radiologia-Urgências
Acertos
9
Erros
3
Sem resposta
1
Exatidão
69.2%
Média
67.7%
Reumatologia
Acertos
11
Erros
0
Sem resposta
0
Exatidão
100.0%
Média
88.4%
Traumatologia
Acertos
7
Erros
2
Sem resposta
2
Exatidão
63.6%
Média
65.2%
Urologia
Acertos
7
Erros
1
Sem resposta
0
Exatidão
87.5%
Média
82.5%

Desagregação por Tipo de Pergunta

Anatomia
Acertos
2
Erros
0
Sem resposta
1
Exatidão
66.7%
Média
82.6%
Bioestatística
Acertos
1
Erros
1
Sem resposta
0
Exatidão
50.0%
Média
83.8%
Diagnóstico
Acertos
70
Erros
8
Sem resposta
3
Exatidão
86.4%
Média
82.2%
Epidemiologia
Acertos
7
Erros
1
Sem resposta
1
Exatidão
77.8%
Média
88.7%
Ética
Acertos
5
Erros
1
Sem resposta
0
Exatidão
83.3%
Média
92.0%
Exames
Acertos
24
Erros
4
Sem resposta
5
Exatidão
72.7%
Média
80.3%
Farmacologia
Acertos
14
Erros
1
Sem resposta
0
Exatidão
93.3%
Média
82.3%
Fisiopatologia
Acertos
23
Erros
2
Sem resposta
1
Exatidão
88.5%
Média
84.3%
Interpretação
Acertos
24
Erros
7
Sem resposta
6
Exatidão
64.9%
Média
72.0%
Legal
Acertos
7
Erros
2
Sem resposta
0
Exatidão
77.8%
Média
82.4%
Prevenção
Acertos
10
Erros
2
Sem resposta
4
Exatidão
62.5%
Média
80.6%
Prognóstico
Acertos
5
Erros
0
Sem resposta
0
Exatidão
100.0%
Média
93.2%
Risco
Acertos
11
Erros
2
Sem resposta
2
Exatidão
73.3%
Média
84.3%
Tratamento
Acertos
60
Erros
7
Sem resposta
5
Exatidão
83.3%
Média
80.1%
#RespostaCorretaEstado
1A
2BB
3AD
4DD
5BB
6C
7CB
8D
9DD
10AA
11BB
12CA
13Anulada
14CC
15DA
16CC
17CC
18D
19BB
20BB
21BB
22CC
23B
24AA
25CC
26CA
27B
28DD
29AA
30DD
31C
32CC
33CB
34BB
35DC
36BD
37DD
38AA
39CC
40AA
41DD
42AA
43BB
44BB
45BB
46BB
47DD
48CC
49CC
50AAnulada
51AA
52CC
53CC
54CC
55CA
56AA
57A
58AA
59BB
60BB
61CC
62BB
63BB
64CAnulada
65CC
66DC
67CC
68AA
69BB
70BB
71BB
72BB
73DB
74AA
75CC
76CC
77CA
78DD
79AA
80DD
81CC
82DD
83BB
84AA
85DD
86AA
87BB
88BB
89BB
90CC
91AA
92CC
93DD
94CC
95CC
96BB
97BB
98AA
99BB
100BC
101CC
102AA
103CC
104CC
105CC
106BB
107CC
108AA
109CC
110CC
111AB
112CC
113CC
114DD
115BB
116DD
117CC
118B
119CA
120AA
121CC
122B
123BB
124BB
125CC
126BB
127C
128CB
129CC
130CC
131BB
132AB
133CC
134BB
135CC
136BB
137DD
138CB
139AAnulada
140DD
141AA
142AAnulada
143AA
144DD
145CC
146C
147BB
148CC
149BB
150BB
151BB
152CC
153C
154DD
155B
156AA
157DD
158BB
159CC
160AA
161AAnulada
162AA
163CC
164CC
165AA
166AA
167DD
168CC
169BB
170BB
171AA
172AB
173DD
174CC
175BB
176AA
177DD
178AD
179BB
180CC
181BB
182CC
183DD
184DD
185BB
186DD
187DD
188AC
189CC
190BB
191DD
192DD
193CC
194CC
195DD
196AA
197C
198BA
199BB
200DD
201CC
202AA
203AA
204CC
205BB
206CC
207AA
208BAnulada
209BB
210CC