MedicalBenchmark
Mistral: Mistral 7B Instruct v0.3 provider

Mistral 7B Instruct v0.3

264

#264 de 290 modelosMIR 2025

Pontuação líquida

49.33 pts

Exatidão

41.5%

Corretas / Incorretas

83 / 101

Custo total

$0.04

Desempenho Geral

(vs. média)
Exatidão

41.5%

avg: 75.9%

Pontuação líquida

49.33 pts

avg: 138.99 pts

Acertos

83

avg: 152

Erros

101

avg: 38

Custo total

$0.04

avg: $3.59

Tempo médio de resposta

1.9s

avg: 18.1s

Tokens de saída

69K

avg: 443K

Tokens de raciocínio

0

avg: 320K

Confiança média

90.8%

avg: 94.7%

Desagregação por Disciplina

Alergologia
Acertos
1
Erros
3
Sem resposta
0
Exatidão
25.0%
Média
86.9%
Anestesiologia e Reanimação
Acertos
1
Erros
5
Sem resposta
0
Exatidão
16.7%
Média
81.3%
Cardiologia
Acertos
9
Erros
12
Sem resposta
1
Exatidão
40.9%
Média
77.4%
Cuidados Paliativos
Acertos
0
Erros
4
Sem resposta
0
Exatidão
0.0%
Média
77.2%
Dermatologia
Acertos
7
Erros
6
Sem resposta
0
Exatidão
53.8%
Média
62.8%
Doenças Infecciosas
Acertos
13
Erros
12
Sem resposta
3
Exatidão
46.4%
Média
71.1%
Endocrinologia e Nutrição
Acertos
9
Erros
5
Sem resposta
2
Exatidão
56.3%
Média
82.5%
Epidemiologia
Acertos
2
Erros
4
Sem resposta
1
Exatidão
28.6%
Média
67.1%
Estatística
Acertos
0
Erros
2
Sem resposta
1
Exatidão
0.0%
Média
74.9%
Farmacologia
Acertos
9
Erros
8
Sem resposta
0
Exatidão
52.9%
Média
73.1%
Gastrenterologia
Acertos
4
Erros
12
Sem resposta
5
Exatidão
19.0%
Média
72.9%
Genética
Acertos
3
Erros
3
Sem resposta
0
Exatidão
50.0%
Média
68.2%
Geriatria
Acertos
5
Erros
6
Sem resposta
0
Exatidão
45.5%
Média
71.2%
Ginecologia e Obstetrícia
Acertos
12
Erros
7
Sem resposta
0
Exatidão
63.2%
Média
85.9%
Hematologia
Acertos
4
Erros
4
Sem resposta
3
Exatidão
36.4%
Média
81.8%
Imunologia
Acertos
4
Erros
5
Sem resposta
0
Exatidão
44.4%
Média
82.5%
Medicina Legal e Bioética
Acertos
3
Erros
2
Sem resposta
0
Exatidão
60.0%
Média
67.2%
Nefrologia
Acertos
7
Erros
7
Sem resposta
1
Exatidão
46.7%
Média
78.2%
Neurologia
Acertos
10
Erros
9
Sem resposta
1
Exatidão
50.0%
Média
76.2%
Oftalmologia
Acertos
0
Erros
4
Sem resposta
1
Exatidão
0.0%
Média
72.6%
Oncologia Médica
Acertos
17
Erros
8
Sem resposta
0
Exatidão
68.0%
Média
86.3%
ORL
Acertos
3
Erros
4
Sem resposta
1
Exatidão
37.5%
Média
73.8%
Pediatria
Acertos
8
Erros
14
Sem resposta
3
Exatidão
32.0%
Média
72.7%
Planeamento e Gestão em Saúde
Acertos
0
Erros
2
Sem resposta
0
Exatidão
0.0%
Média
81.6%
Pneumologia
Acertos
4
Erros
9
Sem resposta
1
Exatidão
28.6%
Média
73.0%
Psiquiatria
Acertos
5
Erros
3
Sem resposta
0
Exatidão
62.5%
Média
82.0%
Radiologia-Urgências
Acertos
3
Erros
10
Sem resposta
1
Exatidão
21.4%
Média
67.9%
Reumatologia
Acertos
4
Erros
7
Sem resposta
3
Exatidão
28.6%
Média
74.6%
Traumatologia
Acertos
10
Erros
7
Sem resposta
1
Exatidão
55.6%
Média
78.2%
Urologia
Acertos
2
Erros
5
Sem resposta
0
Exatidão
28.6%
Média
79.5%

Desagregação por Tipo de Pergunta

Anatomia
Acertos
3
Erros
3
Sem resposta
1
Exatidão
42.9%
Média
77.1%
Bioestatística
Acertos
0
Erros
3
Sem resposta
1
Exatidão
0.0%
Média
78.4%
Diagnóstico
Acertos
36
Erros
46
Sem resposta
7
Exatidão
40.4%
Média
77.9%
Epidemiologia
Acertos
2
Erros
2
Sem resposta
1
Exatidão
40.0%
Média
75.0%
Ética
Acertos
2
Erros
1
Sem resposta
0
Exatidão
66.7%
Média
72.0%
Exames
Acertos
8
Erros
14
Sem resposta
4
Exatidão
30.8%
Média
76.3%
Farmacologia
Acertos
5
Erros
8
Sem resposta
0
Exatidão
38.5%
Média
82.4%
Fisiopatologia
Acertos
10
Erros
16
Sem resposta
1
Exatidão
37.0%
Média
72.6%
Interpretação
Acertos
17
Erros
22
Sem resposta
3
Exatidão
40.5%
Média
69.3%
Legal
Acertos
3
Erros
1
Sem resposta
0
Exatidão
75.0%
Média
63.6%
Prevenção
Acertos
7
Erros
5
Sem resposta
0
Exatidão
58.3%
Média
74.5%
Prognóstico
Acertos
3
Erros
3
Sem resposta
0
Exatidão
50.0%
Média
77.8%
Risco
Acertos
1
Erros
4
Sem resposta
0
Exatidão
20.0%
Média
84.3%
Tratamento
Acertos
36
Erros
39
Sem resposta
7
Exatidão
43.9%
Média
75.2%
#RespostaCorretaEstado
1BB
2CA
3CC
4AB
5AA
6CC
7AC
8AA
9AA
10AD
11DD
12AD
13BB
14BD
15D
16DB
17AB
18AA
19BC
20DA
21BB
22D
23AC
24BD
25CC
26Anulada
27AC
28AAnulada
29AD
30AB
31AD
32CA
33DD
34AD
35BB
36BD
37AC
38BC
39DD
40CA
41D
42BC
43BB
44CD
45AD
46CA
47AA
48DA
49BD
50BB
51DC
52AB
53AD
54DB
55CA
56BAnulada
57CC
58CB
59DD
60CA
61AA
62DD
63BB
64D
65DA
66AA
67AB
68B
69AB
70A
71DD
72AA
73AD
74DC
75AA
76BB
77BB
78BB
79AC
80CC
81CC
82D
83DB
84BD
85DC
86BC
87BA
88CD
89BB
90AA
91DB
92DC
93BB
94BC
95BA
96CC
97AD
98DC
99AA
100BC
101CB
102DD
103DA
104CC
105AA
106DC
107CB
108DD
109AB
110CC
111AA
112BC
113AB
114AD
115BD
116C
117AA
118CD
119AC
120AB
121D
122AC
123CC
124CC
125CD
126BD
127AB
128AD
129AA
130DD
131BD
132AA
133BB
134CC
135DB
136CC
137DA
138BD
139DD
140BB
141AA
142BA
143BB
144BB
145BD
146C
147AB
148AA
149AA
150AA
151AA
152DA
153BB
154BB
155BB
156CC
157BA
158AC
159CC
160AA
161AA
162A
163DD
164AC
165A
166B
167AC
168DD
169B
170B
171AC
172BA
173DA
174AB
175CB
176C
177CC
178AA
179CD
180AA
181DB
182BC
183DB
184BB
185DB
186BAnulada
187CC
188DD
189AD
190BA
191B
192A
193CC
194AA
195CA
196AA
197BB
198BC
199DD
200CC
201DB
202AA
203DD
204BC
205BB
206CD
207AA
208CC
209CC
210AB