MedicalBenchmark
Mistral: Mistral 7B Instruct v0.1 provider

Mistral 7B Instruct v0.1

275

#275 de 290 modelosMIR 2025

Pontuação líquida

34.00 pts

Exatidão

32.5%

Corretas / Incorretas

65 / 93

Custo total

$0.03

Desempenho Geral

(vs. média)
Exatidão

32.5%

avg: 75.9%

Pontuação líquida

34.00 pts

avg: 138.99 pts

Acertos

65

avg: 152

Erros

93

avg: 38

Custo total

$0.03

avg: $3.59

Tempo médio de resposta

24.5s

avg: 18.1s

Tokens de saída

79K

avg: 443K

Tokens de raciocínio

0

avg: 320K

Confiança média

78.2%

avg: 94.7%

Desagregação por Disciplina

Alergologia
Acertos
0
Erros
3
Sem resposta
1
Exatidão
0.0%
Média
86.9%
Anestesiologia e Reanimação
Acertos
1
Erros
2
Sem resposta
3
Exatidão
16.7%
Média
81.3%
Cardiologia
Acertos
7
Erros
10
Sem resposta
5
Exatidão
31.8%
Média
77.4%
Cuidados Paliativos
Acertos
2
Erros
1
Sem resposta
1
Exatidão
50.0%
Média
77.2%
Dermatologia
Acertos
3
Erros
7
Sem resposta
3
Exatidão
23.1%
Média
62.8%
Doenças Infecciosas
Acertos
10
Erros
11
Sem resposta
7
Exatidão
35.7%
Média
71.1%
Endocrinologia e Nutrição
Acertos
8
Erros
4
Sem resposta
4
Exatidão
50.0%
Média
82.5%
Epidemiologia
Acertos
2
Erros
2
Sem resposta
3
Exatidão
28.6%
Média
67.1%
Estatística
Acertos
0
Erros
1
Sem resposta
2
Exatidão
0.0%
Média
74.9%
Farmacologia
Acertos
7
Erros
4
Sem resposta
6
Exatidão
41.2%
Média
73.1%
Gastrenterologia
Acertos
4
Erros
13
Sem resposta
4
Exatidão
19.0%
Média
72.9%
Genética
Acertos
2
Erros
3
Sem resposta
1
Exatidão
33.3%
Média
68.2%
Geriatria
Acertos
2
Erros
5
Sem resposta
4
Exatidão
18.2%
Média
71.2%
Ginecologia e Obstetrícia
Acertos
14
Erros
5
Sem resposta
0
Exatidão
73.7%
Média
85.9%
Hematologia
Acertos
3
Erros
4
Sem resposta
4
Exatidão
27.3%
Média
81.8%
Imunologia
Acertos
3
Erros
2
Sem resposta
4
Exatidão
33.3%
Média
82.5%
Medicina Legal e Bioética
Acertos
3
Erros
2
Sem resposta
0
Exatidão
60.0%
Média
67.2%
Nefrologia
Acertos
8
Erros
5
Sem resposta
2
Exatidão
53.3%
Média
78.2%
Neurologia
Acertos
4
Erros
10
Sem resposta
6
Exatidão
20.0%
Média
76.2%
Oftalmologia
Acertos
0
Erros
5
Sem resposta
0
Exatidão
0.0%
Média
72.6%
Oncologia Médica
Acertos
13
Erros
7
Sem resposta
5
Exatidão
52.0%
Média
86.3%
ORL
Acertos
2
Erros
5
Sem resposta
1
Exatidão
25.0%
Média
73.8%
Pediatria
Acertos
9
Erros
10
Sem resposta
6
Exatidão
36.0%
Média
72.7%
Planeamento e Gestão em Saúde
Acertos
1
Erros
0
Sem resposta
1
Exatidão
50.0%
Média
81.6%
Pneumologia
Acertos
4
Erros
7
Sem resposta
3
Exatidão
28.6%
Média
73.0%
Psiquiatria
Acertos
2
Erros
3
Sem resposta
3
Exatidão
25.0%
Média
82.0%
Radiologia-Urgências
Acertos
3
Erros
9
Sem resposta
2
Exatidão
21.4%
Média
67.9%
Reumatologia
Acertos
0
Erros
12
Sem resposta
2
Exatidão
0.0%
Média
74.6%
Traumatologia
Acertos
8
Erros
8
Sem resposta
2
Exatidão
44.4%
Média
78.2%
Urologia
Acertos
2
Erros
5
Sem resposta
0
Exatidão
28.6%
Média
79.5%

Desagregação por Tipo de Pergunta

Anatomia
Acertos
1
Erros
6
Sem resposta
0
Exatidão
14.3%
Média
77.1%
Bioestatística
Acertos
1
Erros
1
Sem resposta
2
Exatidão
25.0%
Média
78.4%
Diagnóstico
Acertos
25
Erros
48
Sem resposta
16
Exatidão
28.1%
Média
77.9%
Epidemiologia
Acertos
2
Erros
0
Sem resposta
3
Exatidão
40.0%
Média
75.0%
Ética
Acertos
2
Erros
1
Sem resposta
0
Exatidão
66.7%
Média
72.0%
Exames
Acertos
9
Erros
12
Sem resposta
5
Exatidão
34.6%
Média
76.3%
Farmacologia
Acertos
4
Erros
3
Sem resposta
6
Exatidão
30.8%
Média
82.4%
Fisiopatologia
Acertos
8
Erros
10
Sem resposta
9
Exatidão
29.6%
Média
72.6%
Interpretação
Acertos
12
Erros
18
Sem resposta
12
Exatidão
28.6%
Média
69.3%
Legal
Acertos
3
Erros
1
Sem resposta
0
Exatidão
75.0%
Média
63.6%
Prevenção
Acertos
7
Erros
3
Sem resposta
2
Exatidão
58.3%
Média
74.5%
Prognóstico
Acertos
2
Erros
3
Sem resposta
1
Exatidão
33.3%
Média
77.8%
Risco
Acertos
2
Erros
1
Sem resposta
2
Exatidão
40.0%
Média
84.3%
Tratamento
Acertos
29
Erros
40
Sem resposta
13
Exatidão
35.4%
Média
75.2%
#RespostaCorretaEstado
1BB
2CA
3CC
4B
5AA
6C
7DC
8A
9AA
10AD
11DD
12D
13AB
14BD
15D
16AB
17CB
18CA
19AC
20A
21DB
22CD
23AC
24BD
25CC
26BAnulada
27AC
28Anulada
29AD
30DB
31AD
32CA
33DD
34AD
35BB
36D
37AC
38AC
39CD
40A
41D
42CC
43BB
44DD
45AD
46A
47AA
48DA
49DD
50BB
51AC
52AB
53CD
54DB
55CA
56BAnulada
57BC
58BB
59DD
60BA
61AA
62DD
63BB
64D
65DA
66AA
67BB
68B
69AB
70A
71CD
72CA
73CD
74DC
75AA
76BB
77B
78AB
79C
80AC
81BC
82AD
83B
84D
85BC
86C
87DA
88CD
89CB
90AA
91AB
92C
93CB
94BC
95BA
96DC
97DD
98DC
99A
100C
101B
102BD
103AA
104C
105AA
106DC
107CB
108DD
109B
110BC
111BA
112BC
113B
114DD
115BD
116C
117AA
118BD
119AC
120AB
121AD
122AC
123CC
124CC
125D
126CD
127AB
128DD
129AA
130DD
131BD
132AA
133BB
134CC
135DB
136CC
137DA
138AD
139DD
140B
141A
142BA
143CB
144B
145BD
146CC
147B
148A
149DA
150AA
151A
152A
153BB
154BB
155BB
156AC
157AA
158C
159BC
160A
161A
162A
163DD
164AC
165BA
166B
167CC
168DD
169BB
170B
171C
172BA
173DA
174AB
175CB
176AC
177CC
178AA
179DD
180AA
181CB
182BC
183AB
184BB
185B
186DAnulada
187CC
188D
189DD
190AA
191CB
192A
193CC
194AA
195AA
196BA
197BB
198AC
199DD
200BC
201BB
202BA
203DD
204AC
205B
206DD
207AA
208BC
209CC
210B