MedicalBenchmark
Mistral Tiny provider

Mistral Tiny

271

#271 de 291 modelosMIR 2024

Pontuação líquida

52.66 pts

Exatidão

43.0%

Corretas / Incorretas

86 / 100

Custo total

$0.05

Desempenho Geral

(vs. média)
Exatidão

43.0%

avg: 80.5%

Pontuação líquida

52.66 pts

avg: 150.85 pts

Acertos

86

avg: 161

Erros

100

avg: 30

Custo total

$0.05

avg: $3.32

Tempo médio de resposta

3.0s

avg: 16.4s

Tokens de saída

92K

avg: 427K

Tokens de raciocínio

0

avg: 310K

Confiança média

92.8%

avg: 95.4%

Desagregação por Disciplina

Alergologia
Acertos
2
Erros
1
Sem resposta
0
Exatidão
66.7%
Média
90.5%
Anestesiologia e Reanimação
Acertos
1
Erros
3
Sem resposta
0
Exatidão
25.0%
Média
87.1%
Cardiologia
Acertos
9
Erros
12
Sem resposta
0
Exatidão
42.9%
Média
79.7%
Cuidados Paliativos
Acertos
2
Erros
1
Sem resposta
1
Exatidão
50.0%
Média
88.2%
Dermatologia
Acertos
4
Erros
9
Sem resposta
1
Exatidão
28.6%
Média
80.2%
Doenças Infecciosas
Acertos
7
Erros
13
Sem resposta
3
Exatidão
30.4%
Média
81.8%
Endocrinologia e Nutrição
Acertos
6
Erros
12
Sem resposta
1
Exatidão
31.6%
Média
84.2%
Epidemiologia
Acertos
6
Erros
2
Sem resposta
0
Exatidão
75.0%
Média
89.3%
Estatística
Acertos
2
Erros
1
Sem resposta
0
Exatidão
66.7%
Média
91.1%
Farmacologia
Acertos
10
Erros
12
Sem resposta
1
Exatidão
43.5%
Média
85.4%
Gastrenterologia
Acertos
10
Erros
10
Sem resposta
2
Exatidão
45.5%
Média
70.5%
Genética
Acertos
3
Erros
4
Sem resposta
0
Exatidão
42.9%
Média
86.5%
Geriatria
Acertos
5
Erros
4
Sem resposta
1
Exatidão
50.0%
Média
86.9%
Ginecologia e Obstetrícia
Acertos
4
Erros
10
Sem resposta
0
Exatidão
28.6%
Média
81.2%
Hematologia
Acertos
5
Erros
5
Sem resposta
3
Exatidão
38.5%
Média
81.5%
Imunologia
Acertos
5
Erros
3
Sem resposta
0
Exatidão
62.5%
Média
89.1%
Medicina Legal e Bioética
Acertos
1
Erros
1
Sem resposta
0
Exatidão
50.0%
Média
91.7%
Nefrologia
Acertos
4
Erros
8
Sem resposta
1
Exatidão
30.8%
Média
80.8%
Neurologia
Acertos
12
Erros
10
Sem resposta
0
Exatidão
54.5%
Média
83.7%
Oftalmologia
Acertos
2
Erros
2
Sem resposta
1
Exatidão
40.0%
Média
80.0%
Oncologia Médica
Acertos
12
Erros
9
Sem resposta
0
Exatidão
57.1%
Média
80.2%
ORL
Acertos
4
Erros
3
Sem resposta
0
Exatidão
57.1%
Média
74.4%
Pediatria
Acertos
6
Erros
9
Sem resposta
2
Exatidão
35.3%
Média
82.0%
Planeamento e Gestão em Saúde
Acertos
1
Erros
0
Sem resposta
1
Exatidão
50.0%
Média
73.2%
Pneumologia
Acertos
10
Erros
7
Sem resposta
2
Exatidão
52.6%
Média
80.6%
Psiquiatria
Acertos
5
Erros
5
Sem resposta
0
Exatidão
50.0%
Média
89.5%
Radiologia-Urgências
Acertos
6
Erros
8
Sem resposta
0
Exatidão
42.9%
Média
64.9%
Reumatologia
Acertos
5
Erros
7
Sem resposta
2
Exatidão
35.7%
Média
81.4%
Traumatologia
Acertos
6
Erros
7
Sem resposta
2
Exatidão
40.0%
Média
74.5%
Urologia
Acertos
4
Erros
2
Sem resposta
0
Exatidão
66.7%
Média
78.2%

Desagregação por Tipo de Pergunta

Anatomia
Acertos
4
Erros
2
Sem resposta
0
Exatidão
66.7%
Média
79.8%
Bioestatística
Acertos
4
Erros
1
Sem resposta
0
Exatidão
80.0%
Média
90.7%
Diagnóstico
Acertos
30
Erros
39
Sem resposta
4
Exatidão
41.1%
Média
79.2%
Epidemiologia
Acertos
6
Erros
4
Sem resposta
2
Exatidão
50.0%
Média
81.2%
Ética
Acertos
1
Erros
0
Sem resposta
0
Exatidão
100.0%
Média
94.5%
Exames
Acertos
7
Erros
12
Sem resposta
2
Exatidão
33.3%
Média
73.9%
Farmacologia
Acertos
11
Erros
12
Sem resposta
2
Exatidão
44.0%
Média
84.0%
Fisiopatologia
Acertos
14
Erros
19
Sem resposta
0
Exatidão
42.4%
Média
85.4%
Interpretação
Acertos
14
Erros
19
Sem resposta
4
Exatidão
37.8%
Média
69.6%
Prevenção
Acertos
8
Erros
4
Sem resposta
0
Exatidão
66.7%
Média
89.8%
Prognóstico
Acertos
3
Erros
3
Sem resposta
1
Exatidão
42.9%
Média
83.9%
Risco
Acertos
3
Erros
9
Sem resposta
1
Exatidão
23.1%
Média
83.6%
Tratamento
Acertos
35
Erros
31
Sem resposta
5
Exatidão
49.3%
Média
81.3%
#RespostaCorretaEstado
1AB
2AD
3BB
4AC
5DC
6BB
7DD
8CC
9BA
10DD
11DD
12AA
13BC
14BA
15AB
16A
17BC
18AA
19BB
20CC
21CD
22B
23A
24CA
25AC
26BB
27AC
28AA
29AB
30DC
31BD
32AA
33AC
34BB
35DD
36BD
37AA
38CA
39CC
40BB
41BC
42AD
43AA
44DD
45AD
46BB
47CC
48CC
49CB
50BC
51AA
52CD
53AC
54DB
55AC
56DD
57AA
58BA
59CA
60AA
61AA
62CD
63DD
64Anulada
65CD
66AC
67CB
68AAnulada
69AA
70BB
71AB
72BD
73CB
74BC
75AB
76A
77AD
78C
79CB
80AA
81BC
82AC
83DB
84CC
85AA
86AA
87AB
88AD
89BB
90AA
91DD
92AA
93BC
94AB
95BD
96BB
97B
98CB
99AA
100CB
101AA
102DD
103BB
104CD
105BB
106BC
107C
108B
109AD
110AD
111AB
112DC
113BAnulada
114BD
115DD
116AA
117DD
118BD
119AA
120AC
121AA
122AB
123CD
124DD
125BB
126DD
127AA
128B
129BD
130DC
131CC
132CD
133CA
134C
135AA
136DD
137A
138CC
139AA
140BC
141BB
142AC
143A
144AD
145BC
146AC
147CC
148AA
149AC
150DD
151AA
152DA
153BC
154BB
155BD
156CC
157C
158CD
159DD
160AB
161BB
162AB
163BB
164DB
165CA
166DC
167AA
168AB
169BC
170AA
171CD
172BB
173AA
174AB
175AA
176DC
177DC
178DB
179CC
180DAnulada
181DB
182DD
183CC
184A
185AC
186BD
187BA
188CC
189BD
190DD
191BB
192BB
193DC
194DC
195AC
196BB
197CA
198BB
199CD
200BA
201AB
202DD
203BB
204DD
205AD
206BAnulada
207DA
208AA
209B
210DD