MedicalBenchmark
Google: Gemma 3 4B provider

Gemma 3 4B

262

#262 de 291 modelosMIR 2024

Pontuação líquida

62.00 pts

Exatidão

48.0%

Corretas / Incorretas

96 / 102

Custo total

$0.01

Desempenho Geral

(vs. média)
Exatidão

48.0%

avg: 80.5%

Pontuação líquida

62.00 pts

avg: 150.85 pts

Acertos

96

avg: 161

Erros

102

avg: 30

Custo total

$0.01

avg: $3.32

Tempo médio de resposta

12.8s

avg: 16.4s

Tokens de saída

92K

avg: 427K

Tokens de raciocínio

0

avg: 310K

Confiança média

98.8%

avg: 95.4%

Desagregação por Disciplina

Alergologia
Acertos
2
Erros
1
Sem resposta
0
Exatidão
66.7%
Média
90.5%
Anestesiologia e Reanimação
Acertos
1
Erros
3
Sem resposta
0
Exatidão
25.0%
Média
87.1%
Cardiologia
Acertos
11
Erros
10
Sem resposta
0
Exatidão
52.4%
Média
79.7%
Cuidados Paliativos
Acertos
4
Erros
0
Sem resposta
0
Exatidão
100.0%
Média
88.2%
Dermatologia
Acertos
7
Erros
7
Sem resposta
0
Exatidão
50.0%
Média
80.2%
Doenças Infecciosas
Acertos
13
Erros
10
Sem resposta
0
Exatidão
56.5%
Média
81.8%
Endocrinologia e Nutrição
Acertos
9
Erros
9
Sem resposta
1
Exatidão
47.4%
Média
84.2%
Epidemiologia
Acertos
8
Erros
0
Sem resposta
0
Exatidão
100.0%
Média
89.3%
Estatística
Acertos
3
Erros
0
Sem resposta
0
Exatidão
100.0%
Média
91.1%
Farmacologia
Acertos
13
Erros
9
Sem resposta
1
Exatidão
56.5%
Média
85.4%
Gastrenterologia
Acertos
10
Erros
11
Sem resposta
1
Exatidão
45.5%
Média
70.5%
Genética
Acertos
5
Erros
2
Sem resposta
0
Exatidão
71.4%
Média
86.5%
Geriatria
Acertos
6
Erros
4
Sem resposta
0
Exatidão
60.0%
Média
86.9%
Ginecologia e Obstetrícia
Acertos
7
Erros
7
Sem resposta
0
Exatidão
50.0%
Média
81.2%
Hematologia
Acertos
5
Erros
8
Sem resposta
0
Exatidão
38.5%
Média
81.5%
Imunologia
Acertos
6
Erros
1
Sem resposta
1
Exatidão
75.0%
Média
89.1%
Medicina Legal e Bioética
Acertos
1
Erros
1
Sem resposta
0
Exatidão
50.0%
Média
91.7%
Nefrologia
Acertos
6
Erros
7
Sem resposta
0
Exatidão
46.2%
Média
80.8%
Neurologia
Acertos
11
Erros
11
Sem resposta
0
Exatidão
50.0%
Média
83.7%
Oftalmologia
Acertos
1
Erros
4
Sem resposta
0
Exatidão
20.0%
Média
80.0%
Oncologia Médica
Acertos
11
Erros
9
Sem resposta
1
Exatidão
52.4%
Média
80.2%
ORL
Acertos
5
Erros
2
Sem resposta
0
Exatidão
71.4%
Média
74.4%
Pediatria
Acertos
6
Erros
11
Sem resposta
0
Exatidão
35.3%
Média
82.0%
Planeamento e Gestão em Saúde
Acertos
0
Erros
2
Sem resposta
0
Exatidão
0.0%
Média
73.2%
Pneumologia
Acertos
12
Erros
7
Sem resposta
0
Exatidão
63.2%
Média
80.6%
Psiquiatria
Acertos
5
Erros
5
Sem resposta
0
Exatidão
50.0%
Média
89.5%
Radiologia-Urgências
Acertos
5
Erros
9
Sem resposta
0
Exatidão
35.7%
Média
64.9%
Reumatologia
Acertos
7
Erros
7
Sem resposta
0
Exatidão
50.0%
Média
81.4%
Traumatologia
Acertos
3
Erros
12
Sem resposta
0
Exatidão
20.0%
Média
74.5%
Urologia
Acertos
3
Erros
3
Sem resposta
0
Exatidão
50.0%
Média
78.2%

Desagregação por Tipo de Pergunta

Anatomia
Acertos
2
Erros
4
Sem resposta
0
Exatidão
33.3%
Média
79.8%
Bioestatística
Acertos
4
Erros
1
Sem resposta
0
Exatidão
80.0%
Média
90.7%
Diagnóstico
Acertos
31
Erros
42
Sem resposta
0
Exatidão
42.5%
Média
79.2%
Epidemiologia
Acertos
8
Erros
4
Sem resposta
0
Exatidão
66.7%
Média
81.2%
Ética
Acertos
1
Erros
0
Sem resposta
0
Exatidão
100.0%
Média
94.5%
Exames
Acertos
6
Erros
15
Sem resposta
0
Exatidão
28.6%
Média
73.9%
Farmacologia
Acertos
16
Erros
8
Sem resposta
1
Exatidão
64.0%
Média
84.0%
Fisiopatologia
Acertos
17
Erros
15
Sem resposta
1
Exatidão
51.5%
Média
85.4%
Interpretação
Acertos
13
Erros
24
Sem resposta
0
Exatidão
35.1%
Média
69.6%
Prevenção
Acertos
8
Erros
4
Sem resposta
0
Exatidão
66.7%
Média
89.8%
Prognóstico
Acertos
2
Erros
5
Sem resposta
0
Exatidão
28.6%
Média
83.9%
Risco
Acertos
5
Erros
8
Sem resposta
0
Exatidão
38.5%
Média
83.6%
Tratamento
Acertos
37
Erros
33
Sem resposta
1
Exatidão
52.1%
Média
81.3%
#RespostaCorretaEstado
1CB
2CD
3DB
4AC
5BC
6DB
7DD
8CC
9BA
10DD
11DD
12BA
13DC
14DA
15DB
16BA
17AC
18AA
19BB
20AC
21CD
22DB
23AA
24CA
25AC
26BB
27DC
28DA
29AB
30CC
31DD
32DA
33CC
34BB
35DD
36DD
37AA
38A
39CC
40BB
41BC
42AD
43AA
44DD
45DD
46BB
47CC
48CC
49BB
50BC
51AA
52DD
53DC
54CB
55CC
56DD
57BA
58DA
59BA
60BA
61AA
62CD
63DD
64DAnulada
65DD
66BC
67CB
68CAnulada
69AA
70BB
71AB
72DD
73CB
74CC
75BB
76DA
77AD
78DC
79DB
80AA
81DC
82DC
83BB
84CC
85BA
86AA
87BB
88CD
89CB
90AA
91AD
92AA
93BC
94BB
95AD
96BB
97BB
98AB
99BA
100BB
101DA
102DD
103BB
104CD
105DB
106DC
107BC
108DB
109BD
110CD
111DB
112DC
113BAnulada
114DD
115DD
116DA
117DD
118CD
119AA
120CC
121DA
122BB
123DD
124CD
125DB
126DD
127AA
128CB
129BD
130CC
131CC
132AD
133AA
134BC
135BA
136DD
137AA
138DC
139DA
140DC
141BB
142BC
143DA
144CD
145DC
146DC
147AC
148BA
149DC
150DD
151AA
152DA
153C
154AB
155DD
156BC
157DC
158CD
159DD
160CB
161BB
162BB
163BB
164AB
165CA
166CC
167AA
168BB
169CC
170CA
171DD
172BB
173AA
174BB
175AA
176DC
177CC
178DB
179CC
180AAnulada
181AB
182DD
183CC
184AA
185CC
186AD
187DA
188CC
189AD
190DD
191BB
192DB
193CC
194CC
195DC
196BB
197BA
198BB
199CD
200BA
201BB
202DD
203CB
204DD
205BD
206BAnulada
207DA
208DA
209CB
210CD