MedicalBenchmark
Anthropic: Claude 3.5 Haiku provider

Claude 3.5 Haiku

235

#235 de 319 modelos no ranking geral

Desempenho acumulado em 3 exames MIR

Pontuação líquida

432.66 pts

Exatidão

78.7%

Corretas / Incorretas

472 / 118

Custo total

$1.20

Desempenho Geral

(vs. média)
Exatidão

78.7%

avg: 80.6%

Pontuação líquida

432.66 pts

avg: 453.30 pts

Acertos

472

avg: 483

Erros

118

avg: 90

Custo total

$1.20

avg: $9.58

Tempo médio de resposta

7.0s

avg: 17.9s

Tokens de saída

227K

avg: 1.3M

Tokens de raciocínio

0

avg: 898K

Confiança média

97.9%

avg: 95.4%

Desagregação por Exame

MIR 2024
231
Corretas
160
Incorretas
37
Exatidão
80.0%
Pontuação líquida
147.66
MIR 2025
240
Corretas
148
Incorretas
49
Exatidão
74.0%
Pontuação líquida
131.66
MIR 2026
228
Corretas
164
Incorretas
32
Exatidão
82.0%
Pontuação líquida
153.33