MedicalBenchmark
Anthropic: Claude 3 Haiku provider

Claude 3 Haiku

253

#253 de 319 modelos no ranking geral

Desempenho acumulado em 3 exames MIR

Pontuação líquida

381.66 pts

Exatidão

72.0%

Corretas / Incorretas

432 / 151

Custo total

$0.40

Desempenho Geral

(vs. média)
Exatidão

72.0%

avg: 80.6%

Pontuação líquida

381.66 pts

avg: 453.30 pts

Acertos

432

avg: 483

Erros

151

avg: 90

Custo total

$0.40

avg: $9.58

Tempo médio de resposta

3.3s

avg: 17.9s

Tokens de saída

250K

avg: 1.3M

Tokens de raciocínio

0

avg: 898K

Confiança média

97.3%

avg: 95.4%

Desagregação por Exame

MIR 2024
249
Corretas
152
Incorretas
42
Exatidão
76.0%
Pontuação líquida
138.00
MIR 2025
253
Corretas
134
Incorretas
60
Exatidão
67.0%
Pontuação líquida
114.00
MIR 2026
255
Corretas
146
Incorretas
49
Exatidão
73.0%
Pontuação líquida
129.66