MedicalBenchmark
Google: Gemma 3 12B provider

Gemma 3 12B

256

#256 de 319 modelos no ranking geral

Desempenho acumulado em 3 exames MIR

Pontuação líquida

368.66 pts

Exatidão

71.0%

Corretas / Incorretas

426 / 172

Custo total

$0.08

Desempenho Geral

(vs. média)
Exatidão

71.0%

avg: 80.6%

Pontuação líquida

368.66 pts

avg: 453.30 pts

Acertos

426

avg: 483

Erros

172

avg: 90

Custo total

$0.08

avg: $9.58

Tempo médio de resposta

12.8s

avg: 17.9s

Tokens de saída

269K

avg: 1.3M

Tokens de raciocínio

0

avg: 898K

Confiança média

99.3%

avg: 95.4%

Desagregação por Exame

MIR 2024
259
Corretas
141
Incorretas
58
Exatidão
70.5%
Pontuação líquida
121.66
MIR 2025
250
Corretas
141
Incorretas
58
Exatidão
70.5%
Pontuação líquida
121.66
MIR 2026
258
Corretas
144
Incorretas
56
Exatidão
72.0%
Pontuação líquida
125.33